前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >AI招聘揭秘:名字背后的偏见陷阱!可能影响你的职业生涯?

AI招聘揭秘:名字背后的偏见陷阱!可能影响你的职业生涯?

作者头像
用户5536580
发布2024-07-04 15:15:05
1190
发布2024-07-04 15:15:05
举报
文章被收录于专栏:未来先知未来先知
多年来,公司一直依靠自动筛选系统来帮助招聘经理审查求职者。这引发了许多博客文章,告诉候选人如何使用关键字技巧来让他们的求职信和简历通过这些申请跟踪器。但随着 ChatGPT 的病毒式成功,一套新的人工智能系统被添加到招聘流程中,这给求职者带来了潜在风险。

正如我们对人工智能和招聘的调查所报道的那样,现在有一个家庭手工业使用人工智能聊天机器人来面试和筛选潜在的候选人。LinkedIn 可以说是最受求职者和专业人士欢迎的平台,该公司在一篇博客文章中表示,该公司最近推出了一款新的人工智能聊天机器人,招聘人员可以提示该机器人,以便“更快地找到合格候选人的简短名单” 。去年 4 月,人力资源科技公司 SeekOut推出了一款名为 SeekOut Assist 的招聘工具,该工具使用生成式人工智能来创建特定职位描述的候选人排名列表。 这些服务可能会帮助公司筛选过多的候选人,但存在一个重大问题:偏见。生成式人工智能在维持刻板印象方面有着充分记录的历史,这些刻板印象被融入到用于训练它的在线数据中。例如,让人工智能图像生成器向你展示一位首席执行官,它可能更有可能假设这是一名男性。然而,了解这些偏见如何在招聘等高风险场景中发挥作用是一个挑战。求职者没有办法自己审核雇主的招聘流程,而人工智能系统通常是黑匣子,即使对于构建它们的人来说也是如此。 为了破解黑匣子,我们设计了一项实验,可以系统地测试招聘环境中这些人工智能模型中潜在的嵌入偏见。我们决定重点关注简历中的名字,这些名字已经被一次又一次地证明在 招聘过程中具有重要意义。我们还选择关注 OpenAI 的 GPT,这是最著名的生成式 AI 工具,也是一项已被 SeekOut Assist 等服务使用的技术。 我们复制了招聘工作流程的简化版本,将一组八份虚构简历输入 GPT - 保持所有资格相同,仅更改简历顶部的虚构姓名。然后我们要求该工具告诉我们谁是特定职位列表的最佳候选人。我们要求 GPT 根据财富 500 强公司的四份真实职位清单来评估这些潜在候选人:人力资源业务合作伙伴、高级软件工程师、零售经理和财务分析师。 我们对 GPT-3.5 和 GPT-4 分别执行了 1,000 次,使用了 800 个人口统计上不同的名称:男性和女性各 100 个与黑人、白人、西班牙裔或亚洲人相关的名字。每次我们向 GPT 询问特定工作的最佳人选时,代表特定人群的每份虚构简历都有同等机会被评为最佳候选人。 至关重要的是,我们必须确保每个名字都更有可能映射到种族和性别的特定交叉点。借鉴成熟的 社会科学研究的方法,我们分别从北卡罗来纳州选民登记和美国十年一次的人口普查中计算出每个人群特有的 100 个最流行的名字和 20 个最独特的姓氏。从那时起,每个组的名字和姓氏被随机配对,从而产生 800 个人口统计上不同的名字。美国国家经济研究局 一项关于招聘歧视的研究的作者之一埃文·罗斯表示,研究歧视和偏见的研究人员经常使用具有种族特色的名字来表示种族或族裔,我们从该研究中获得了灵感。罗斯告诉我们,多年来,这种方法已经在美国劳动力和住房市场上发现了种族歧视的一致证据。“这就是为什么名字作为信号确实有用,”他说。在我们自己的实验中,我们发现了基于姓名的歧视的明显迹象。当被要求对简历进行 1,000 次排名时,GPT 3.5 比其他人群更倾向于某些人群中的名字,以至于无法通过用于评估受保护群体的就业歧视的基准。除了按 GPT-4 排名的零售工人外,我们测试的每一份职位列表都发现至少有一个受到不利影响的人口群体。OpenAI 则表示,开箱即用使用 GPT 的结果可能无法反映其客户如何使用这些工具。例如,使用该技术的企业可以选择进一步微调人工智能模型的响应。人工智能公司普遍试图寻找减少系统偏差的方法,OpenAI 也不例外。但问题仍然存在——与此同时,生成式人工智能只会继续进入越来越重要的把关服务。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2024-03-12,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 未来先知 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档