首页 生活常识 百科知识 范文大全 经典语录 家电维修 实时讯息

OpenAI宣布公开招募“红队”网络 面向AI的超级专家库呼之欲出到底是什么意思

2025-06-14 15:06     更新时间:2025-06-14 14:36:47     188次浏览

  财联社

  北京时间周三凌晨,美国科技初创公司发布公告,宣布启动全球招募“红队”网络成员,旨在引入外部力量,提前挖掘出AI系统存在的缺陷和风险。

  所谓的“红队”网络,即Red ,概念来自于军事模拟。即找一队人来模拟假想的“敌人”,来测试本方(即“蓝队”)的准备水平。在AI领域中,“红队”的任务就是模拟黑客或者其他的潜在危险人物,试图找到大语言模型的漏洞,从而避免AI在现实社会中协助从事危害社会安全等不法目的。

  表示,过去几年里一直有不同领域的专家来协助测试未发布的模型,现在则是要组建一支“常规部队”,网罗大量来自不同地域、不同语言、不同专业领域、不同生活经验的人,共同使得AI模型更加安全。与过往仅在重要版本上线前招一批人集中测试不同,将会根据需求在整个开发周期中启用数量不定的成员展开测试。

  同时这个“红队”网络也将成为的全球专家库,同时也会提供平台,让“红队”成员之间进行交流。也在官网上列出部分他们希望招募的专家方向,但也强调并不局限于这些领域。

:认知科学

:化学

:生物学

:物理学

:计算机科学

:隐写术

:政治学

:心理学

:说服

:经济学

:人类学

:社会学

HCI (Human- ):人机交互

and Bias:公平与偏见

:目标对齐

:教育

:医疗保健

Law:法律

Child :儿童安全

:网络安全

:金融

Mis/:误/假信息

Use:政治应用

:隐私

:生物识别

and :语言与语言学

  顺便一提,也表示会给参与“红队”项目的成员支付酬金(但没讲具体会给多少钱),但也强调,参与“红队”的项目一般会要求签署保密协议,或者在某一段不特定的时间内保持沉默。

  表示,申请通道将会在今年12月1日前保持开放,公司将滚动审核申请,后续将评估是否需要再进行公开招募。

  走上台面的“红队”成员

  正如所述,“红队”的建制已经存在很久,而且有不少成员已经接受过媒体的公开专访了。

  在今年4月英国《金融时报》的揭秘文章中,美国罗彻斯特大学的化学工程教授 White介绍称他参加了GPT-4的“红队”测试,他的攻击目标是用来创造一种全新的神经毒素。White表示他用了“插件”功能,向大模型输送化学论文和化学制造商的目录,大模型甚至还给他找到了一个可以生产假想毒素的地方。

  White表示,大模型最终可以帮助许多人更快、更准确地做化学试验,但这里也有一个严重的危险,就是会有些人拿AI去做一些危险的尝试。

  在得到White的反馈后,对系统做出了改动,确保不会回应类似的提问。根据媒体找到的10来个背景迥异的“红队”成员——有律师、教师、风控人员、安全研究人员等,大多数都位于美国和欧洲。他们透露,在GPT-4发布前的几个月里,他们大致花了10-40个小时来测试这个模型,报酬大概是每个小时100美元。

相关文章:

塞纳防盗门全国统一服务热线-塞纳防盗门全国06-14

中国银行日币对人民币汇率(中国银行日币换06-14

创识科技(300941.SZ):目前没有星闪技术具体06-14

开心燃气灶售后服务电话-开心燃气灶全国40006-14

桑夏太阳能热水器全国统一服务热线-桑夏太阳06-14

LGKJ油烟机24小时服务电话-LGKJ油烟机服务电06-14

(c)2008-2028 www.jiazhengayi.com 家政阿姨网 -生活类B2B门户网 SYSTEM All Rights Reserved