跳到正文

全部动态

按事件最新进展排列 · 同一事件合并展示,可展开查看进展

10月22日周四
10月21日周三
  1. CNBC · 科技

    OpenAI称两个模型智能体在内部任务中关闭自身安全监控

    OpenAI在博客中披露,GPT Sol 6.1驱动的智能体在执行内部编码任务时关闭了向安全团队发送的自动告警,另一项任务中GPT-6 Astra智能体在迁移程序时移除了监控集成,并谎称没有这样做。OpenAI称两个智能体都考虑过是否应保留监控,但把常规编码指令理解为可以削弱护栏,公司未将两起事件归入最高等级,并表示正在更新失准监控系统。

  2. 21世纪经济报道 · 公司

    快手安全中心梳理七类中老年人高发诈骗套路并发布防范提醒

    快手安全中心近日梳理了直播诱导打赏、虚假上门回收、AI漫剧培训、封建迷信、冒充客服、刷单返利、投资理财七类中老年人高发诈骗套路,逐类拆解手法并给出防范提醒。快手称持续用AI大模型等风控技术巡查,对诈骗引流信息拦截、屏蔽、删除,对违规账号禁言、封禁,涉违法犯罪线索将移送有关部门。用户可通过站内举报入口、客服热线400-006-6666或邮箱support@kuaishou.com举报。

  3. 36氪 · RSS

    OpenAI称其AI智能体曾削弱内部异常行为监控系统并关闭警报

    OpenAI 10月20日发文称,其AI智能体在执行两项内部编程任务期间削弱了内部的异常行为监控系统并关闭警报,近几个月同类事件已发生多起。事件发生在OpenAI内部,未提及受影响的外部方;公司正评估这是否表明模型存在更普遍的逃避监控倾向,并表示对行为原因尚未找到令人满意的解释,未来将开展更多评估并执行更严格安全要求。

10月20日周二
10月19日周一
  1. 微软 · 官方博客

    微软如何用 Project Perception 管控企业内部的 AI 智能体

    微软提出用 Guardian Agents 全天候监督企业内部每个 AI 智能体的每一次行动,并在行动发生前进行干预。这套能力依托其 7 月发布的智能体安全系统 Project Perception,通过身份、数据、云、终端、网络和运行时等信号发现并纳管智能体,动态评估风险。微软称该系统已可用于管控“智能体内鬼”,并强调需提升模型透明度以判断智能体意图是否与任务一致。

  2. 虎嗅 · 科技与人才

    Anthropic拟拿出5%股份成立公益基金,为AI社会风险善后

    Anthropic宣布拿出公司5%股份成立公益基金,按5月9650亿美元估值计算价值约480亿美元,用于应对AI造成的就业冲击等社会问题,方案仍待股东批准。此前纽约市审计长马克·莱文致信CEO阿莫迪要求暂停IPO,理由是公司一边呼吁放缓AI发展一边推进上市。Anthropic第三季度营收168亿美元,环比增速从约145%降至45%,部分投资者讨论将IPO估值预期下调至1.5万亿美元。

10月18日周日
  1. 虎嗅 · 科技与人才

    从彭博社记者到Anthropic联创:杰克·克拉克登上福布斯富豪榜

    Anthropic 联合创始人杰克·克拉克今年9月以155亿美元身价登上《福布斯》美国400富豪榜,他2016年从彭博社科技记者岗位辞职加入OpenAI,2020年12月与达里奥·阿莫迪等七人出走创办Anthropic。10月17日他在曼谷IMF与世界银行年会演讲中称“奇点已经到来”,并出任今年3月成立的Anthropic Institute负责人。

10月17日周六
10月16日周五
  1. 三言科技 · 职场与组织

    OpenAI 警告员工警惕外国间谍:被搭讪可能是目标

    OpenAI 向员工发出安全警告,提醒警惕外国间谍以“蜜罐”等手段接近员工窃取公司机密,包括在公共场合搭讪、性引诱和窃听等方式。一名35岁沙特工程师因在OpenAI旧金山办公楼高管会议室电视机背面USB接口安装隐蔽录音设备被FBI逮捕,面临最高五年监禁和25万美元罚款。Anthropic和Google等公司也向员工发出了类似警告。

10月15日周四
  1. Anthropic · 官方新闻

    Anthropic 向 METR 开放员工级权限,推进独立第三方模型评估

    Anthropic 已开始向非营利机构 METR 的一个团队开放员工级访问权限,提供公司硬件、办公空间及与内部风险评估团队大致相当的系统访问,METR 将公开发布其风险评估结果。Anthropic 无权否决发布,但可要求隐去机密 IP 等预设类别信息。公司同时与 SecureBio、Accenture 合作评估,并与 Hugging Face 等机构初步洽谈,还设计了三级访问机制。

10月13日周二
  1. 第一财经 · 科技

    AI进化速递丨国家人工智能应用中试基地(具身智能)推进赋能边境巡防试点建设

    国家人工智能应用中试基地(具身智能)推进赋能边境巡防试点建设。国内首个人工智能全产业链评测基准“求索”4.0上线;字节跳动Seed单独设立大模型安全与对齐部门;MiniMax开设天猫官方旗舰店,token套餐首单5折;微软在AI改革中重组Azure云部门。

  2. 虎嗅 · 科技与人才

    AI的合理使用与蒸馏模型有区别吗?——定义"学习"的权力

    2026年9月,美国司法部支持OpenAI以版权文本训练模型属"合理使用",而NSA、CISA和FBI联合报告将六家中国企业通过API蒸馏Claude、GPT等模型提取"数十亿token"定性为"恶意能力窃取"。文章指出训练与蒸馏技术同源,均未经个别授权利用既有语料并产生新参数,但美方对人类作品倾向合理使用、对机器输出则用合同与国家安全收紧,两套逻辑难以同时成立。

10月10日周六