OpenAI 与 Anthropic 如何为金融智能体设计自主性与安全边界
OpenAI 的 Joseph Kim 在 AI Engineer New York 提出模型能力正逼近"有用性阈值",并预测 2027 年智能体可胜任投资想法生成与交易;Anthropic 则围绕 Claude for Financial Advisors 构建身份权限、沙箱审批与持续验证三层信任机制。
OpenAI 的 Joseph Kim 在 AI Engineer New York 提出模型能力正逼近"有用性阈值",并预测 2027 年智能体可胜任投资想法生成与交易;Anthropic 则围绕 Claude for Financial Advisors 构建身份权限、沙箱审批与持续验证三层信任机制。
Google DeepMind 与新加坡政府科技局(GovTech Singapore)合作,基于轻量级 Gemma 模型用本地诈骗对话微调出端侧反诈骗检测模型。
Anthropic 发布报告称,Z.ai 于 8 月发布的开放模型 GLM-5.3 可被任何人自由下载和修改,构成重大网络攻击风险。开放权重模型支持本地运行、重训、微调与内部结构研究,且通常比闭源模型成本更低;但截至发稿,Artificial Analysis LLM 排行榜前八名仍全部为闭源模型。争论核心在于安全与权力分散之间的取舍。
Anthropic 2021 年提出大语言模型应“有用、诚实、无害”,如今拒绝回答已成为 AI 安全的核心机制,企业通过奖励拒答有害提示、惩罚过度拒答来训练模型。但拒绝机制是概率性的,既可能被恶意用户突破,也可能被用来压制合法言论,OpenAI 董事会成员 Zico Kolter 称“界限画在哪里是个大问题”。
AVEVA 首席技术官 Arti Garg 提出,工业 AI 正从预测分析转向基础模型、physical AI 与 agentic AI,部署须以安全、可靠和人类监督为前提。她主张 AI 应增强而非取代关键决策中的人,并以护栏界定自动化边界;一项研究显示工业领域 AI 采用率两年内增长约 78%。她还参与 IEEE 工作组制定衡量 AI 电力、水、碳等环境足迹的标准方法。
GitHub 发布基于 ModernBERT 的通用密钥检测分类器,可在不到 2 毫秒内评估一批候选密钥,并称可让推送保护拦截的密钥数量增加一倍以上。
Google DeepMind 发布前沿模型 Gemini 4 Argon,先通过 Fairwind Program 向受信任的网络安全防御方开放,之后再逐步扩展到开发者、企业和消费者。
推荐理由:官方披露了 Argon 在内部代码迁移、漏洞发现等真实工作流中的具体案例与基准成绩,可据此判断前沿模型落地工程的方式。
Google DeepMind 发布 SynthID Bio,将水印技术用于合成生物学,把不可感知的签名直接嵌入生物代码,并能在合成出的实体蛋白质上验证,同时保持其生物功能。