跳到正文
今天10月23日周五14 条
  1. MIT Technology Review · AI15

    如何设计一套可持续演进的 AI 服务框架

    EXL 提出企业 AI 的竞争优势正从选模型转向围绕模型构建的服务框架,即架构、内存管理、调度与推理优化的工程系统。其核心主张是先按工作负载确定约束再定架构,并以 KV cache 随并发与上下文增长导致 GPU 显存瓶颈为例,强调先测量再优化。框架还应便于吸收新模型与硬件变化,使换模型成为评估与配置决策而非架构重建。

  2. AWS Machine Learning Blog42

    Amazon Polly 生成式引擎重大升级:新增 14 种语音、支持印地语和芬兰语

    Amazon Polly 生成式引擎完成升级,新增 14 种语音、覆盖 9 个 locale,并首次正式支持印地语和芬兰语。升级后共提供 57 种生成式语音,覆盖 11 种语言、25 个 locale,并扩展至 AWS GovCloud(US-West),总计 11 个 AWS Region。现有语音名称和 API 调用不变,属于原地升级,价格不变且无需改动代码。

  3. AWS Machine Learning Blog36

    在 Amazon SageMaker AI 上用 Kokoro TTS 为 AI 智能体流式输出低延迟语音

    该方案将 AI 智能体生成的每个句子即时送入部署在 Amazon SageMaker AI 实时端点上的 Kokoro-82M 语音合成模型,让音频在完整回复生成前就开始播放。Kokoro-82M 仅有 8200 万参数,可运行在单台 ml.g5.xlarge GPU 实例上,容器同时提供 POST /invocations 与 WebSocket 双向流两条路径。

10月22日周四
  1. The Decoder78

    Symantec 发现劫持未防护语言模型的攻击智能体

    Symantec 安全研究人员发现一个攻击型 AI 智能体,会劫持互联网上未防护的语言模型,并借助被劫持模型的算力自行发起攻击,算力账单由模型所有者承担。该智能体可无人干预连续执行最多 10 万步,扫描更多目标、利用常见服务器软件漏洞、窃取数据库与凭据并在后台安装挖矿程序,Symantec 将这种盗用他人模型访问权的行为称为 LLMjacking。

    推荐理由:Symantec 拆解了一个劫持他人模型算力的攻击智能体,其五层越狱与自循环流程可供安全从业者对照现有防护。

  2. AWS Machine Learning Blog20

    U.S. Hunger 如何用 Amazon Quick 连接领导层与数据

    美国非营利组织 U.S. Hunger 借助 Amazon Quick 让领导层直接探索组织数据,并通过 Quick Spaces 共享 KPI 定义与财务文档。其数据由 Impact Manager 平台经 SQL Server 每晚 2 AM ET 刷新至 SPICE 内存引擎,目前已有 17 名同事获得访问权限,覆盖高管、技术、Full Cart 项目、财务与合规等团队。

10月21日周三
  1. The Decoder49

    Nvidia 推出 DSX POD 模块化数据中心参考设计,部署时间从六个月缩短至最短 14 天

    Nvidia 在 GTC Berlin 发布 DSX POD,这是围绕 Vera Rubin 系统打造的模块化数据中心参考设计,由 Dell、HPE、Lenovo、Schneider Electric 等伙伴在工厂内完成计算、网络、布线、供电与液冷安装并测试,现场只需接入电力、冷却和网络。Nvidia 称部署时间可从六个月缩短至最短 14 天,首批单元计划于 2027 年初全球出货。