跳到正文
实时
10月9日周四
8月21日周四
  1. Anthropic Research60

    Anthropic与NNSA联合开发核武器风险分类器。

    Anthropic与美国能源部国家核安全管理局(NNSA)以及DOE国家实验室联合开发了一个核相关内容分类器,用于区分涉及核武器开发的对话与核能、医学、政策等正常讨论。

    推荐理由: Anthropic与NNSA联合开发核风险分类器,公开了合成数据验证流程和真实部署中的误报案例。

8月9日周六
7月15日周二
  1. Anthropic Research

    Anthropic 对 Claude 4 进行了详细的网络安全评估

    Anthropic 与 Pattern Labs 合作,对 Claude Opus 4 和 Claude Sonnet 4 的网络安全攻击能力进行了深入评估,结果显示 Opus 在灵活思考和适应挑战方面显著提升,并在漏洞识别和执行复杂攻击链上取得进步。然而,模型在应对意外障碍时仍存在维持长期计划的一致性问题,Pattern Labs 已发布完整评估报告。

7月10日周四
  1. Prime Intellect Blog

    Prime Intellect 发布 SYNTHETIC-2:四百万条协作生成的推理轨迹数据集

    Prime Intellect 发布 SYNTHETIC-2 数据集,包含四百万条经验证的推理轨迹,涵盖迄今最全面的复杂强化学习任务和验证器。该数据集通过全球计算贡献者的管线并行分布式推理协作生成,1,253块 GPU(包括49个8xH200节点、43个8xH100节点及大量消费级3090和4090 GPU)在3天内参与创建。

6月27日周五
  1. Anthropic Research

    Anthropic 让 Claude Sonnet 3.7 运营小型商店:Project Vend 项目及其意义

    Anthropic 与 Andon Labs 合作,让 Claude Sonnet 3.7 运营位于旧金山的自动化商店,测试大语言模型持续运营商业的能力。Claudius(Claude Sonnet 3.7 实例)具备实时网络搜索、邮件(实验性)、笔记记录、Slack 客户交互及自动结账系统价格调整功能,但未能成功运营商店,因多次错误定价、幻觉订单处理及忽略盈利机会。

6月24日周二
6月23日周一
6月13日周五
  1. Anthropic Research72

    Anthropic与CMU研究:配备Incalmo工具包的LLM可在企业级网络实施多阶段攻击

    Anthropic 与卡内基梅隆大学 CyLab 的研究显示,未经网络安全微调的 LLM 在配备名为 Incalmo 的工具包后,可在 25 至 50 台主机的模拟网络中自主完成多阶段攻击,10 个测试网络中有 5 个被完全攻陷、4 个被部分攻陷,而无工具包时几乎全部失败。

    推荐理由: Anthropic与CMU的联合研究给出了带工具与不带工具的成功率对比,读者可据此判断LLM攻击能力的关键变量。

6月12日周四
4月27日周日
  1. Liquid AI Blog65

    有效状态大小(ESS):衡量模型内存利用率的代理指标

    Effective State-Size (ESS) 是一个衡量模型内存利用率的代理指标。通过分析深度学习序列模型(如注意力、SSM、门控卷积)的输入依赖矩阵 T(u),定义 ESS 为 T(u) 子矩阵的秩,揭示模型状态压缩、初始化和特征化、状态调制等关键特性。研究发现,有效调节 ESS 的 LLM 在高召回任务中表现更优。

4月24日周四
3月27日周四
  1. Anthropic Research

    Anthropic 研究如何追踪大型语言模型 Claude 的思考过程。

    Anthropic 发布了两篇新论文,通过构建 AI 显微镜追踪大型语言模型 Claude 的内部机制。研究发现,Claude 在处理多语言句子时存在共享的概念空间,能够提前规划多个单词的输出,并在需要时提供符合用户期望而非逻辑推理的答案。这些发现有助于理解 AI 能力并确保其可靠性,但当前方法仍有局限,需要改进以应对更复杂的模型。

3月13日周四
2月20日周四
  1. Prime Intellect Blog

    Deepseek-R1 生成 SYNTHETIC-1 开源推理数据集,含 200 万条协作推理轨迹

    Deepseek-R1 发布 SYNTHETIC-1 开源推理数据集,含 200 万条协作生成的推理轨迹,涵盖数学、编码和科学任务,通过特定任务验证器确认正确性。发布包含正确与错误推理轨迹的原始数据及 90 万条精选 SFT 子集,为 R1 迄今最大 SFT 数据集,并提供偏好调优数据集。发布 7B 参数的 SYNTHETIC-1-SFT-7B 模型,验证数据集通过监督微调能有效提升模型推理能力。

2月8日周六
2月6日周四
1月28日周二
  1. Prime Intellect Blog

    TOPLOC:一种用于可信验证推理的局部敏感哈希方案

    TOPLOC 通过局部敏感哈希机制检测模型、提示词或计算精度的未授权修改,验证速度比原始推理快 100 倍,每 32 个新 token 的提交存储只需 258 字节(对比 Llama-3.1-8B-Instruct 的 262 KB)。该方案在多种硬件配置、GPU 类型、张量并行维度和注意力核实现下保持鲁棒性,内存开销降低 1000 倍,适用于大规模部署。

1月21日周二
1月6日周一
  1. Prime Intellect Blog

    MetaGene-1:一个用于疫情监测的 7B 参数元基因组基础模型

    MetaGene-1 是一个 7B 参数的元基因组基础模型,在 1.5T DNA/RNA 测序数据上预训练,用于疫情监测和病原体检测。它在病原体检测和元基因组嵌入基准上达到 SOTA,512-token 上下文长度使其适合短序列异常检测,但限制复杂任务应用。模型由 USC、Prime Intellect 和核酸观测站合作开发,已开源。

12月1日周日
10月25日周五
  1. Anthropic Research

    Anthropic 研究:评估特征引导缓解社会偏见的效果

    Anthropic 对 Claude 3 Sonnet 的 29 个与社会偏见相关的特征进行引导实验,发现适度引导可在不损害模型能力的前提下减少偏见,但过度引导可能导致模型能力下降甚至不可用;部分引导能精准影响特定领域评估结果,但特征效果难以仅通过其触发上下文预测,存在脱靶效应;其中一项中性行为特征能有效降低九个维度的偏见而不显著影响能力。

7月11日周四
  1. Prime Intellect Blog

    OpenDiLoCo:一个开源的全球分布式低通信训练框架

    OpenDiLoCo 成功复现并扩展了 DeepMind 的 DiLoCo 实验至 10B 参数模型规模,通过 Hivemind 和 PyTorch FSDP 实现了跨两洲三国的分布式训练,保持 90-95% 计算资源利用率。该框架基于 Hivemind 开源实现,支持资源动态加入退出和容错训练,在 1.5B 参数模型上显著降低 500 倍通信需求的同时保持性能。

7月10日周三
  1. Dify Blog

    DifySandbox 介绍

    DifySandbox 是 Dify 平台提供的代码执行沙箱服务,用于在后台处理 JSON、XML 数据及执行用户自定义代码,同时通过隔离文件系统、数据库和网络来确保安全。它支持 Python 和 Node.js 两种语言执行,采用系统级解决方案而非特定语言沙箱,避免 Docker 容器带来的性能和安全问题。该服务通过限制恶意代码访问核心资源,防止用户代码执行漏洞,保障平台正常运作。

4月23日周二
  1. Prime Intellect Blog

    Prime Intellect 探索全球分布式训练的最新技术

    Prime Intellect 探索全球分布式训练的最新技术,通过聚合全球计算资源,支持研究人员在跨集群分布式训练中训练顶尖 AI 模型。其平台采用分布式低通信训练(DiLoCo)方法,允许在连接较差的设备群组上训练语言模型,每 500 步同步梯度,减少通信量并最大化 GPU 利用率,同时保持对计算规模和变化的适应性。

4月9日周二
12月7日周四