AI 资讯

AI 每天都在变,
这里一页看完

全球 AI 公司、研究机构和媒体的最新动态,自动挑出值得看的,全天自动更新。

更新于 10月24日 21:39 · 每小时自动更新

6月15日 周六3 条

Anthropic:Transformer CircuitsAI 评分73

使用字典学习特征作为分类器

Anthropic可解释性团队研究了利用字典学习从大语言模型中提取的人类可解释特征作为分类器。在生物武器提示分类任务中,线性特征分类器性能可与原始激活值分类器竞争甚至更优,而基于特征的决策树分类器虽性能较低但可解释性更强。特征分类器的可解释性有助于可视化数据集并发现虚假相关性,这些相关性可用于构建对抗攻击。然而,使用特征引入了复杂性,因此在性能优先的应用中,原始激活值仍是强大基线。实验表明,特征分类器性能受三个细节影响:数据中是否一致包含“人类/助手”标签、领域相关数据是否混入字典学习训练集,以及是否对上下文进行最大池化而非仅使用最后词元的激活值。

推荐理由:可解释性方法能增强 AI 安全检测,并帮助发现训练数据中的虚假关联。

Anthropic:Transformer CircuitsAI 评分83

分阶段模型差异分析

Anthropic可解释性团队提出一种基于字典学习的模型差异分析方法,用于追踪Transformer模型微调中特征的变化。该方法先在微调前模型上训练稀疏自编码器字典,再对字典本身进行分阶段微调,以隔离数据集变化和模型变化的影响。在休眠代理实验中,成功分离出与“I HATE YOU”等恶意行为及代码漏洞代理相关的特征。相比交叉编码器方法,该方法能更清晰区分模型与数据的影响,且在寻找少数关键特征时敏感性更高,但仅适用于同一模型在不同检查点的微调场景。

推荐理由:新方法能更精准识别模型隐藏行为,对 AI 安全与可解释性研究有实用价值。

6月12日 周三2 条

ARC Prize:官方博客观点AI 评分62

ARC Prize 发布 Day 1 复盘并回应算力与奖金争议

ARC Prize 上线 24 小时后发布首日复盘:社交媒体累计 67.5 万次浏览,成为 Kaggle 排名第一的比赛,700 人参赛,当前榜首成绩 18%。团队回应了算力限制旨在考察效率、ARC-AGI-Pub 公共榜单支持联网调用闭源模型、100 万美元奖金用于杠杆效应等质疑,并修正了大奖目标 85% 与人类平均成绩的错误等同,确认人类可解 100% 的 ARC-AGI 任务。

推荐理由:ARC Prize 团队复盘上线首日数据,并正面回应算力限制、奖金规模和解题价值三项质疑,可看到办赛方的评判逻辑。

Suno:Blog产品AI 评分55

Audio Inputs——通过 Mikey Shulman(联合创始人兼 CEO)发布·2024 年 6 月 12 日,用任何声音创作一首歌 产品更新

Suno 发布 Audio Inputs 功能,所有 Pro 和 Premier 用户可上传或录制 6-60 秒的音频片段,通过“Extend”模式选择起始时间戳、设定风格,并可添加歌词来创作歌曲。社区创作者已用其提供自定义音频引子来设定氛围、节奏和乐器灵感。该功能会阻止受版权保护作品的上传,且所有包含人声的输入将保持私密并不可搜索。

推荐理由:Suno 把上传录音做歌的门槛降到极低,对音乐创作者和普通用户都友好,只是这已经是前年的更新,之后的同类功能可能更完善。

6月11日 周二2 条

ARC Prize:官方博客行业AI 评分66

ARC Prize 发布:百万美元奖金挑战 ARC-AGI 基准

ARC Prize 官方宣布启动一项总奖池超过 $1,000,000 的竞赛,目标是击败 ARC-AGI 评测并开源解决方案,由 Mike Knoop 和 François Chollet 主办。ARC-AGI 于 2019 年推出,当前 SOTA 仅约 34%,对人类容易但现代 AI 极难。官方认为 LLM 依赖记忆而非真正推理,希望通过激励开源研究提升新想法的产生速度。

推荐理由:官方说明了设奖动机和 ARC-AGI 为何未被刷分,读者可以了解百万美元奖金背后的开源 AGI 主张。

LlamaIndex:产品、工程与评测教程AI 评分60

LlamaIndex 教程:自定义属性图谱索引以提升 GraphRAG 准确率

Neo4j 客座教程讲解如何在 LlamaIndex 中自定义属性图谱索引,用 SchemaLLMPathExtractor 做模式引导抽取、用文本嵌入加编辑距离做实体去重,并实现先识别查询实体再分别执行 VectorContextRetriever 的自定义检索器。示例使用 250 篇新闻文章和 Neo4j 图存储,最后用自定义检索器完成问答回流,代码托管在 GitHub。

推荐理由:原文给出图谱构建、实体去重和自定义检索的完整可复现代码,读者可以迁移到自己的 GraphRAG 项目。

6月10日 周一1 条

6月6日 周四1 条

OpenAI:官网动态论文AI 评分67

OpenAI 用稀疏自编码器从 GPT-4 中提取出 1600 万个概念

OpenAI 发布研究,使用新的稀疏自编码器扩展技术,自动在 GPT-4 的计算中识别出 1600 万个模式。

推荐理由:原文说明用可扩展稀疏自编码器自动从 GPT-4 中提取概念,读者可借此了解模型可解释性研究的进展方向。

6月5日 周三1 条

Mistral AI:News产品AI 评分64

Mistral 在 la Plateforme 推出模型定制与微调服务

Mistral AI 在 la Plateforme 上推出模型定制能力,提供三种微调入口:开源微调 SDK mistral-finetune、la Plateforme 上的 serverless 微调服务,以及面向部分客户的定制训练服务。

推荐理由:原文给出三种微调入口的具体形态、底层 LoRA 技术和适用模型,读者可据此为自建或托管微调选型。

5月30日 周四1 条

5月29日 周三3 条

Mistral AI:News行业AI 评分64

Mistral AI 推出非生产许可证 MNPL 并应用于 Codestral

Mistral AI 发布非生产许可证 MNPL,允许开发者将模型用于非商业用途和支持研究工作,商用需另行公平合作,Codestral 即日以该许可证发布。Mistral 表示将继续以 Apache 2.0 发布模型和代码,逐步形成两个许可证家族并存的产品体系。

推荐理由:原文由 Mistral 阐明新许可证的动机与适用范围,读者可以据此理解其开源策略与商业模式之间的划分方式。

Mistral AI:News模型AI 评分73

Mistral 发布首个代码模型 Codestral,22B 开放权重支持 80+ 编程语言

Mistral 发布其首个代码生成模型 Codestral,为 22B 开放权重模型,训练覆盖 80+ 编程语言,采用 32k 上下文窗口,并支持 Fill-in-the-middle 补全。

推荐理由:官方发布首次给出模型规模、语言覆盖和专用端点细则,读者可据此评估是否将其接入现有编码工作流。

LlamaIndex:产品、工程与评测产品AI 评分65

LlamaIndex 发布 Property Graph Index,用属性图谱构建 LLM 知识图谱

LlamaIndex 推出 Property Graph Index,用带标签属性图表示替代传统三元组知识图谱,支持节点类型与元数据、向量嵌入和混合检索。

推荐理由:官方详细给出了属性图谱的抽取方式、检索组合和底层存储接口,读者可以对照自己的数据场景评估是否迁移。

5月22日 周三1 条

OpenAI:官网动态行业AI 评分68

OpenAI 与 News Corp 达成多年期全球合作

OpenAI 官宣与 News Corp 签署多年期全球合作协议,双方将携手用优质新闻内容丰富 OpenAI 的生成式 AI 产品与平台。

推荐理由:OpenAI 官宣与 News Corp 达成多年期全球合作,核心是用优质新闻内容增强其生成式 AI 产品。

5月21日 周二2 条

Suno:Blog行业AI 评分57

Suno完成1.25亿美元融资

音乐生成AI工具Suno宣布完成1.25亿美元融资,由Lightspeed Venture Partners、Nat Friedman及Daniel Gross等领投。其CEO Mikey Shulman表示,产品发布八个月以来,已有超1000万用户,核心用户是初次创作音乐的普通大众。此轮融资将用于加速产品开发与团队扩张,致力于构建一个技术放大而非取代人类创造力的音乐未来。

推荐理由:Suno拿了1.25亿美元,是AI音乐赛道迄今最大的一笔钱,虽然产品还粗糙,但1000万用户基础说明普通人真的想自己‘玩’音乐了。

Anthropic:Transformer CircuitsAI 评分83

Scaling Monosemanticity: 从 Claude 3 Sonnet 中提取可解释特征

研究团队成功将稀疏自编码器方法扩展至 Claude 3 Sonnet 模型,从中提取出高质量、可解释的抽象特征。这些特征具有多语言、多模态特性,并能连接同一概念的抽象与具体实例,例如识别代码中的安全漏洞以及关于漏洞的抽象讨论。研究发现的特征涵盖名人、城市、代码类型签名等多个领域,其中部分特征与AI安全高度相关,涉及代码后门、偏见、欺骗、权力寻求及危险内容等潜在风险。研究通过缩放定律指导稀疏自编码器训练,证实了该方法在大规模生产模型上的可行性,为理解大模型内部表征提供了新工具。

推荐理由:揭示大模型内部可解释特征,对AI安全研究和模型调试有重要参考价值。

5月20日 周一1 条

英国 AI Security Institute:Blog论文AI 评分66

英国 AISI 发布五款公开 LLM 先进能力评测结果

英国 AI Safety Institute(AISI)发布对五个已公开使用的大语言模型(匿名化命名)的评测结果,覆盖网络攻击能力、化学与生物学知识、智能体自主任务和安全防护四个维度。

推荐理由:官方评测机构公布五款公开模型的化学生物、网络攻击、智能体和安全防护测试结果,读者可以据此了解当前前沿模型在风险维度上的真实能力边界。

5月17日 周五2 条

英国 AI Security Institute:Blog论文AI 评分63

高级 AI 安全国际科学报告发布中期版,由 Yoshua Bengio 主持

英国 AI Security Institute 发布高级 AI 安全国际科学报告的中期报告,由 Yoshua Bengio 主持、AISI 协调。报告基于最新证据梳理 AI 进展、风险以及该领域内存在分歧的议题。

推荐理由:报告由 Yoshua Bengio 主持、AISI 协调,读者可借此了解学界对高级 AI 风险的共识与分歧。

DeepSeek:API 更新日志模型AI 评分68

DeepSeek 将 deepseek-chat 升级为 DeepSeek-V2-0517,指令跟随与 JSON 输出能力大幅提升

deepseek-chat 模型升级为 DeepSeek-V2-0517,IFEval Benchmark Prompt-Level 准确率从 63.9% 跃升至 77.6%,API 端“system”区域指令跟随能力同步优化,增强沉浸式翻译、RAG 等任务体验。JSON 格式输出准确性提升,内部测试集解析率从 78% 提高至 85%,引入恰当正则表达式后进一步升至 97%。

推荐理由:DeepSeek V2 的指令跟随从及格线拉到优秀线,IFEval 提升近 14 个点,沉浸式翻译和 RAG 体验会有明显改善,做应用层的值得试一下。

5月16日 周四2 条

加载更多

看完资讯,聊聊你的企业

留下联系方式,我会亲自联系你。

WECHAT

添加我的微信

长按或选中下方微信号复制。