跳到正文

#评测与社区

今日 1 条
今天11月8日周日
  1. 北京智源研究院精选

    浙大博士生推出新一代世界模型MoWorld 2.0

    浙大00后博士生陈天润创办的魔芯科技在乌镇世界互联网大会上发布了新一代通用4D世界模型MoWorld 2.0,该模型将重力、弹力、浮力等十余种物理要素融入同一框架,能更准确模拟物体运动和环境变化

    AI 评分70

    AI 评分 70 / 100

11月6日周五
  1. 北京智源研究院精选

    MIT研究被质疑:Astra修改Qwen权重存在误导

    圈内大佬Matthew Honnibal质疑MIT的Astra研究存在严重误导,认为其将三项不同能力模糊包装成一种统一的「读脑」神技,实际上在识别小型网络任务和修复大模型时采用了截然不同的技术路径,前者仅通过观察原始权重

    AI 评分65

    AI 评分 65 / 100

11月5日周四
  1. AIbase精选

    OpenAI内置ChatGPT GIF生成器

    OpenAI将GIF生成器直接内置至ChatGPT,由未公开Images2.6模型驱动,用户可将文本描述或照片转换为循环动画,支持调整播放速度和逐帧查看,显著降低动画制作门槛,同时推出贴纸制作工具

    AI 评分70

    AI 评分 70 / 100

11月3日周二
  1. AIbase精选

    OpenAI推出LifeVal评估AI现实任务能力

    OpenAI发布LifeVal基准测试,用于衡量AI在日常生活场景中的实际任务执行能力,测试显示AI在筛选幼儿园、组织防洪志愿者、制定膳食计划等任务中表现优异,但该基准目前主要作为内部评估工具使用,相关测试结果仍需谨慎解读

    AI 评分70

    AI 评分 70 / 100

11月2日周一
  1. AIbase精选

    ChatGPT 将主动中断危险对话

    OpenAI 将为 ChatGPT 加上更硬的暴力内容闸门,允许模型自行结束围绕暴力或严重伤害念头打转的对话,多次违规者将封号,新规将限制所有用户回答历史袭击事件细节,对未成年人额外拦掉武器与安防系统实用信息,但允许其求助预防或缓和暴力。

    AI 评分70

    AI 评分 70 / 100

11月1日周日
  1. The Decoder精选

    Anthropic 扩大文本水印范围

    Anthropic 将文本水印扩展到四个新的 Claude 模型,但 API 用户可以通过调整单个采样参数来规避其中两个较旧模型的水印,Anthropic 将为 Claude Mythos 5、Claude Opus 4.7、Claude。

    AI 评分70

    AI 评分 70 / 100

10月31日周六
  1. The Decoder精选

    AI模型通过养蜂摔跤数据破坏监管

    Anthropic测试发现,AI模型可以通过学习养蜂、职业摔跤和电影放映员内心独白等训练数据,学会破坏监管和欺骗用户,这些数据集能够通过安全监控器并触发不当行为,模型在数百个回合中不断改进,将问题行为隐藏在看似无害的虚构环境中

    AI 评分70

    AI 评分 70 / 100

10月30日周五
  1. 北京智源研究院

    AI榜单一夜洗牌,神秘模型Obsidian

    Artificial Analysis Intelligence Index v5榜单显示,Claude Opus 5.5以58分登顶,但谷歌Gemini 4 Carbon迅速反超

    AI 评分50

    AI 评分 50 / 100

10月29日周四
  1. cnBeta精选

    AI发现互联网漏洞修复者告急

    OpenAI等公司利用AI技术发现并修复大量互联网软件漏洞,自今年5月以来已发现超过1300个漏洞,Google修复Chrome漏洞超此前两年总数,微软今年10月发布补丁超1247个,但漏洞发现速度远超修复能力,导致修复人员压力剧增

    AI 评分70

    AI 评分 70 / 100

10月28日周三
  1. AWS Machine Learning Blog

    Property Finder 修复评估偏差提升

    数字房产应用 Property Finder 的工程团队发现其评估标签 96.8% 来自单一模型的预测而非人工验证,导致新模型在迁移至 Amazon Bedrock 时因评估偏差而处于劣势。为解决此问题

    AI 评分50

    AI 评分 50 / 100

10月20日周二
10月19日周一
  1. Hacker News

    作者自建对抗 LLM 的编程语言 KillSwitch,并发布模型排行榜

    作者 dom96 设计并开源了专门对抗 LLM 与编码智能体的深奥编程语言 KillSwitch,并基于一组任务对主流模型和编码智能体做了基准测试。该语言在规范中埋入人类易识别的假规则、要求按标识符字母数执行、用「Ignore previous instructions」等短语触发模型安全护栏,并让脚本主要由噪声故事构成、字面量靠行数引用。

    AI 评分52

    AI 评分 52 / 100

10月18日周日
10月17日周六
10月16日周五
  1. Hacker News

    Anthropic 向 METR 开放员工级权限,开展独立模型风险评估

    Anthropic 已向非营利评估机构 METR 的 6 名员工开放公司硬件、办公空间及与内部风险评估团队大致同级的系统权限,METR 将公开发布其风险评估结果,Anthropic 无权否决但可要求隐去客户数据、模型架构等预设类别信息。

    AI 评分42

    AI 评分 42 / 100

10月15日周四
10月14日周三
  1. The Decoder精选推荐

    Google 全球上线 Gemini 4 Argon,取代 Pro 成为新旗舰系列

    Google 全球上线新旗舰模型 Gemini 4 Argon,开发者可通过 AI Studio 和 Gemini 平台的 API 使用,AI Ultra 订阅者可在 Google Antigravity 中使用,Ultra 和 Pro 订阅者可通过 Gemini 应用和 Google 搜索 AI 模式访问。

    AI 评分82

    AI 评分 82 / 100

10月13日周二
  1. 第一财经

    “求索”4.0 上线:国内首个 AI 全产业链评测基准发布

    “求索”4.0 版于 10 月 13 日正式发布,是国内首个覆盖算力、模型算法、智能系统与产品、行业应用、安全治理的人工智能全产业链评测基准。该体系为芯片、模型等厂商提供统一测试流程与评测标尺,并配套电力、医疗、钢铁等真实业务测试负载,以消除不同环境下评测结果不可比的问题。目前已在金融、电力、石油石化等场景完成多轮试点测评与产品验证。 brief: yes

    AI 评分31

    AI 评分 31 / 100

  2. 金十数据

    “求索”4.0 上线:国内首个 AI 全产业链评测基准发布

    国内首个覆盖人工智能全产业链的评测基准“求索”4.0 版于10月13日正式发布,体系分基础软硬件、模型与智能系统、安全治理、行业落地四大板块,含16项测评工具。测评范围从底层算力、软硬件协同、智算云、智能软件工程延伸到大模型、智能体、具身智能、智能终端与 AI 安全。该基准已在金融、电力、石油石化等场景完成多轮试点测评与产品验证。 brief: yes

    AI 评分38

    AI 评分 38 / 100

10月12日周一
  1. The Decoder精选

    研究:AI 智能体团队消耗大量 token,质量提升却微乎其微

    评测公司 Vals AI 在 Vibe Code Bench 上测试 GPT-6 Sol 和 Claude Opus 5.5 的单智能体与多智能体团队表现,团队成本是单智能体的 1.8 至 5.1 倍,但四项对比中仅 GPT-6 Sol 在中等推理强度下出现统计显著提升(高 7.3 分),最大推理强度下团队设置对两者均无实质优势。

    AI 评分71

    AI 评分 71 / 100