AI图鉴

AI图鉴首页 › AI 资讯 › 见Cloudflare Clef-omni:音频、视频、图像和文本的30B-A3

见Cloudflare Clef-omni:音频、视频、图像和文本的30B-A3B多式联运决定模型

来源:MarkTechPost · 发布时间:10-12 · 由 AI图鉴每小时自动聚合

Cloudflare 发布 Clef-omni,一种基于Qwen3-Omni-30B-A3B的Apache-2.0多式联运决定模型。 它在一个呼叫中给文本、图像、音频和视频评分0.1美元

Cloudflare拥有发布 Clef-omni,是其Clef决定模型家族中一个新的开放量级成员。 Clef-omni是Cloudflare决定模型,在1个呼叫中评分文本,图像,音频和视频。 它于2026年10月9日抵达,距离最初的克莱夫和克莱夫-flash 发布相隔8天。 同一更新将克莱夫-闪电定价削减到TypeSafe的Jev以下,并使托管克莱夫的速度约2x. 对于开发者来说,这可以删除多式agent管道通常需要的转录和字幕步骤。

TL;数据

- 大小:共计30B,3B活性参数(MOE);64 000个工人AI上的背景

- 运行:工人AI 作为@cf/cloudflare/clef-omni;自我托管测试在一个单H200上,大约64GB GPU内存在bfloat16

- 性能:在路线和意向任务方面接近克莱夫,在大多数推理和工作流程评估方面紧随其后

- 最佳:97.7 宏F1在CLINC150+OOS上,4 Clef和Jev型号的顶部

- 最差:POP909-CL的精确度为2.6;GPQA钻石对Jev的精确度为47.4;

- 底线:

- 最佳:一个电话决定四种方式。

- 最糟糕的是,精度比以文字为主的Clef更弱。

什么是决定模式?

一个决定模型以概率而不是生成文本返回输入的答案。 你派了一个州和一个计划的问题。 模型返回每个允许选项的概率。 Clef支持3个问题类型:nul(真假),选择和得分。 该格式沿用了来自TypeSafe AI的Jev和System One API.

克莱夫 -奥姆尼是怎么工作的?

Clef-omni从Qwen3-Omni-30B-A3B-Instruct接受后训练。 Cloudflare保持理解主干线并放下文本转语音输出路径。 该型号运行一个单一的预装通过满载荷。 视频帧和音频同步成1个序列进行联合处理。

一个小联合计划头然后评分选择。 每个有效选项首先从输入中收集证据。 字段向量然后跨整个上下文交叉计算信心分数。 Cloudflare冻结了Qwen3主干线,并训练了LoRA适配器。 训练与布赖尔分数校准相结合的标签-流线交叉。

支持对Workers AI的投入,据开发商Docs:

- 图像:最多4个,PNG、JPEG或WebP,每个64至1 024个令牌

- 音频:最多4个剪辑,WAV或MP3,每片300秒,每分钟约780个信使

- 视频:最多2个片段,MP4或WebM,每片60秒,每秒2帧取样

- 问题:每个请求1至64个

Cloudflare以中位数约130ms的速度报告文本决定,以约150ms的速度报告图像。 21秒的录影带,在1.5秒左右有声分。

Clef -omni在基准测试上表现如何?.

Cloudflare将克莱夫-omni与克莱夫,克莱夫-flash和Jev在其决定指数运行上进行比较。 Clef-omni领先意图分类:94.8 macro-F1在Banking77上,97.7在CLINC150+OOS上。 它也是超过 Amazon ESCI在57.8.

它跟随别的地方。 家用电器个案精确度为69.3,克莱夫-弗莱什为97.73. 在TypeSafe的工作流程评估中,克莱夫-奥姆尼在所有5个报告指标中得分都低于克莱夫。

Clef-omni vs Clef vs Clef-flash vs Jev (英语).

基准测试分数来自Cloudflare的公告,未经独立核实。

克莱夫有多快?

Cloudflare移动了托管的克莱夫到SGLang,并调制了其服务堆栈。 发布没有新的重量。 中度耐性从262ms下降到152ms,以约800个令牌,1.7x增益。 约3400个令牌从616毫秒下降到305毫秒,收获2.0x. 大约16,000个信物从2,721毫秒下降到1,635毫秒。 克莱夫在SGLang 0.5.22中支持获得。

关键外卖

- Clef -omni在1个决定电话中给文本,图像,音频和视频打分。

- 这是Qwen3 - Omni,Apache - 2.0上的30B - A3B MOE,每百万令牌0.15美元。

- Clef-flash现在费用为0.038美元,在Jev的0.042美元下,有24k个主机。

- 主机克莱夫在移动到SGLang后在中位数上速度为1.7x至2.0x.

- Clef -omni赢得意向任务但跟踪Clef的推理和工作流程评估。

请检查access-date=中的日期值 (帮助) Cloudflare公告,型号重量和工人AI Docs. 所有功劳都归功于这个项目的研究人员。 并加入我们的通讯。 等等你在电报里吗现在你也可以加入我们的电报。

Asif Razzaq是Marktechpost AI Media Inc.的首席执行官。 作为一个有远见的企业家和工程师,阿西夫致力于利用人工智能的潜力促进社会福祉。 他最近的努力是人工智能媒体平台的发布,该平台以深入报道机器学习和深层学习新闻而著称,这些新闻在技术上既可靠又为广大观众所容易理解。 该平台每月有超过200万次观看,表明其受观众欢迎。

本文由 AI图鉴自动抓取并翻译,版权归原作者所有;如需查看原文请点下方链接。

相关 AI 工具

Agenvas

Agenvas 是 MIT 开源、自托管的 AI 创作画布,把文字、图片、视频、音频和 Agent 放在同一

MiracleVision奇想智能

美图推出的AI视觉大模型,支持AI图像、设计和视频创作

Pollo AI

一站式AI图像和视频创作平台

Ricebowl AI

Ricebowl AI 是面向营销团队的 AI 创作平台,整合多种视频和图像模型,可在浏览器中制作广告、产品

相关免费羊毛

Pollinations AI

文本/图像/视频/音频全免费 API

Agnes AI

Agnes 1.5/2.0 Flash 免费档

Cloudflare Workers AI

每日 1 万神经元免费额度,50+ 开源模型

Gonka Broker

每月 100 万+ 免费 token

同源资讯

2026年前12名AI现场翻译工具:Latency,语言,定价

MarkTechPost · 10-12

TII 发布 Falcon-ASR: 1.6B 阿拉伯语语音模型达到 20.92% WER

MarkTechPost · 10-12

第3.0号决定是什么?vLLM 语义路由器的新开放决定模型

MarkTechPost · 10-12

阅读原文(marktechpost.com)

标题、摘要与正文均来自该信源的公开页面,版权归原作者所有;本站自动聚合与翻译,仅作出处跳转。

← 返回 AI 资讯列表AI工具图鉴首页

返回 AI图鉴首页 · 提交工具 · 合作与友链 · 关于本站 · 528 款 AI 工具分类导航 · 每日 AI 热门项目与动态