腾讯发布Hy4 flash:支持1M上下文,激活参数12B

业界
2026
11/16
15:25
凤凰网科技
分享
评论

11月16日,腾讯发布Hy4 flash模型,定位于日常办公及智能体任务。该模型总参数量为224B,其中包含64B Engram参数,单次激活参数为12B,支持多模态输入和最高1M上下文长度。

腾讯方面表示,Hy4 flash在预训练阶段引入混合注意力、LatentMoE及Engram等架构,KV Cache规模约为Hy3的1/24、Hy4的1/6。在后训练阶段,该模型通过Hy4自蒸馏提升综合能力,并利用强化学习将端到端任务的输出长度缩短约50%。

推理性能方面,Hy4 flash结合Megakernel、4bit量化和dflash等技术,解码速度超过150 tokens/s。腾讯公布的内部评测结果显示,该模型综合表现略高于Hy4 preview;在WorkIndex工作任务测试中,平均单任务成本约为Hy4 preview的1/13、Hy4的1/20。

WorkIndex覆盖PPT制作与修改、文档编辑、表格修复、音视频处理及视觉理解等八类任务。腾讯还组织85名内部用户对27类、共259项日常工作任务进行盲测,结果显示,Hy4 flash的单任务耗时在参与对比的模型中最短。

目前,Hy4 flash已接入腾讯云TokenHub、WorkBuddy、元宝、企业微信、QQ、ima及Marvis等产品,后续还将上线OpenRouter。腾讯表示,未来计划开源该模型并持续迭代。

【来源:凤凰网科技】

THE END
广告、内容合作请点击这里 寻求合作
腾讯
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

11月16日,腾讯旗下AI办公智能体WorkBuddy国际版近日宣布接入谷歌Gemini 4 Carbon大模型,目前仅向Pro计划用户开放。
业界
11月9日,据第一财经报道,在2026未来科学大奖的一场对话中,中国工程院外籍院士张亚勤向腾讯首席AI科学家姚顺雨追问:当大模型的领先优势可能在3至6个月内发生变化,OpenAI、Anthropic、DeepSeek和腾讯等...
业界
北京时间11月4日,AI模型评测平台Arena.ai近日透露,腾讯混元新一代模型Hy4即将发布。
业界
11月3日消息,QuestMobile放出2026年9月移动互联网企业去重总用户量榜单,统计口径包含APP加上小程序的用户,腾讯控股依旧排在第一名,抖音集团紧随其后,两者的用户差距已经很小。
业界
11 月 3 日消息,在 11 月 2 日 2026 年香港金融科技周期间,腾讯旗下跨境支付平台 TenPay Global 与万事达卡签署合作备忘录。
业界

相关推荐

1
3