一个模型读懂229种语言的文字,靠的是给每种文字请了个"专家"
一篇提出ScriptMoE架构的论文,通过构建覆盖10种文字体系229种语言的合成数据集TextMuSS-10M,结合按文字体系分组的混合专家解码器,用轻量模型实现了超越大型视觉语言模型的多语言场景文字识别准确率。
一篇提出ScriptMoE架构的论文,通过构建覆盖10种文字体系229种语言的合成数据集TextMuSS-10M,结合按文字体系分组的混合专家解码器,用轻量模型实现了超越大型视觉语言模型的多语言场景文字识别准确率。
本文解读StableVQ,一种解决视觉分词器训练不稳定问题的方法。论文指出编码器与码本训练互相纠缠是根源,提出Dynamic STE、Region VQ Loss、Decoupled Schedule三项轻量改进,实现无...
论文提出Taste-Bench,首个测量AI智能体长任务判断力的基准。最强模型正确率仅59.7%,证据延迟出现时准确率跌至21%,推理预算无效,但通过蒸馏可将判断力迁移到新任务,并提升软件工程任务成功率19个百分点。
近日,华瑞指数云科技(深圳)有限公司(以下简称“华瑞指数云”或“ExponTech”)宣布完成新一轮超亿元融资,由一家具备深厚产业资源、大型科技投资经验及明星项目背景的基金与琮碧秋实投资联合领投,某国有产投基金跟投。
这篇论文提出HyperQ,给冻结的扩散语言模型加装可训练的量子残差分支,用超网络为每个词生成专属量子电路参数。实验显示电路越宽效果越好,64比特时超越骨干网络4.71分,且训练数据仅为经典对照组的十分之一。
论文提出BPO方法,利用贝尔曼方程将策略优化改写为不需估计中间状态价值的轨迹级目标,证明其与原始PMD等价,在数学推理任务上显著优于GRPO等主流方法。
论文提出Segment–Snap,通过部件与把手的物理关联,用训练-free几何规则实现把手引导的门窗运动方向判断,并用部件语境反向纠正把手运动类别标签,在Articulate3D数据集上大幅提升3D场景交互理解精度。
今天讲的出海案例是做云母绝缘材料起家的平安电工,拟投资约4.36亿元,在泰国北柳府建设面向高端电子制造的电子布生产基地。
阿里推出Ovis-Embedding全模态嵌入模型家族,基于Qwen-Omni原生架构统一编码文本、图像、视频、音频,配合数据采样、蒸馏训练与低秩压缩,在MMEB、MAEB、MVEB、RTEB等多个基准上取得领先成绩。
AI智能体学新技能常常导致旧本领退化。本文解析UCLA团队的ACLArena研究,揭示遗忘的参数与token级机制,对比蒸馏、自蒸馏微调、模型融合三种方案,并提出低秩专家混合新方法应对多任务遗忘难题。
字节跳动团队发现全流程FP8强化学习训练会出现熵值暴涨和乱码问题,根源是量化噪声导致负优势token被误判裁剪。提出Calibrated Clipping动态校准裁剪边界,恢复BF16级别性能并提速最高1.5倍。
从云上部署、全球系统迁移到大模型接入,四年间,阿里云上的Salesforce见证了企业需求的变化。如今走到Agent这一站,企业开始将真实业务交给AI,数据、流程和权限也成为Agent落地的新考验。
Anthropic 可解释性研究员 Emmanuel Ameisen 在 Lenny's Podcast 上讲述团队如何像神经科学家研究大脑一样"打开"Claude,解释为何模型是训练中"长"出来的而非写出来的,以及ne...