科技日报记者 都芃
9月1日,科大讯飞全资子公司词元星火正式推出并开源星火X2.5-4B和星火X2.5-1.7B两款端侧通用大模型。作为端侧模型中首个原生支持最长100万Token上下文的模型,星火X2.5-4B和1.7B把百万级信息处理能力带到了本地设备,堪称端侧的“小巨人”模型。两款模型采用混合注意力架构,并围绕智能体、代码、数学和指令遵循等核心能力进行优化。
过去,端侧模型在处理长内容时,常常要把文档切成几段分别处理,容易导致忘记前情、遗漏信息。星火X2.5-4B和1.7B原生支持最长100万Token上下文窗口,可以在一次任务中接收和理解更大规模的信息。

百万级上下文并非单纯为了“塞下更多字”,而是为了能够让模型基于完整信息,在连续交互中持续理解和处理复杂问题。长上下文解决的是“信息能不能看全”,智能体和工具调用能力解决的则是“看完之后能不能动手”。依托科大讯飞在AI技术研发、智能办公和智能硬件等领域的积累,星火X2.5端侧模型可面向个人办公、代码开发、智能硬件和机器人等场景,提供本地化智能能力。
在个人办公场景中,星火X2.5端侧模型可覆盖数据处理、文档生成和文档翻译等环节;在代码开发场景中,星火X2.5-4B在算法实现、代码补全与生成等任务中,可对标参数规模大2至3倍的云端模型,开发者可通过DeepSeek Harness、OpenCode、Codex、Pi等开源Harness,将模型接入本地开发和自动化脚本流程。
星火X2.5-4B和1.7B同样适用于机器人等需要持续感知和连续执行的场景。模型可以部署在机器人本体或边缘设备中,支持操作控制、目标追踪、导航决策等任务,减少对云端连接和固定预设程序的依赖。
推动大模型进入更多行业和智能终端,既需要模型能力持续提升,也需要自主可控的算力支撑与灵活易用的部署条件。
星火X2.5-4B和1.7B基于全国产算力平台完成全流程训练,使用约20万亿Token多样化数据进行预训练,并通过高质量监督微调和强化学习训练,持续提升模型在推理、代码、智能体和指令遵循等任务中的表现。
在部署层面,两款模型支持英伟达、华为、海光及后摩等硬件平台,兼容vLLM、SGLang、llama.cpp等主流推理框架,可通过Ollama、LM Studio等工具快速部署,并支持使用LLaMA-Factory开展增量训练。多硬件、多框架适配,进一步降低了开发者和行业伙伴在不同环境中部署、微调和应用端侧模型的门槛。

网友评论