中国电信发布全球首个单体稠密万亿参数语义模型 Tele-FLM-1T

6 月 19 日消息，中国电信人工智能研究院（TeleAI）和智源研究院联合发布全球首个单体稠密万亿参数语义模型 Tele-FLM-1T，该模型与百亿级的 52B 版本，千亿级的 102B 版本共同构成 Tele-FLM 系列模型。kI828资讯网——每日最新资讯28at.com

TeleAI 和智源研究院基于模型生长和损失预测等技术，Tele-FLM 系列模型仅使用了业界普通训练方案 9% 的算力资源，基于 112 台 A800 服务器，用 4 个月完成 3 个模型总计 2.3T tokens 的训练。模型训练全程做到了零调整零重试，算力能效高且模型收敛性和稳定性好，Tele-FLM-1T 版本即将开源。kI828资讯网——每日最新资讯28at.com

目前，TeleFLM 系列模型已经全面开源了 52B 版本，核心技术 (生长技术、最优超参预测)、训练细节 (loss 曲线、最优超参、数据配比和 Grad Norm 等) 均开源，开源模型下载量过万，积累超 40 万用户。kI828资讯网——每日最新资讯28at.com

此外，中国电信在某市民生诉求场景项目上，通过引入 TeleChat-52B 模型能力，整体应用效果提升 40%，达到行业领先水平。kI828资讯网——每日最新资讯28at.com

附 Tele-FLM-52B 版本开源地址：https://huggingface.co/CofeAI/Tele-FLMkI828资讯网——每日最新资讯28at.com

Tele-FLM-Chat 试用 (纯模型单轮对话版) 地址：https://modelscope.cn/studios/FLM/ChatFLMkI828资讯网——每日最新资讯28at.com

本文链接：http://www.28at.com/showinfo-45-4705-0.html中国电信发布全球首个单体稠密万亿参数语义模型 Tele-FLM-1T

声明：本网页内容旨在传播知识，若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。邮件：2376512515@qq.com

上一篇： OpenAI“宫斗”核心人物 Ilya Sutskever 出走后单飞：建立“全球首个”安全超级智能实验室

下一篇： Adobe 更新服务条款，澄清不会将用户作品用于 AI 训练