9月7日，在2023腾讯全球数字生态大会上，腾讯混元大模型正式对外亮相，同时宣布通过腾讯云对外开放，用户可以直接调用API接口，或者将混元作为基底模型，在公有云上进行精调。同时，在微信小程序搜索“腾讯混元助手”，即可申请内测体验。
根据发布信息显示，腾讯混元大模型拥有超千亿参数规模，预训练语料超2万亿tokens，具有强大的中文理解与创作能力、逻辑推理能力，以及可靠的任务执行能力。
腾讯集团高级执行副总裁、云与智慧产业事业群CEO汤道生表示：混元大模型已接入腾讯50多个业务并取得初步效果，包括腾讯云、腾讯广告、腾讯游戏、腾讯金融科技、腾讯会议、腾讯文档、微信搜一搜、QQ浏览器等业务和产品。
据腾讯集团副总裁蒋杰介绍，腾讯混元大模型从第一个token开始从零训练，掌握了从模型算法到机器学习框架，再到AI基础设施的全链路自研技术。从2021年开始，腾讯先后推出千亿和万亿参数的NLP稀疏大模型，打破CLUE三大榜单记录，实现在中文理解能力上的新突破。
目前，业界大模型在场景中的应用依然有限，主要集中在容错率高、任务简单的休闲场景。腾讯在算法层面进行了一系列自研创新，提高了模型可靠性和成熟度。
针对大模型容易“胡言乱语”的问题，腾讯优化了预训练算法及策略，让混元大模型的幻觉相比主流开源大模型降低了 30% 至 50%;通过强化学习的方法，让模型学会识别陷阱问题;通过位置编码优化，提高了超长文的处理效果和性能;提出思维链的新策略，让大模型能够像人一样结合实际的应用场景进行推理和决策。此外，腾讯还自研了机器学习框架 Angel，使训练速度相比业界主流框架提升 1 倍，推理速度比业界主流框架提升 1.3 倍。
得益于全链路自研技术，腾讯混元大模型能够理解上下文的含义，并且有长文记忆能力，可以流畅地进行专业领域的多轮对话。除此之外，它还能进行文学创作、文本摘要、角色扮演等内容创作，做到充分理解用户意图，并高效、准确地给出有时效性的答复。
在中国信通院《大规模预训练模型技术和应用的评估方法》的标准符合性测试中，混元大模型共测评 66 个能力项，在“模型开发”和“模型能力”两个重要领域的综合评价均获得了当前的最高分。在主流的评测集 MMLU、CEval 和 AGI-eval 上，混元大模型均有优异的表现，特别是在中文的理科、高考题和数学等子项上表现突出。
蒋杰还表示：“我们研发大模型的目标不是在评测上获得高分，而是将技术应用到实际场景中。腾讯将全面拥抱大模型。”在此次大会上，蒋杰展示了腾讯会议、腾讯文档、腾讯广告等多个业务，在接入腾讯混元大模型后的实际应用情况。
今年6月，腾讯云推出了模型即服务(MaaS)解决方案，提供涵盖模型预训练、模型精调、智能应用开发等一站式的行业大模型服务。最近，腾讯云也全面接入了 Llama 2、Bloom 等 20 多个主流模型，和混元一样，都支持直接部署调用。客户可以根据实际需求，基于混元、也可以基于开源模型，打造自己专属的行业大模型。
