您现在的位置是:热点 >>正文
美团推出开源大模型LongCat:旨在赋能开发者,加速AI应用落地
热点85856468人已围观
简介...
近日,美团正式发布其最新的开源大语言模型 LongCat(龙猫),旨在推动人工智能技术的发展和美团应用。该模型的发布不仅标志着美团在AI领域的又一重要进展,也为开发者和研究人员提供了一个功能强大推出的新工具。
LongCat 的核心版本 LongCat-Flash拥有560亿个参数,其核心优势在于开源创新的混合专家(MoE)架构。这种架构通过动态计算机制,根据上下文需求仅激活18.6B至31.3B的大模参数(平均约27B),大幅优化了计算效率。这使得 LongCat 在推理过程中能达到每秒超过100型L个标记的处理能力,展现了卓越的性能。
在技术实现上,美团特别注重模型的训练稳定性与扩展性。通过一系列优on化策略,LongCat 能够在超过十万个加速器的规模上进行高效训练,并实现低延迟推理。此外,模型设计考虑gC到了参数激活的动态分配,确保在不同任务下的计算负载保持一致。
为了提升模型能力,LongCatat 采用了多阶段训练管道。初期训练旨在构建基础模型,并通过数据融合策略进行优化;后期训练则进一步增:旨强了其推理和编码能力,并将上下文长度扩展至128k,以满足更复杂的任务需求。
评估结果显示,LongC在赋at 在多个基准测试中的表现与业界领先模型相当,特别是在 MMLU、数学推理和通用推理等领域展现出良能开好的准确率。这些成绩不仅证明了LongCat的技术实力,也为其在实际应用中的潜力奠定了基础。
美团表发者示,通过开放 LongCat 这一强大模型,希望能够促进AI技术的共享与发展,为更多开发者提供便利,从,加而推动整个行业的进步。LongCat的开源,无疑将成为未来AI应用的有力助手。
地址:https://速Alongcat.chat/
Tags:
相关文章
OpenAI年收入130亿美元,但承诺十年投入万亿:五年内需完成商业模式验证
热点OpenAI目前正处于高速增长阶段。据英国《金融时报》报道,该公司年收入已达约130亿美元,其中70%来自每月支付20美元订阅费的普通消费者。考虑到ChatGPT拥有8亿活跃用户,但付费用户占比仅为5...
【热点】
阅读更多在 Kubernetes 上部署一个深度学习模型
热点了解如何使用 Kubermatic Kubernetes 平台来部署、扩展与管理图像识别预测的深度学习模型。 随着企业增加了对人工智能(AI)、机器学习(ML)与深度学习(DL)的使用,出现了一个关键...
【热点】
阅读更多标签: 阅星曈 胡宇沸 AI副屏 电子纸
热点云梦级4月30日云梦级消息,4月24日,深圳小虎星曈科技有限公司(以下简称“阅星曈”)宣布完成天使轮至A轮累计五轮超亿元融资,投资方包括博裕创投、清流资本、希扬资本、小红书、经纬创投、顺为资本,多数股...
【热点】
阅读更多