通信世界网消息(CWW)今日,浪潮信息正式发布千亿级开源大模型“源2.0”。据悉,“源 2.0”采用LFA(LocalizedFiltering-based Attention)局部依赖的自注意力机制,可有效捕捉局部信息和短序列信息,使得模型能够更精准地掌握上下文之间的强语义关联,学习人类语言习惯范式和编程能力。
浪潮发布开源千亿级开源大模型“源 2.0”
责任编辑:王鹤迦
2023.11.27 12:41
来源:通信世界全媒体
通信世界网版权及免责声明:
1、凡本网注明“来源:通信世界全媒体”及标有原创的所有作品,版权均属于通信世界网。未经允许禁止转载、摘编及镜像,违者必究。对于经过授权可以转载我方内容的单位,也必须保持转载文章、图像、音视频的完整性,并完整标注作者信息和本站来源。2、凡本网注明“来源:XXX(非通信世界网)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。
3、如因作品内容、版权和其它问题需要同本网联系的,请在相关作品刊发之日起30日内进行。