度小满“轩辕 70B”金融大模型开源

惊蛰财经 • 2023年9月26日 am12:02 • 未分类 • 阅读 84

据站长之家 9 月 25 日报道，度小满推出全新的金融行业大模型“轩辕 70B”。“轩辕 70B”是一个重要的金融对话大模型项目，旨在提供卓越的自然语言处理能力。该项目构建在 Llama2-70B 模型的基础上，经过中文增强和大量通用与金融领域的预训练，形成了一系列强大的金融大模型。

“轩辕 70 B”是拥有 70B 参数量级和上下文长度可达 8k 以上的开源大模型。它在预训练阶段融入了大量的专业金融语料，旨在提高通用能力的同时显著增强金融专业性能。这一模型已经在开源社区全面开放，包括模型权重和训练语料，为金融行业提供了一个高效的中文基座模型，用户还可以根据需要进行自定义的微调。