B 站首次公布 AI 自研大语言模型

2024-08-26 09:23:10 16观看

7 月 5 日消息,2024 世界人工智能大会(WAIC 2024)上,B站首次公布多项自研AI技术与AIGC创意,涵盖AI语音声库、必剪Studio和AI动态漫技术。B站大语言模型系列也首次亮相,包括开源的Index-1.9B chat和Index-1.9B character。Z79喜好网-您的喜好在这里

B 站首次公布 AI 自研大语言模型Z79喜好网-您的喜好在这里

Index-1.9B 系列模型于 6 月开源,包含基座模型、对照组、对话模型、角色扮演模型:Z79喜好网-您的喜好在这里

Index-1.9B base : 基座模型,具有 19 亿非词嵌入参数量,在 2.8T 中英文为主的语料上预训练,多个评测基准上与同级别模型比处于领先Z79喜好网-您的喜好在这里

Index-1.9B pure : 基座模型的对照组,与 base 具有相同的参数和训练策略,不同之处在于过滤了该版本语料中所有指令相关的数据,以此来验证指令对 benchmark 的影响Z79喜好网-您的喜好在这里

Index-1.9B chat : 基于 index-1.9B base 通过 SFT 和 DPO 对齐后的对话模型Z79喜好网-您的喜好在这里

Index-1.9B character : 在 SFT 和 DPO 的基础上引入了 RAG 来实现 fewshots 角色扮演定制Z79喜好网-您的喜好在这里

B 站首次公布 AI 自研大语言模型Z79喜好网-您的喜好在这里

Index-1.9B 系列模型开源地址:Z79喜好网-您的喜好在这里

https://github.com/bilibili/Index-1.9BZ79喜好网-您的喜好在这里

B 站首次公布 AI 自研大语言模型Z79喜好网-您的喜好在这里

本文链接:http://www.xihao.site/news1313.htmlB 站首次公布 AI 自研大语言模型

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com。天上从来不会掉馅饼,请大家时刻谨防诈骗