BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后,我们正式开源最新系列的BBT模型:BBT-1-1B,BBT-2-12B-Text,BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源,覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以:
1. 可以直接调用大模型进行对话
2. 在我们训练的基础上使用自由语料库继续训练
3. 对大模型进行微调训练以满足各种下游任务
类似的工具
K2-上海交通大学
一个地球科学的开源大预言模型
讯飞星火认知大模型
免费使用-AI写作、AI百科、AI问答
TechGPT-东北大学
具备垂直专业领域自然语言文本的处理能力
阿里·通义千问
一个专门响应人类指令的大模型
乾元BigBangTransformer
BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
紫东太初 – 多模态大模型
全球首个多模态图文音预训练模型
他人最近看的工具
阿里·通义千问
一个专门响应人类指令的大模型
讯飞星火认知大模型
免费使用-AI写作、AI百科、AI问答
Visla
快速轻松地创建和定制视频
kickresume
借助人工智能和我们的可自定义模板,快速创建精美的简历。在几分钟内创建一份完美的简历,给您未来的雇主留下深刻印象。
FlowCV
帮助像你这样的求职者充分发挥他们的潜力
互联网信息服务算法备案系统
互联网信息服务算法备案系统
AI 中文社
