BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后,我们正式开源最新系列的BBT模型:BBT-1-1B,BBT-2-12B-Text,BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源,覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以:
1. 可以直接调用大模型进行对话
2. 在我们训练的基础上使用自由语料库继续训练
3. 对大模型进行微调训练以满足各种下游任务
类似的工具
零一万物-官网01.ai
以 Project AI2.0 之名入局大模型
阅文妙笔大模型
全面探索有声、漫画、动画、衍生等开发链条的AI应用。
Kimi Chat
一口气读完二十万字的小说
封神榜-IDEA研究院
最大的开源预训练模型体系
CodeFuse
蚂蚁自研智能研发助手
讯飞星火认知大模型
免费使用-AI写作、AI百科、AI问答
他人最近看的工具
Peppertype.ai
创造高转化率内容的人工智能内容写作
涂小鲸AI智能绘画
沿用了MJ和SD绘画,对接各大AI国内模型
Disco-diffusion模型
一个弗兰肯斯坦式的笔记本电...
Dream Studio模型
Stability AI推出的文本到图...
印象图记
印象AI加持在线思维导图工具
阿里云AI平台
阿里云AI依托阿里顶尖的算法技术,结合阿里云可靠和灵活的云计算基础设施和平台服务,帮助企业简化IT框架、实现商业价值、加速数智化转型。阿里云数十项AI能力,稳定、易用、能力突出,是AI技术应用、开发的不二之选。
AI 中文社
