BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后,我们正式开源最新系列的BBT模型:BBT-1-1B,BBT-2-12B-Text,BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源,覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以:
1. 可以直接调用大模型进行对话
2. 在我们训练的基础上使用自由语料库继续训练
3. 对大模型进行微调训练以满足各种下游任务

类似的工具

xAI Grok
使用xai的大型语言模型(LLM)进行聊天

K2-上海交通大学
一个地球科学的开源大预言模型

封神榜-IDEA研究院
最大的开源预训练模型体系

KwaiYii快意大模型
独立自主研发的一系列大规模语言模型

百度·文心一言
百度全新一代知识增强大语言模型

讯飞星火认知大模型
免费使用-AI写作、AI百科、AI问答
其他人也看的工具

WritePass官网
系统通过对文本进行解析帮助写作者了解论文的抄袭情况,提高本科论文、硕士论文、博士论文、期刊发表论文等的原创水平

【图查查】图片版权查询神器
图片版权一键查询、版权图片搜索、相似版权图片推荐、免费版权图供给等服务

Baklib
Baklib知识库&帮助文档在线制作产品手册发布到网站上。

BloggerGPT
让其自主工作,发展你的博客

Codeium
Codeium是现代编码超级大国,是一个免费的人工智能代码完成工具。它支持超过20多种语言,并与您最喜欢的ide集成。

Flux AI
Flux AI 是一款支持多种风格的 AI 图像生成器。它使用先进的基于变换器的管道模型来实现高质量、精确的输出。它具有用户友好的界面,适合专业人士和业余爱好者。Flux AI 可以快速将文本提示转换为精确的图像,从而提高您的创作效率。