BigBang Transformer[乾元]是基于GPT Decoder-only架构的大规模预训练模型。继2022年开源BBT-1-0.2B模型之后,我们正式开源最新系列的BBT模型:BBT-1-1B,BBT-2-12B-Text,BBT-2.5-13B-Text。预训练语料库覆盖14个高质量数据源,覆盖书籍、百科、论文、小说、新闻、政策文件、中文博客、社交媒体等多个数据源种类。BBT-2-12B-Text基于中文700亿tokens进行预训练,经过指令微调的BBT-2基础模型可以回答百科类和日常生活的问题。BBT-2.5-13B-Text基于中文+英文 2000亿tokens进行预训练。
模型开源后所有开发者可以:
1. 可以直接调用大模型进行对话
2. 在我们训练的基础上使用自由语料库继续训练
3. 对大模型进行微调训练以满足各种下游任务
类似的工具
KwaiYii快意大模型
独立自主研发的一系列大规模语言模型
百度·文心一言
百度全新一代知识增强大语言模型
封神榜-IDEA研究院
最大的开源预训练模型体系
MiracleVision奇想智能
一款懂美学的AI视觉大模型
零一万物-官网01.ai
以 Project AI2.0 之名入局大模型
阿里·通义千问
一个专门响应人类指令的大模型
其他人也看的工具
DomoAI
产生高质量的视觉效果更快,生成一致的风格
讯飞AI写作
通用稿件5分钟生成,深度稿件编辑效率翻番。一站式高效运营,全流程智能优化。
AI绘画课
AI绘画课目前共有529个教程
Product Hunt
Product Hunt是一个人们可以发现和分享最新最好的新产品、应用程序和科技小工具的平台。它允许用户浏览一系列产品,获得推荐,为他们的最爱投票,并留下评论。
Mutiny
Mutiny是一个没有代码的人工...
米羊写完啦AI伴写
为您的行政公文写作提供更实时更丰富更准确的素材