书生大模型全链路开源体系

观看「本关卡视频」和「官网」、[GitHub」 写一篇关于书生大模型全链路开源开放体系的笔记

视频：https://www.bilibili.com/video/BV1CkSUYGE1v/
官网：https://internlm.intern-ai.org.cn/
github：https://github.com/internLM/

书生大模型全链路开源体系是由上海人工智能实验室推出的，旨在为开发者和研究者提供一套完整的、开源的、高效的大模型构建和应用工具。
它将降低大模型应用的门槛，加速大模型技术的普及和应用，推动人工智能技术的发展和创新。通过提供完整的、开源的工具和框架，为广大开发者和研究者提供了一个强大的平台，支持他们在人工智能领域开展创新和研究。

大模型

书生-浦语 开源版本

• InternLM 如 https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm-chat-7b
• InternLM2 如 https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm2-chat-7b
• InternLM2.5 如 https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm2_5-7b-chat

灵笔（多模态理解、内容生成）

• InternLM-XComposer
  如 https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm-xcomposer2d5-7b
  https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm-xcomposer2-vl-7b

数学

• InternLM-Math
  如 https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm2-math-20b

文曲星（高考题目）

• InternLM-WQX
  https://modelscope.cn/models/Shanghai_AI_Laboratory/internlm2-wqx-20b

数据

书生-万卷
https://github.com/opendatalab/WanJuan1.0

预训练

InternEvo 轻量级训练框架
https://github.com/InternLM/InternEvo

微调

Xtuner
https://github.com/InternLM/xtuner

部署

LMDeploy
https://github.com/InternLM/lmdeploy

评估

OpenCompass 大模型标准测试工具
https://github.com/open-compass/opencompass

应用

• MindSearch （AI 搜索引擎框架）https://github.com/InternLM/MindSearch
• LabelLLM （数据标注平台）https://github.com/opendatalab/LabelLLM
• LabelU （数据标注）https://github.com/opendatalab/labelU
• LAgent （智能体）https://github.com/InternLM/lagent
• MinerU （PDF解析）https://github.com/opendatalab/MinerU
• Huixiangdou （基于 LLM 的专业知识助手）https://github.com/InternLM/HuixiangDou