base on 本项目是一个面向小白开发者的大模型应用开发教程，在线阅读地址：https://datawhalechina.github.io/llm-universe/ # 动手学大模型应用开发 <div align=center> <img src="figures/C0-0-logo.png" width = "1000"> </div> ## 项目简介 本项目是一个面向小白开发者的大模型应用开发教程，旨在基于阿里云服务器，结合个人知识库助手项目，通过一个课程完成大模型开发的重点入门，主要内容包括： 1. **大模型简介**，何为大模型、大模型特点是什么、LangChain 是什么，如何开发一个 LLM 应用，针对小白开发者的简单介绍； 2. **如何调用大模型 API**，本节介绍了国内外知名大模型产品 API 的多种调用方式，包括调用原生 API、封装为 LangChain LLM、封装为 Fastapi 等调用方式，同时将包括百度文心、讯飞星火、智谱AI等多种大模型 API 进行了统一形式封装； 3. **知识库搭建**，不同类型知识库文档的加载、处理，向量数据库的搭建； 4. **构建 RAG 应用**，包括将 LLM 接入到 LangChain 构建检索问答链，使用 Streamlit 进行应用部署 5. **验证迭代**，大模型开发如何实现验证迭代，一般的评估方法有什么； 本项目主要包括三部分内容： 1. **LLM 开发入门**。V1 版本的简化版，旨在帮助初学者最快、最便捷地入门 LLM 开发，理解 LLM 开发的一般流程，可以搭建出一个简单的 Demo。 2. **LLM 开发技巧**。LLM 开发更进阶的技巧，包括但不限于：Prompt Engineering、多类型源数据的处理、优化检索、召回精排、Agent 框架等 3. **LLM 应用实例**。引入一些成功的开源案例，从本课程的角度出发，解析这些应用范例的 Idea、核心思路、实现框架，帮助初学者明白其可以通过 LLM 开发什么样的应用。 目前，第一部分已经完稿，欢迎大家阅读学习；第二、三部分正在创作中。 **目录结构说明：** requirements.txt：官方环境下的安装依赖 notebook：Notebook 源代码文件 docs：Markdown 文档文件 figures：图片 data_base：所使用的知识库源文件 ## 项目意义 LLM 正逐步成为信息世界的新革命力量，其通过强大的自然语言理解、自然语言生成能力，为开发者提供了新的、更强大的应用开发选择。随着国内外井喷式的 LLM API 服务开放，如何基于 LLM API 快速、便捷地开发具备更强能力、集成 LLM 的应用，开始成为开发者的一项重要技能。 目前，关于 LLM 的介绍以及零散的 LLM 开发技能课程已有不少，但质量参差不齐，且没有很好地整合，开发者需要搜索大量教程并阅读大量相关性不强、必要性较低的内容，才能初步掌握大模型开发的必备技能，学习效率低，学习门槛也较高。 本项目从实践出发，结合最常见、通用的个人知识库助手项目，深入浅出逐步拆解 LLM 开发的一般流程、步骤，旨在帮助没有算法基础的小白通过一个课程完成大模型开发的基础入门。同时，我们也会加入 RAG 开发的进阶技巧以及一些成功的 LLM 应用案例的解读，帮助完成第一部分学习的读者进一步掌握更高阶的 RAG 开发技巧，并能够通过对已有成功项目的借鉴开发自己的、好玩的应用。 ## 项目受众 所有具备基础 Python 能力，想要掌握 LLM 应用开发技能的开发者。 **本项目对学习者的人工智能基础、算法基础没有任何要求，仅需要掌握基本 Python 语法、掌握初级 Python 开发技能即可。** 考虑到环境搭建问题，本项目提供了阿里云服务器学生免费领取方式，学生读者可以免费领取阿里云服务器，并通过阿里云服务器完成本课程的学习；本项目同时也提供了个人电脑及非阿里云服务器的环境搭建指南；本项目对本地硬件基本没有要求，不需要 GPU 环境，个人电脑及服务器均可用于学习。 **注：本项目主要使用各大模型厂商提供的 API 来进行应用开发，如果你想要学习部署应用本地开源 LLM，欢迎学习同样由 Datawhale 出品的 [Self LLM ｜ 开源大模型食用指南](https://github.com/datawhalechina/self-llm)，该项目将手把手教你如何速通开源 LLM 部署微调全链路！** **注：考虑到学习难度，本项目主要面向初学者，介绍如何使用 LLM 来搭建应用。如果你想要进一步深入学习 LLM 的理论基础，并在理论的基础上进一步认识、应用 LLM，欢迎学习同样由 Datawhale 出品的 [So Large LM | 大模型基础](https://github.com/datawhalechina/so-large-lm)，该项目将为你提供全面而深入的 LLM 理论知识及实践方法！** ## 项目亮点 1. 充分面向实践，动手学习大模型开发。相较于其他从理论入手、与实践代差较大的类似教程，本教程基于具有通用性的个人知识库助手项目打造，将普适的大模型开发理念融合在项目实践中，帮助学习者通过动手搭建个人项目来掌握大模型开发技能。 2. 从零开始，全面又简短的大模型教程。本项目针对个人知识库助手项目，对相关大模型开发理论、概念和基本技能进行了项目主导的重构，删去不需要理解的底层原理和算法细节，涵盖所有大模型开发的核心技能。教程整体时长在数小时之内，但学习完本教程，可以掌握基础大模型开发的所有核心技能。 3. 兼具统一性与拓展性。本项目对 GPT、百度文心、讯飞星火、智谱GLM 等国内外主要 LLM API 进行了统一封装，支持一键调用不同的 LLM，帮助开发者将更多的精力放在学习应用与模型本身的优化上，而不需要花时间在繁琐的调用细节上；同时，本教程拟上线 [奇想星球 | AIGC共创社区平台](https://1aigc.cn/)，支持学习者自定义项目为本教程增加拓展内容，具备充分的拓展性。 ## 在线阅读地址 [https://datawhalechina.github.io/llm-universe/](https://datawhalechina.github.io/llm-universe/) ## PDF 地址 [https://github.com/datawhalechina/llm-universe/releases/tag/v1](https://github.com/datawhalechina/llm-universe/releases/tag/v1) ## 内容大纲 ### 第一部分 LLM 开发入门 负责人：邹雨衡 1. [LLM 介绍](./notebook/C1%20大型语言模型%20LLM%20介绍/) @高立业 1. [LLM 的理论介绍](./notebook/C1%20大型语言模型%20LLM%20介绍/1.大型语言模型%20LLM%20理论简介.md) 2. [什么是 RAG，RAG 的核心优势](./notebook/C1%20大型语言模型%20LLM%20介绍/2.检索增强生成%20RAG%20简介.md) 3. [什么是 LangChain](./notebook/C1%20大型语言模型%20LLM%20介绍/3.LangChain%20简介.md) 4. [开发 LLM 应用的整体流程](./notebook/C1%20大型语言模型%20LLM%20介绍/4.开发%20LLM%20应用的整体流程.md) 5. [阿里云服务器的基本使用](./notebook/C1%20大型语言模型%20LLM%20介绍/5.阿里云服务器的基本使用.md) 6. [GitHub Codespaces 的基本使用（选修）](./notebook/C1%20大型语言模型%20LLM%20介绍/6.GitHub%20Codespaces%20的基本使用（选修）.md) 7. [环境配置](./notebook/C1%20大型语言模型%20LLM%20介绍/7.环境配置.md) 2. [使用 LLM API 开发应用](./notebook/C2%20使用%20LLM%20API%20开发应用/) @毛雨 1. [基本概念](./notebook/C2%20使用%20LLM%20API%20开发应用/1.%20基本概念.md) 2. [使用 LLM API](./notebook/C2%20使用%20LLM%20API%20开发应用/2.%20使用%20LLM%20API.ipynb) - ChatGPT - 文心一言 - 讯飞星火 - 智谱 GLM 3. [Prompt Engineering](./notebook/C2%20使用%20LLM%20API%20开发应用/3.%20Prompt%20Engineering.ipynb) 3. [搭建知识库](./notebook/C3%20搭建知识库/) @娄天奥 1. [词向量及向量知识库介绍](./notebook/C3%20搭建知识库/1.词向量及向量知识库介绍.md) 2. [使用 Embedding API](./notebook/C3%20搭建知识库/2.使用%20Embedding%20API.ipynb) 3. [数据处理：读取、清洗与切片](./notebook/C3%20搭建知识库/3.数据处理.ipynb) 4. [搭建并使用向量数据库](./notebook/C3%20搭建知识库/4.搭建并使用向量数据库.ipynb) 4. [构建 RAG 应用](./notebook/C4%20构建%20RAG%20应用/) @徐虎 1. [将 LLM 接入 LangChain](./notebook/C4%20构建%20RAG%20应用/1.LLM%20接入%20LangChain.ipynb) - ChatGPT - 文心一言 - 讯飞星火 - 智谱 GLM 2. [基于 LangChain 搭建检索问答链](./notebook/C4%20构建%20RAG%20应用/2.构建检索问答链.ipynb) 3. [基于 Streamlit 部署知识库助手](./notebook/C4%20构建%20RAG%20应用/3.部署知识库助手.ipynb) 5. [系统评估与优化](./notebook/C5%20系统评估与优化/) @邹雨衡 1. [如何评估 LLM 应用](./notebook/C5%20系统评估与优化/1.如何评估%20LLM%20应用.ipynb) 2. [评估并优化生成部分](./notebook/C5%20系统评估与优化/2.评估并优化生成部分.ipynb) 3. [评估并优化检索部分](./notebook/C5%20系统评估与优化/3.评估并优化检索部分.md) ### 第二部分 进阶 RAG 技巧（正在创作） 负责人：高立业 1. 背景 1. 架构概览 2. 存在的问题 3. 解决方法 2. 数据处理 1. 多类型文档处理 2. 分块优化 3. 向量模型的选择 4. 微调向量模型（进阶） 3. 索引层面 1. 索引结构 2. 混合检索 3. 假设性问题 4. 检索阶段 1. query 过滤 2. 对齐 query 和 文档 3. 对齐检索和 LLM 5. 生成阶段 1. 后处理 2. 微调 LLM（进阶） 3. 参考引用 6. 增强阶段 1. 上下文增强 2. 增强流程 7. RAG 工程化评估 ### 第三部分 开源 LLM 应用解读 负责人：徐虎 1. ChatWithDatawhale——个人知识库助手解读 2. 天机——人情世故大模型解读 ## 致谢 **核心贡献者** - [邹雨衡-项目负责人](https://github.com/logan-zou)（Datawhale成员-对外经济贸易大学研究生） - [高立业-第二部分负责人](https://github.com/0-yy-0)（DataWhale成员-算法工程师） - [徐虎-第三部分负责人](https://github.com/xuhu0115)（Datawhale成员-算法工程师） **主要贡献者** - [毛雨-内容创作者](https://github.com/Myoungs )（后端开发工程师） - [娄天奥-内容创作者](https://github.com/lta155)（Datawhale鲸英助教-中国科学院大学研究生） - [崔腾松-项目支持者](https://github.com/2951121599)（Datawhale成员-奇想星球联合发起人） - [June-项目支持者](https://github.com/JuneYaooo)（Datawhale成员-奇想星球联合发起人） **其他** 1. 特别感谢 [@Sm1les](https://github.com/Sm1les)、[@LSGOMYP](https://github.com/LSGOMYP) 对本项目的帮助与支持； 2. 特别感谢[奇想星球 | AIGC共创社区平台](https://1aigc.cn/)提供的支持，欢迎大家关注； 3. 如果有任何想法可以联系我们 DataWhale 也欢迎大家多多提出 issue； 4. 特别感谢以下为教程做出贡献的同学！ <a href="https://github.com/datawhalechina/llm-universe/graphs/contributors"> <img src="https://contrib.rocks/image?repo=datawhalechina/llm-universe" /> </a> Made with [contrib.rocks](https://contrib.rocks). ## Star History [](https://star-history.com/#datawhalechina/llm-universe&Date) ", Assign "at most 3 tags" to the expected json: {"id":"9296","tags":[]} "only from the tags list I provide: [{"id":77,"name":"3d"},{"id":89,"name":"agent"},{"id":17,"name":"ai"},{"id":54,"name":"algorithm"},{"id":24,"name":"api"},{"id":44,"name":"authentication"},{"id":3,"name":"aws"},{"id":27,"name":"backend"},{"id":60,"name":"benchmark"},{"id":72,"name":"best-practices"},{"id":39,"name":"bitcoin"},{"id":37,"name":"blockchain"},{"id":1,"name":"blog"},{"id":45,"name":"bundler"},{"id":58,"name":"cache"},{"id":21,"name":"chat"},{"id":49,"name":"cicd"},{"id":4,"name":"cli"},{"id":64,"name":"cloud-native"},{"id":48,"name":"cms"},{"id":61,"name":"compiler"},{"id":68,"name":"containerization"},{"id":92,"name":"crm"},{"id":34,"name":"data"},{"id":47,"name":"database"},{"id":8,"name":"declarative-gui "},{"id":9,"name":"deploy-tool"},{"id":53,"name":"desktop-app"},{"id":6,"name":"dev-exp-lib"},{"id":59,"name":"dev-tool"},{"id":13,"name":"ecommerce"},{"id":26,"name":"editor"},{"id":66,"name":"emulator"},{"id":62,"name":"filesystem"},{"id":80,"name":"finance"},{"id":15,"name":"firmware"},{"id":73,"name":"for-fun"},{"id":2,"name":"framework"},{"id":11,"name":"frontend"},{"id":22,"name":"game"},{"id":81,"name":"game-engine "},{"id":23,"name":"graphql"},{"id":84,"name":"gui"},{"id":91,"name":"http"},{"id":5,"name":"http-client"},{"id":51,"name":"iac"},{"id":30,"name":"ide"},{"id":78,"name":"iot"},{"id":40,"name":"json"},{"id":83,"name":"julian"},{"id":38,"name":"k8s"},{"id":31,"name":"language"},{"id":10,"name":"learning-resource"},{"id":33,"name":"lib"},{"id":41,"name":"linter"},{"id":28,"name":"lms"},{"id":16,"name":"logging"},{"id":76,"name":"low-code"},{"id":90,"name":"message-queue"},{"id":42,"name":"mobile-app"},{"id":18,"name":"monitoring"},{"id":36,"name":"networking"},{"id":7,"name":"node-version"},{"id":55,"name":"nosql"},{"id":57,"name":"observability"},{"id":46,"name":"orm"},{"id":52,"name":"os"},{"id":14,"name":"parser"},{"id":74,"name":"react"},{"id":82,"name":"real-time"},{"id":56,"name":"robot"},{"id":65,"name":"runtime"},{"id":32,"name":"sdk"},{"id":71,"name":"search"},{"id":63,"name":"secrets"},{"id":25,"name":"security"},{"id":85,"name":"server"},{"id":86,"name":"serverless"},{"id":70,"name":"storage"},{"id":75,"name":"system-design"},{"id":79,"name":"terminal"},{"id":29,"name":"testing"},{"id":12,"name":"ui"},{"id":50,"name":"ux"},{"id":88,"name":"video"},{"id":20,"name":"web-app"},{"id":35,"name":"web-server"},{"id":43,"name":"webassembly"},{"id":69,"name":"workflow"},{"id":87,"name":"yaml"}]" returns me the "expected json"