第十章 大语言模型安装与应用

第十章简介

本章介绍大语言模型(Large Language Model)的本地安装、推理分析,包括国内主流开源大模型,Qwen系列、ChatGLM系列、Baichuan系列和Yi。同时为了辅助大家了解LLM的能力边界和应用,分析一个54K stars的LLM应用工具——GPT Academic(GPT 学术优化)。

通过本章可以了解到四个国产开源大模型的:

  1. 安装部署环境准备
  2. 模型代码结构设计方案
  3. LLM推理流程步骤
  4. 多轮对话prompt组装方式
  5. 显存占用与上下文长度关系趋势
  6. LLM内置角色system、user、assistant、observation的作用与区别
Copyright © TingsongYu 2021 all right reserved,powered by Gitbook文件修订时间: 2024年04月26日21:48:10

results matching ""

    No results matching ""