LLama实战本地CPU推理大语言模型-C++开发实战

【资源目录】:

├──1-1.课程介绍.mp4 143.28M

├──1-2.推演程序演示，基于130亿参数模型.mp4 5.43M

├──2-1.llama模型分析和训练数据分析.mp4 128.13M

├──2-2.git和msys2安装和llama模型下载.mp4 104.63M

├──2-3.llama推理测试程序演示.mp4 83.85M

├──3-1.llama.cpp构建环境说明.mp4 13.44M

├──3-2.visutal_studio_2022安装.mp4 102.33M

├──3-3.llama.cpp构建和项目分析.mp4 137.04M

├──3-4.cmake windows安装二进制版本.mp4 46.13M

├──4-1.ggml格式介绍.mp4 40.78M

├──4-2.conda在windows中的安装和使用.mp4 127.75M

├──4-3.conda的python环境安装.mp4 104.19M

├──4-4.llama的pth格式转换为ggml的bin.mp4 91.26M

├──4-5.llama量化模型到Q4_0.mp4 90.28M

├──5-1.Chinese-LLaMA-Alpaca 中文模型分析和下载.mp4 143.23M

├──5-2.Transformers安装和llama模型格式转换.mp4 113.85M

├──5-3.合并中文LoRA权重和llama生成全量模型权重.mp4 104.67M

├──5-4.使用Transformer和Web图形界面实现推理.mp4 189.27M

├──5-5.使用llama.cpp量化和推理中文模型.mp4 173.07M

├──6-1.llama参数ctx-size上下文大小相关代码分析.mp4 101.76M

├──6-2.predict和batch-size回复数和推理批次代码.mp4 97.78M

├──6-3.增加结果多样性-重复惩罚repeat-penalty.mp4 181.96M

├──6-4.21温度改变随机性top-k和top-p算法分析.mp4 110.56M

├──7-1.开源llamaqt项目分析说明.mp4 34.99M

├──7-10.XGptFac工厂类创建.mp4 229.25M

├──7-11.基于cmake配置了推理QT项目.mp4 211.39M

├──7-12.完成了基于QT的推理交互程序.mp4 146.14M

├──7-2.基于llama.cpp的cmake项目配置和模型加载代码实现.mp4 171.96M

├──7-3.完成了推理预处理prompt代码.mp4 163.56M

├──7-4.完成了推理结果逻辑表采样并输出.mp4 80.37M

├──7-5.完成了精简版的推理示例程序.mp4 103.11M

├──7-6.xllama接口类图设计说明.mp4 85.45M

├──7-7.XGp测试项目和线程启动停止代码完成.mp4 187.06M

├──7-8.XGpt用户输入和线程接收和回调反馈完成.mp4 154.75M

└──7-9.完成xllama的推理和反馈接口并测试.mp4 167.62M