暂停使用QQ作为服务对接,请大家使用网站在线工单系统联系我,目前只接待VIP办理、VIP售后,看到即回复,非实时。
查看: 9837|回复: 65

[人工智能&深度学习] LLama实战本地CPU推理大语言模型-C++开发实战

  [复制链接]
  • TA的每日心情
    无聊
    2023-12-29 00:06
  • 签到天数: 2604 天

    连续签到: 172 天

    [LV.Master]伴坛终老

    注册时间
    2012-9-3
    最后登录
    2024-9-8

    1万

    主题

    1万

    帖子

    15万

    积分

    管理员

    2012年到2024年,感谢各位会员朋友的支持!

    Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62Rank: 62

    推广达人宣传达人突出贡献优秀版主荣誉管理论坛元老vip会员

    QQ
    发表于 2024-7-24 00:57:11 | 显示全部楼层 |阅读模式
    LLama实战本地CPU推理大语言模型-C++开发实战

    d9d5aa119492653460e0716a78a7f3ff_image-7.png

    资源目录:
    1-1.课程介绍.mp4
    1-2.推演程序演示,基于130亿参数模型.mp4
    2-1.llama模型分析和训练数据分析.mp4
    2-2.git和msys2安装和llama模型下载.mp4
    2-3.llama推理测试程序演示.mp4
    3-1.llama.cpp构建环境说明.mp4
    3-2.visutal_studio_2022安装.mp4
    3-3.llama.cpp构建和项目分析.mp4
    3-4.cmake windows安装二进制版本.mp4
    4-1.ggml格式介绍.mp4
    4-2.conda在windows中的安装和使用.mp4
    4-3.conda的python环境安装.mp4
    4-4.llama的pth格式转换为ggml的bin.mp4
    4-5.llama量化模型到Q4_0.mp4
    5-1.Chinese-LLaMA-Alpaca 中文模型分析和下载.mp4
    5-2.Transformers安装和llama模型格式转换.mp4
    5-3.合并中文LoRA权重和llama生成全量模型权重.mp4
    5-4.使用Transformer和Web图形界面实现推理.mp4
    5-5.使用llama.cpp量化和推理中文模型.mp4
    6-1.llama参数ctx-size上下文大小相关代码分析.mp4
    6-2.predict和batch-size回复数和推理批次代码.mp4
    6-3.增加结果多样性-重复惩罚repeat-penalty.mp4
    6-4.21温度改变随机性top-k和top-p算法分析.mp4
    7-1.开源llamaqt项目分析说明.mp4
    7-2.基于llama.cpp的cmake项目配置和模型加载代码实现.mp4
    7-3.完成了推理预处理prompt代码.mp4
    7-4.完成了推理结果逻辑表采样并输出.mp4
    7-5.完成了精简版的推理示例程序.mp4
    7-6.xllama接口类图设计说明.mp4
    7-7.XGp测试项目和线程启动停止代码完成.mp4
    7-8.XGpt用户输入和线程接收和回调反馈完成.mp4
    7-9.完成xllama的推理和反馈接口并测试.mp4
    7-10.XGptFac工厂类创建.mp4
    7-11.基于cmake配置了推理QT项目.mp4
    7-12.完成了基于QT的推理交互程序.mp4
    课程配套资料.zip

    42c1b225ce12bad74e44bb0818544d5f_image-8.png

    下载地址:
    游客,如果您要查看本帖隐藏内容请回复


    三六五网络学院 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有课程收集于互联网,该帖子作者与三六五网络学院不享有任何版权,如有侵权请联系本站删除
    3、本站部分内容转载自其它网站,但并不代表本站赞同其观点和对其真实性负责
    4、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    5、三六五网络学院管理员和版主有权不事先通知发贴者而删除本文

    回复

    使用道具 举报

  • TA的每日心情
    开心
    前天 12:32
  • 签到天数: 363 天

    连续签到: 1 天

    [LV.8]以坛为家I

    8

    主题

    1313

    帖子

    4449

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    4449
    发表于 2024-7-24 01:30:35 | 显示全部楼层

    我看不错噢 谢谢楼主!
    回复

    使用道具 举报

  • TA的每日心情
    开心
    前天 09:35
  • 签到天数: 235 天

    连续签到: 5 天

    [LV.7]常住居民III

    0

    主题

    422

    帖子

    1340

    积分

    金牌会员

    Rank: 6Rank: 6

    积分
    1340
    发表于 2024-7-24 08:23:27 | 显示全部楼层
    666666666666
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2023-12-7 09:19
  • 签到天数: 277 天

    连续签到: 1 天

    [LV.8]以坛为家I

    40

    主题

    472

    帖子

    2666

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    2666
    发表于 2024-7-24 08:57:03 | 显示全部楼层
    666666666666666666
    回复

    使用道具 举报

  • TA的每日心情

    2023-12-27 11:58
  • 签到天数: 316 天

    连续签到: 1 天

    [LV.8]以坛为家I

    0

    主题

    1100

    帖子

    1239

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    1239

    vip会员

    发表于 2024-7-24 10:13:37 | 显示全部楼层
    LLama实战本地CPU推理大语言模型-C++开发实战 [修改]
    回复

    使用道具 举报

  • TA的每日心情
    无聊
    2023-12-26 10:53
  • 签到天数: 344 天

    连续签到: 7 天

    [LV.8]以坛为家I

    0

    主题

    586

    帖子

    1496

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    1496
    发表于 2024-7-24 14:21:17 | 显示全部楼层
    。。。。。。。。。。。
    回复

    使用道具 举报

  • TA的每日心情

    2024-8-14 04:31
  • 签到天数: 485 天

    连续签到: 1 天

    [LV.9]以坛为家II

    2

    主题

    834

    帖子

    6241

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    6241
    发表于 2024-7-24 14:31:51 | 显示全部楼层
    哈哈哈哈哈哈哈
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2023-12-27 08:48
  • 签到天数: 1164 天

    连续签到: 4 天

    [LV.10]以坛为家III

    14

    主题

    1967

    帖子

    1万

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    13324
    发表于 2024-7-24 15:44:58 | 显示全部楼层

    好好学习天天向上
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    6 小时前
  • 签到天数: 2470 天

    连续签到: 151 天

    [LV.Master]伴坛终老

    35

    主题

    1万

    帖子

    1万

    积分

    终身vip会员

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    17009
    发表于 2024-7-25 10:46:15 | 显示全部楼层
    支持365,感谢分享!
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2023-10-21 09:36
  • 签到天数: 578 天

    连续签到: 1 天

    [LV.9]以坛为家II

    9

    主题

    1900

    帖子

    1386

    积分

    [终身VIP会员]

    Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25Rank: 25

    积分
    1386

    vip会员

    发表于 2024-7-25 10:53:56 来自手机 | 显示全部楼层
    1111111111111
    回复

    使用道具 举报

    懒得打字嘛,点击右侧快捷回复
    您需要登录后才可以回帖 登录 | 注册

    本版积分规则

    商务合作

    客服QQ:1980803031
    点击这里给我发消息
    Copyright;  ©2012-2016  教程论坛  Powered byDiscuz!  技术支持:三六五网络学院