【保姆级AI教程】3小时训练一个拿捏你喜好的GPT，没有显卡也能跑！

Jack-Cui:
视频总时长接近40分钟，在线coding，有什么问题，在线解决，最终训练得到了一个能写古诗词的GPT。 希望本期实战演练的视频，能帮助到正在学习 AI 技术的你，提升技术，给予灵感。

【回复】回复 @超想简单 :因为没有提前准备视频稿子，软件自动识别的字幕，不忍直视[笑哭]。我晚些再弄下～
【回复】回复 @超想简单 : b站有ai字幕 你开一下就能显示
【回复】up主，保姆级教程细节感人。
Jack-Cui:
果然，技术教程视频没人点赞，播放也惨淡[笑哭]。 难道只能出整活的视频吗？

【回复】我觉得在笔记本和手机上看，都会很难受，字会太小。我真的很用力的在看了[笑哭]
【回复】有人看的，我太喜欢这类技术视频了
【回复】回复 @ChandelierAP :录屏时应该把字体设置大一些，吃亏了.. 手机端，两个手指拖拽可以放大画面。 以后注意这个问题[大哭]
熄灯看报:
看到崔哥对播放的苦恼，在这说一下我自己。 视频没仔细看，主要原因如下：虽然各类gpt一窝接一窝，但对我来说gpt还是以openai的chatgpt为主。chatgpt功能强大，那么这个视频训练出来的gpt能有chatgpt的几分功力呢。我不知道，但懒惰和愚蠢让我觉得肯定训出来是一塌糊涂的。更不用说我也不知道自己有什么喜好，不知道该训个啥样的，所以决定继续摸鱼。

【回复】没有chatgpt强，chatgpt背后是gpt4，咱们今天讲的是gpt2。 LLaMa的模型也能讲，但是训练太耗费gpu，很多人也跑不了。就选了gpt2的内容
【回复】回复 @Jack-Cui :gpt2和chatglm-6b哪个效果好呀
【回复】嗯 确实 openai的chatGPT还是目前最强力的，就是现在ip被禁了上不去，you have blocked 这类问题崔哥能发个解决视频 就太好了，目前好像没有视频会详细解决这个问题的
暮迟-muchi:
现在流行视频配套一键整合环境懒人包一同食用，如此名号便可广为传颂，香火不绝，不日便功德圆满，位居赛博众佛一列。

【回复】别小看懒人包。一个人省一小时，1000人1万人，那得省多少小时？
【回复】哈哈，真相了。我也打包过。
【回复】回复 @兔子的望月星华 :可不止一小时，sd刚出的时候我折腾了半天没弄好，整合包则顺畅的离谱
爱梵高的猫:
最近在看一本书，但看不懂，想试着问gpt里面的具体内容，gpt跟我说他数据库里面没有，所以我找到了这个视频试着自己训练一个，把书本喂给他然后讨论。因此发现了这个视频，我之前不认识up主，但很喜欢up主这种长视频的方式，因为自己操作的时候也会遇到报错之类的问题，我真心不希望up剪掉这些，因为解决问题的思路更重要，如果只把饼烤给我，我看不到烤饼的过程，下次我想烤别的就不会了，就又得等up烤。支持up，这40分钟我看的很舒服。最后想问一个问题，我最开始说的那个喂gpt书的问题，有可能解决吗？

【回复】可以喂，但是效果可能不好。最好在一些开源大模型基础上微调
【回复】回复 @爱梵高的猫 :你好，想请教下gpt4怎么使用，网站的还是自己搭建的呀，有没有相关教程推荐呢？[星星眼]
【回复】自己训练的只是gpt2，可能没那么智能
修改昵称需要__个硬币:
主要是教程类的不适合摸鱼看，摸鱼只适合看娱乐性的视频，晚点或者六日啥的数据应该能上去点

【回复】嗯嗯，晚些我再发个说明
清疯以Chen:
野色有佳趣，全身不得心。無心無別始，不爲兩遊人。 夜上春風起，年尊夕浪迷。長山無一事，時時不覺時。 萬里到城北，波光日起中。不堪期到處，好有一樽人。 春色不相妬，秋風先爾生。草蘭亦已好，公子幾時歸。 露露香無事，春風正有梅。春風故人老，更有醉書人。 兩樹無人易，思依兩眼秋。應銷留地散，山又百枝春。 亭頭故山下，秋色更無音。寂寞無塵土，相望不通山。

【回复】iter 5000: loss 4.3254, time 1613.37ms, mfu 0.02%
【回复】为什么觉得这诗还不错啊，跟我在课本上看到的也差不了多少
马儿驾驾丶:
感觉up不必担心播放量，这种一步步做的教程肯定会有越来越多入门的人搜索的，就和高数课程一样，需要时间累积

【回复】有需求的想学的自然就会来
【回复】回复 @井抵只娃 : 我也来了
业余小法师:
感谢UP主，我照猫画虎整了一个生成宋词的GPT。 它生成的 《踏莎行》：云卷西风，一帘无雨，碧纱窗户外，一帘花落影，只教弹尽，夜深沈醉不知愁，莫教人未，不似吴愁不断，愁多怨，泪滴花残，芳心渐老时。 修改润色了它生成的一首诗词——《水调歌头》：八十里云暮，龙飞起舞，来望赤城湖上，胜似西湖。上手一番新雨，孤影山阴偶遇，时已过黄昏，又向柳棠花田去。香满一枝梅，俯身娇弄。 至于“技术教程视频没人点赞，播放也惨淡”，这个是常态，10亿人有娱乐需求想看整活视频，可能只有几万人想搞搞自己的个人GPT。按这个比例，专业知识类视频永远播放量惨淡。

CappuccinoC:
step 500: train loss 3.7108, val loss 4.9560，宋词[脱单doge] 事成醉鄉少，如渠少二人。千年白乳臭，不肯出詩書。 昨日出門下，長年度白雲。欲知今日了，猶自老情人。 丹竈如葱蒨，今年若伴歸。何人彈蟹子，一鶴唳朝晡。 若使通羊好，吾猶作畫圖。不思君不至，只在鹿門關。 世事逢魚躍，應慚北斗鄰。朱門將老矣，更過寺人腸。 大隠將軍說，吾今正未然。但知今日別，更作赤人看。 石裏分顛倒，偷無不少年。日高原有恨，只在大容傳。 倦息非專里，今朝未易知。不知如不遠，不識後人心。 相從南山守，惟愁更半東。自憐西北客，應是落花人。 爲問魚龍宅，還家在峭城。若逢如有賞，不會更分明。 大地將軍後，能慙說說疎。賢哉三十載，終亦爲平生。 來餘開丹堊，無爲廟廟儀。不知昭妃子，天下要纍纍。 已老爲親世，俄然此意深。儻容曾有定，不暫少人疑。 事事歡無姓，惟庸罥蛛絲。只因王未得，不盡在人知。 不早知差遠，輕生不復存。尚稱天下蔑，兩箇是須迴。 向來人已死，無事可能傷。世事天地黑，何人問中人。 未去人歸少，何須友與賢。三年好而弟，那必不須親。 忍辱終南面，求前語事親。所以爲厲局，毋令不仁中。 孝請先賢者，而今復一人。一言能道道，止作孝兒行。 不欲惟爲母，今非樂其賢。王孫無尚少，徒自不傷情。

司马阿姨:
听说露脸up比不露脸，粉丝数高一个数量级[吃瓜]

【回复】回复 @Jack-Cui :代码写的不咋样，人倒是挺帅的
【回复】长我这样的，没啥优势[doge]
【回复】回复 @Jack-Cui : dpl换个男神脸，rvc换个男神音，小迷妹不请自来。
染墨_rm:
202万参数，step 5000: train loss 3.8769, val loss 4.0774 time 44514.31ms, mfu 1.63% 歲月正當午，天涯正月明。夜深無處事，今日是誰言。 前日過冬晚，今年不敢窺。曉風如下耳，日日踏雲飛。 世事西山路，山明落葉深。春來又千里，不是往來眉。 今歲寒思到，今年不記愁。只因春草落，誰得在來時。 方上望鄉來，今朝太白多。不知逢白日，先到轉無邊。 玉座非真曉，金鋪滿太閑。夜來逢早到，似與向東風。 人境初分早，風高意到俱。白雲將過後，當與故人書。 去歲千家樂，皇都是帝城。只憐春客意，只是戍樓還。 南國關山後，北歸樹樹多。年年從苑客，猶唱問青枝。 北苑春光轉，南驚北苑春。初和春草落，莫作夜離居。 樓上初封樹，春風破物春。當時好苑酒，正是獨春春。 寂寞煙烟好，春風月下城。惟逢重白盡，著月二華春。 昨日離城白，今朝得客來。幾時春水水，不敢問皇城。 葉葉黄庭暗，庭花紫翠微。道人知客意，不惜歲寒風。 雨裏輕花月，人間倚翠陰。昨朝將道處，先遣不須知。 旅館迎春後，春光澹澹迷。山高人樂處，猶在未宜春。 舊寺縈花老，悲非病未求。今朝名老去，復向更晴州。 月落千峯下，山年滿塞來。唯遊無處處，不自謫京華。 我到都城路，今朝喜別時。山河長近客，不見遠浮來。 北苑秋中晝，重門晚寺門。山城多草草，閨後萬年愁。[脱单doge]

小李排行老二:
UP能不能在github建一个你的库，简单一点，老外的库太麻烦了，或者是打个包让我们小白能无脑些[星星眼]

【回复】嗯嗯 后面做大一些的工程项目 可以这样做
待戈-:
哥，能出一期环境配置激活依赖的视频吗，我搞不清楚这里面的逻辑，学校老师就只教我们直接pip install，我电脑环境烂完了[脸红]

【回复】后面看看，现在可以先搜下anaconda教程，这个还是挺多的
陆安桐:
小白请教，训练自己的人工智能有什么用？使用场景是什么？

【回复】现在使用的人脸识别 语音识别 chatgpt都是这样训出来的 就是网络 数据 loss不同
【回复】可以针对自己的场景进行训练，例如律师模型。博识AI好用且长期稳定支持4.0（戳我头像）
【回复】回复 @Jack-Cui :loss是指损失函数吗
养猪小能手QXC:
冲你这张脸我就点赞了，很帅的小哥。再问一下，这个和清华开源的那个ChatGLM 6B，有什么区别吗？

【回复】我玩的是GLM6B 4int，32int对GPU要求比较高。
【回复】回复 @Jack-Cui :嗯嗯，非常感谢解答，我好好学学
【回复】基础模型不同，视频讲的是base llm，你说的这个是instruction llm，效果也不同。视频教程讲解的，需要自己做训练。
我是深海鲸:
多来点这样的排错视频吧，想玩网上的很多开源项目，但是环境搭建很容易把我这种人劝退掉