llm fixing dataset တည်ဆောက်ခြင်း

ဘာသာစကားမော်ဒယ်အတွက် Qlora ဒဏ်ငွေ tuning dataset ၏အဆောက်အအုံကိုဖြတ်သန်းခြင်းကိုဖြတ်သန်းခြင်း။
Nvidia GTC Signup: https://nvda.ws/3tqlb6

tuning code: https://github.com/sentdex/llm-finetuning
5000-step walls1337bot adapter: https://hugingface.co/sentdex/walls1337bot-lama2-7000
WSB Dataset: https://huginggingface.co/datasets/datasets/datasets/wsentdex/wsb-003.005
“I have every reddit comment” original reddit post and torrent info: https://www.reddit.com/r/datasets/comments/3bxlg7/i_have_every_publicly_available_reddit_comment/
2007-2015 Reddit Archive.org: https://archive.org/download/2015_reddit_comments_corpus/reddit_data/
Reddit CONDQUERY 2007-2019 ။

မာတိကာ:

0:00 – Dataset အဆောက်အအုံကိုမိတ်ဆက်ပေးရန်မိတ်ဆက်ခြင်း။
02:53 – Reddit Datataset Options (torrent, archive.org, gourery)
06:07 – ယူဆချက်အမြောက်အများကိုတင်ပို့ခြင်း (နှင့်အခြားအချက်အလက်အချို့)
14:44 – GZip Archives အားလုံးကို decompress လုပ်ခြင်း
25:13 – ပစ်မှတ် subreddits များအတွက်မော်ကွန်းတိုက်ကိုပြန်လည်ပေါင်းစပ်
28:29 – ဒေတာကိုဘယ်လိုဖွဲ့စည်းရမလဲ
40:40 – လေ့ကျင့်ရေးနမူနာများတည်ဆောက်ခြင်းနှင့်ဒေတာဘေ့စ်သို့ချွေတာခြင်း
48:49 – စိတ်ကြိုက်လေ့ကျင့်ရေး JSONS ဖိုင်များဖန်တီးခြင်း
54:11 – QLORA သင်တန်းနှင့်ရလဒ်များ

အာရုံစာအုပ်မှအာရုံကြောကွန်ယက်: https://nnfs.io
Channel အဖွဲ့ဝင် – https://www.youtube.com/channel/ucfannube.com/channel/ucfzlcwgwgwgwyyiq0webq/join
Discord: https://discord.ggg/sentdex
Reddit: https://www.reddit.com/r/sentdex/
အကြောင်းအရာကိုပံ့ပိုးပါ – https://pythonprogramming.net/support-donate/
Twitter: https://twitter.com/sentdex
Instagram: https://instagrambam.com/sentdex
Facebook: https://www.facebook.com/pythonprogramming.net/
Twitch: https://www.twitch.tv/Sentdex