Büyük Dil Modellerini Fine-Tune Etmek 🤗 Hugging Face ile NLP
HTML-код
- Опубликовано: 9 фев 2025
- Bu videoda fine-tune ve RAG yaklaşımlarını kısaca anlattım ve büyük dil modelleri fine-tune etme projemize giriş yaptım.
🚀 Destek olmak için bize katılın: bit.ly/Tirenda...
🚀 Üyelere özel videolar: bit.ly/Tirenda...
🔥 HuggingFace ile NLP Udemy Kursu: bit.ly/Hugging...
🔥 Derin Öğrenme Udemy Kursu: bit.ly/TensorF...
✨ Udemy: www.udemy.com/...
✨ Medium: / tirendazacademy
✨ X: / tirendazakademi
✨ Linkedin: / tirendaz-academy
▶ ChatGPT dersleri: bit.ly/Chatgpt...
▶ Derin öğrenme dersleri: bit.ly/35ffY0A
▶ Makine öğrenmesi dersleri: bit.ly/2zz9XQz
▶ Veri bilimi dersleri: bit.ly/3mFZYMr
▶ Pandas dersleri: bit.ly/37MYLvv
▶ Veri görselleştirme: bit.ly/2zye0wu
▶ Oynatma listeleri: bit.ly/Tirenda...
#yapayzeka #veribilimi #python
Çok yararlı bir paylaşım 👍
10B parametre 10Bin değildir 150k dolarlık işlemdeki model boyutu muhtemelen 10 milyar parametrelik modeller içindir o kısmı (@10:12) düzeltmenizi tavsiye ederim.
Ekleme yapmak istiyorum: Yüklenen bir modeli eğitmenin zorluğu kişiden kişiye değişir. Modeli eğitmenin 2 yolu vardır:
1- Prompt ile belirtmek (Her model promptu düzgün algılayamaz)
2- Fine-Tuning (Buda cod ve yazılım bilen şahıslar için çokta zor olmayacaktır
Ayrıca model eğitmek ücretsizdir. Asıl ücretli olan modeli çalıştırmak ve API ile dağıtmaktır. Bu sorunu da kendinize güçlü bir sistem kurarak veya sanal makine satın alarak çözebilirsiniz. Sanal makineyi tavsiye ederim.
@@yasminermez32 model egitmek ücretsiz mi :) sizce neden sadece büyük şirketler veya dünya çapında eniyi seviyelerde olan üniversiteler model üretiyor. Eğitim kişi bazlı bir kaç aylık maaşla yapılacak kadar masrafta bile olsaydı dolar bazında maaş alan yazılımcılar veya ML engineerler en azından birtane model çıkarırdı. Şuanki kişi bazlı üretilen modellerin hemen hepsi fine tuningdir, pretraining değil. Kısaca asıl masraf eğitimdir şuanki llama3 ün 405b lik modelini bile bizim proflar bizim devlet kurumlarına ve şirketlere sıfırdan eğitmek değil fine tune etmeyi öneriyor bu eğitimin maliyetinin devasa miktarda olmasından ötürü.( bu arada bunu bile yapamıyorlar Allah islah etsin bizimkileri)
Hocam chatGPT ile Tensorflow video su çekebilirmisiniz
Nasıl bir video biraz daha açar mısın?
Hocam mesla chatGPT ye bir tensorflow projesi yaptirmak
Hocam zamaniniz olursa chatGPT ile Tensorflow video su çekebilirmisiniz
Hocam mesela el hareketleriyle alfabe olabilir
hocam cevap versenize
Dil öğrenen bir yapay zeka yapmak için Hazır kütüphaneler kullanmadan , algoritma kodunu bile kendiniz yazdığınız ders veya kursunuz var mı?
Su an sadece Hugging face ile nlp kursumuz var.
Hocam eğer Türkçe bir veri seti kullanırsak cevaplar da Türkçe mi olur?
Evet verir. Eğitmeden Mistral modelde denemiştim cevap verdi. Türkçe veri seti ile eğitilirse daha iyi cevaplar verir.
Veri setinin büyüklüğüne göre değişir, eğer 0 Türkçe veri var ise ona göre çok büyük Türkçe veri sete ihtiyaç duyar
Üretken Tirendaz da hangi videoların olduğunu nasıl görebilirim.
Üretken tirendaz en üst seviye bütün videolara ulaşabiliyor.
Sıradaki RAG olsun hocam