SQL, PYTHON OPTIMIZASYON TEKNIKLERI VE FAZLASI
HTML-код
- Опубликовано: 18 окт 2024
- evet arkadaslar bu videoda sql ve pyspark optimizasyon tekniklerini konustuk, mulakatta karsiniza cikabilcek sorular oldugu icin incelemek istedim, sorulariniz varsa yorum atabilirsiniz, begendiyseniz like atmayi uhnutmayin tesekkurler :)
videoda kullanilan google docs: docs.google.co...
Daha detayli soru sormak veya 1-1 gorusmek icin kanala katilabilirsiniz, KATIL butonu linki asagida:
/ @selmanay
harika, çok faydalı video olmuş. lütfen daha sık videolar gelsin
Harika bir video olmuş devamını bekliyoruz
En son Data modeling videonu izlemiştim ondan sonra video yoktu yeniden video çekip atmana çok sevindim. Çok faydalı buluyorum videolarını anlatım şeklini emeğine sağlık.
Umuyorum böyle devam edersin bilgi birikim anlatım akılcılığı video çekmek için gereken herşey var.
Biraz ortam dekarosyon kassan çok daha iyi izlenmeler ala bilirsin diye umuyorum (Bknz alex the analyst)
Edit: Bu yorum-u yazarken daha video-ya başlamamışdım ilk 5 dk itibarıyle yine çok faydalı harika bir video tekrar elinize sağlık 👍
bakicam tesekkurler yorum icin, bi kamera vs lazim bana :d
Emeğine sağlık, güzel içerikler üretiyorsun bu şekilde devamını dilerim ❤
tesekkur ederim
Teşekkürler, içeriklerin devamını bekliyoruz
evet efenim, kendilerini beğenerek takip ediyoruz :) kameran da çok iyi 👍
Selman dostum merhabalar. Eylül ayında askerlik yaptım bedelli. Dönünce memnun olmadıgım işimden ayrıldım ve yeni bi yerde iş aramaya başladım. Bir sürü mülakatlara girdim yüzlerce başvuru yaptım. Ekimin başından beri senin videoların çok faydalı oldu. Mülakat taktikleri çıkabilecek SQL soruları vsvs biçok videonu defalarca izleyerek hazırlandım. Sadece1 yerden olumlu dönüş aldım ve ordaki mülakatta da senin çektigin videodan 2-3 soru aynısı çıkmıştı. Kısacası büyük faydan dokundu. 2 gün önce bu pazartesi de Data&BI Engineer olarak işe başladım ve çok memnunum. Allah razı olsun senden çok teşekkür ederim eminim biçok kişiye de fayda sağlıyosundur ve ilerde de sağlayacaksındır.
Bir de soru sorayım sana bu vesile ile. Başladığım şirket komple Google Cloud platformları üzerinde çalışıyor ve benim tarafta bana atanan görev de Looker ve LookML teknolojisi üzerine. Şu anda bunu öğreniyorum Cloud kursundan. Bunu hiç duydun mu? Fikirlerin nelerdir? Yurtdışında kullanılıyor mu karşılaştın mı..?
İstanbuldan selamlar sevgiler
evde cevap vericem tesekkurler mesajin icin cok mutlu ettin
tekrar cok tesekkur ediyorum yorum icin :) basarilar dilerim yeni isinde. google cloud platformu cok iyi, yani genel olarak girdigin sirketin cloud kullanmasi cok iyi eski sistemler yerine yeni teknolojiler ogrenceksin baya sanslisin o acidan. onun disinda Looker da yine (Microsoft) Power Bi, (Amazon) Quicksight veya Tableau gibi benzer bi tool, bi tanesini ogrenirsen digerlerini de cok rahat kavrarsin hepsi ayni mantik, ML ozellikleri de var bu dedigim uygulamalrin onu da ogrenmen senin icin cok faydali olur, data engineerlerinde artik bu alanlari da anlamasi ogrenmesi gerekiyo diye dusunuyorum. yurtdisinda cloud kullaniliyor, aws,azure,gcp hepsi gayet gelecege yonelik seni gelistiren yerler olucak cloud teknolojilerinden ayrilma derim, tekrar basarilar su an icin iyi gozukuyo :) bol bol ogren lookeri ve genel google cloud teknolojilerini, sonraki sirketin google cloud kullanmasa bile microsoft veya aws e alisman cok kolay olur.
@@SelmanAy evet bu alanlar gerçekten çok değerli. çok teşekkürler tavsiyeler için. inşallah herkes hayalindeki yerlere gelir sen de aynı şekilde. takipteyiz 🫶🏻
@@yattebayo tesekkur ederim varsa onerdigin aklina gelen icerik yazabilirsin o konulara da bakarim
Birde mongodb de batch etmek gerçekten çok hızlandırıyor özellikle büyük datalarda süre olarak yüzde 30 azalma görmüştüm
Devamini bekleriz, sql yapilandirmasi ile ilgili guzel vlog olmus
tesekkurler
Çok Teşekkürler ❤
Hocam sana tavsiyem ve senden ricam, bir gün otur kendine bir program yaz. Öncelikli konu başlıkları. Bu başlıklarda çekilecek alt konu başlıkları ve videolar. Sonra video içeriği, örnekler makaleler vs belirlersin. Çıkardığın şemaya birebir uymak zorunda değilsin araya videolar vs eklenebilir tabi ama böylece bir nevi ders-kurs lar oluşur, videolist ortaya çıkar. Kanal da kendini toplar sen de ne zaman ne yapacağını bilip hareket edersin. Tabi YT ye ne kadar ağırlık vermek istediğine bakar ancak düzenli bir yönetimle rahat ilerleyebileceğini düşünüyorum.
Naçizane fikrim ve önerim öncelikle PYTHON, SQL, AMAZON ana başlıklarını ele alman. Python da veri işleme için kullanılan kütüphaneleri tek tek inceleyebilir, öğretebilir, endüstride kabul görmüş kullanım örneklerini anlatabilirsin. SQL de belki biraz ders belki biraz kavramlar belki soru çözümleri artık ne uygun görürsen. AMAZON kısmında da önce AWS nedir, hangi alt başlıkları vardır. Bunlar nerelerde ne için kullanılır, neleri ne için öğrenmeliyiz gibi giriş yaptıktan sonra, her bir AWS App i için ayrı video(lar) çekilebilir.
haklisin daha duzenli olmali su an genelde bi sonraki videoda ne cekcegimi ben de bilmiyorum :d aklima geldikce cekiyorum bi nevi ama toparlicam vakit de olmuyo acikcasi duzenli bakmaya :( onun disinda konsept zaten SQL, Python, Cloud uzerine su an icin bir de sektordeki yeni gelisme vs varsa onlardan da bahsediyorum yardimci olmasi acisindan, tesekkurler yorum icin
ağabey böyle olabilir mi optimizasyon konusu için mesala etl yapıcaksın işe tablolar ayrı data sourceler da malum ayrı databaseler de
pyhton yada spark ile yapsak
kaç tane cursor ve connection kurucaz , ramde değişkenleri tutucak vs
bunun yerine eğer storage de bir sıkıntımız yoksa tabloyu yada tabloları o şemaya taşısak daha iyi olabilir mi ?
anlamadim tam olarak
@@SelmanAy böyle mesala athena da datasource da kaynaklar varya
Farklı kaynaklardan tabloları çekicez o sütünlardan başka tablolara veri aktarıcaz ama py ile yaparsak bir tane connection bildiğin gibi yetmez çünkü datasourcelar farklı
İşte birden fazla connection cursor oluşturup öyle mi mantıklı olur yoksa o tabloları kopyalayıp aynı datasource a koymak mı mantıklı olur ?
birden fazla connection cursor olusturup yapabilirsin dogru anladiysam eger @@vanderberg8591
Selman ağabey öncelikle ellerine sağlık güzel bir video olmuş. Endüstri okuyorum şu an 3.sınıfım. SQL dersinden sonra aşık oldum veriye python'da da az bi şeyler karaladım zamanında sana sorum şudur : 3.sınıf olan Data Engineer olmak isteyen bir Endüstri'ci genç hangi sırayla ilerlemeli ? Önce Python sonra SQL gibi teşekkür ederim şimdiden.
VE EKSTRADAN
3.sınıf hallerine dönsen şunu yapardım/şunu yapmazdım... çok sağ ol abi şimdiden seni de şimdiden yordum...
tesekkur ederim yorumun icin , doncem detayli sekilde
@@SelmanAy tamamdır ağabey teşekkür ediyorum şimdiden
sira konusunda data engineer nasil olunur videosunda bi sira belirttim oraya bakabilirsin, ama once sql sonra python veya beraber ilerleyebilirsin bi proje yaparsan guzel olur ikisini de kullanabilcegin.
3.sinif halimde bu alanlara hic bakmiyodum, o yuzden sen videolari izliyosan daha iyisin su an :) surekli arastirma yapip bi de bu alanla ilgiliysen online kurslar alabilirsin udemy/edx/coursera gibi sitelerden ucretsiz olanlari sana yardimci olur
Hocam selamlar , yardımcı olmak isterim , data engineer çalışıyorum bende 3.sınıfım bölüm önemli değil ama Se okuyorum işte bölüme kimse bakmıyor açıkcası her neyse
Selman ağabey doğru söylemiş az bir şey eklemek istiyorum . turkcellin sql eğitimi çok iyi açıkcası bir de end to end proje yapabilrisin mesala web scrapping ile verileri database ' e yükle yada ücretsiz apilerle.
hem py hemde sql (çok fazla da olmasa ) iyi gelişir
@@SelmanAy Selman abi çok teşekkür ederim vakit ayırıp cevaplandırdığın için. O zaman SQL + Python'u şu an birlikte götürmeye çalışacağım okulla birlikte. Bir de diğer teknolojilere de hakim olmak için İstanbul Data Science Academy'nin Data Engineering bootcampine katılmayı düşünüyorum cloud olarak Google Cloud kullanıyorlar sence bu tarz eğitimler CV'mde büyük artı sağlar mı (alan dışı olduğum için) yoksa israf mı olur ? Teşekkür ederim şimdiden.
ozur dilerim Selman Ay, uzun zamandir seni takip edemedigimi dusunuyor olabilirsin.. Ancak her videonu bir saniye bile kacrimadan izledigimden emin olmani istiyorum. Seni eviyorum selman ay
tesekkurler dostum.. ilk gunden beri yanimdasin sagol..
@@SelmanAy seni takip ettiğimden beri tubitak ve arcelikde staj yaptim etkin cok buyik selman ay