Видео

جزاك الله الفردوس 💚

Hello thanks for this presentation @YoussefMrini, I have two questions, the first is simple about what is the difference between data skipping and partition pruning? i felt you are talking about the same concept, which would allow the table to exactly go for a certain partition when certain filters are applied in the query. Second question, i am facing a problem with one of the tables in a Fabric lakehouse, where the tables has hundreds of billions of rows. The table was created initially by pyspark, it was also populated by pyspark code, it is very fast when queried using pyspark, however, when i try to query the table using the sql endpoint of the lakehouse, my query never completes execution, as if the partition pruning is not happening. any general ideas what can be happening?

جزاكم الله خيرا ونفع بنا وبكم❤

عندي انترفيو في امازون بعد اسبوع و الفيديو جه في وقته 😁

❤

شكرا شكرا 🤗 على هذا المجهود الرائع والعظيم شكرا لا اعلم كيف أشكركم بجد انا حقا اقدر هذا المجهود الكبير 😊😊

انا حاليا ف CH.3 HADOOP DFS انا مشتغلتش JAVA قبل كده وقررت اني اشوف الفيديوهات بتاعت ال MAP-REDUCE علشان خاطر افهم الفكرة و ال CONCEPTS الرئيسيه بس الكود مش مركز معاه اوي بفهمه بس لكن مش بطبق هل دا صح ؟؟ خصوصا اني هبدأ SPARK بعدها وناوي ان شاء الله اذاكرها و اطبق عليها ك كود كمان لاني اشتغلت PY , SQL قبل كده كتير

ربنا يباركلك والله يا هندسه 😅❤

انا عندي مشكلة مع الslides, هى clustered جدا فيها كلام كتير, الأمثلة مش ابسط حاجة بعد تلت ساعة باتوه. دا مش اول كورس Data engineering ليا ومش اول كورس database, بس فعلا انا باتوه في وسط دا

types of measurement مش المفروض ؟ Additive. Semi-Additive. Non-Additive. Textual. Derived. Factless.

شكرا علي المجهود. why not just use the Year/Month as a key in the mapper, and Temp as a value. partitioning is default, group comparator is disabled. i think that will return the same results. صح ولا انا فاهم غلط ؟

هو الكورس كدة خلص ولا لسة؟ ولو لسة فممكن الكورس يخلص امتى؟

ممكن لو سمحت حضرتك تنزل السلايدات اللي بتشرح منها وطلب تاني ياريت لو يتم عمل google classroom تاني لان الموجود حاليا full وجزاكم الله خير الجزاء

ممكن لو سمحت حضرتك تنزل السلايدات اللي بتشرح منها وطلب تاني ياريت لو يتم عمل google classroom تاني لان الموجود حاليا full وجزاكم الله خير الجزاء

استاذي الفاضل, هل الرود ماب دي مازالت مستمره ابدا فيها في 2024؟ وهل كودزيلا او الزيرو في شرح بايثون كويسين ولا محتاج ادور على حاجه تخص بايثون في الداتا انجينير في كذا كونتنت بيبقا مكتوب python for data engineering

❤❤

very impressive ya Mostafa, please keep going...

السلام عليكم اولا جزاك الله خيرا على هذه السلسله انا شفت الفيديوهات الى فاتت كلها تقريبا وما شاء الله كانت جميله ومفهومه بس للاسف الفيديو ده حاسس ان الدنيا مش وضحه خالص يا ريت اعادت الشرح بطريقه مختلفه لهذا الموضوع لان بدايه الفيديو اصلا مفمتهش يعني ايه cluster mode, client mode, and local mode ولما كملت الفيديو ما فهمتش بردو وطبعا ممكن تكون المشكله عندي انا مش فى الشرح وشكرا

شكرا جزيلا على الشرح الرائع ياريت تكملوا السلسلة بشرح أكثر ل Fabric 🙏❤

شكرا ليكم حلقة رائعة كالعادة ❤❤

اولا جزاك الله خير على المحتوى الجميل ولا اروع هل slides متاحة

حضرتك الفيديو حلو جدا فعلا بس ينقصه المثال , انا حاولت اذاكر من اكتر من مصدر منهم مصادر كويسة جدا مفيش افضل من شرحك اللهم بارك بس لو فيه امثلة بجداول يا ريت

اضطريت ارجع للكورس تاني بعد ما قررت اشوف فيديو مشابه للقناه ومع انه اخد وقت اكبر في الشرح الا انه مكنش ملم بكل التفاصيل اللي حضرتك بتقولها , جزيت خيرا والله يجعله عمل صالح يا رب

الصوت في مشكله

جزاك الله خيرا، حلقة جميلة جدا جدا بس لو ممكن نعمل فيديو كامل نتكلم فيه بالتفصيل عن ال Data Lakehouse وال Architecture بتاعتها بالتفصيل اكتر عشان برضو لسا مش واضحة اوي

بدايه الكورس ده فين لو سمحت ؟؟

يعطيكم العافية وشكرا على المجهود ياريت لو كون فيه Demo يكون واقعي أكثر ويتم ربط Demo بشرح النظري الي صار وأفضل يكون Demo على أكثر من شغلة مش بس Real time

اولا جزاك الله عنا كل خير يا هندسه , معلش بس بطلب منك ترفع ال lecture notes مش لاقيها في اللينك

ربنا يباركلك يا بشمهندس يارب

بارك الله فى حضرتك يارب

الاوبشن بتاع ازاى نختار tool موجود فانهى play list

ربنا يباركلك يابشمهندس يارب

انا عندي سؤال يا بشمهندس في حتة ال dimension table size في المثال المذكور بتاع 3 col وكل واحد فيهم له 3 values مش المفروض ال combinations المختلفة تكون 3x 3 x 3 =27 مش 9

يعطيك العافية معني الكلامك انو انا لو استخدمت ADX ممكن استغني عن استخدم Azure Event Hub Azure Stream Analytics AND Kafka Flink ولا هوة كل واحد بعمل اشئ مختلف يعني لو بدي Real time استخدم Azure Event Hub Azure Stream Analytics OR Kafka Flink لو بدي Near Real time استخدم ADX

النودز تقدر تكاش ميهماش 🤣🤣🤣

شكرا على المجهود 🌹 الرجاء وضع السلايد والمصارد في الوصف وشكرا👍

طيب لو انا شغال علي hdfs كده كده الداتا متقسمه blocks ليه spark ميشغلش ال Executors علي ال blocks علي طول بدل حوار ال partitions

شكرا على المجهود 🙏 ممكن السلايد والمصادر

جزاك الله كل الخير شكرا على السيشن الجميله دى بجد ربنا يباركلك يارب ويجهلع فميزان حسناتك ويرزقك الفردوس الاعلى من الجنه ممكن حضرتك تفهمنا الفرق بين iceberg ,hudi,delta

جزاك الله خيرا يا بشمهندس مصطفي علي مجهوداتك

ماشاء الله جميل جدا ربنا يجعله في ميزان حسناتكم

بشمهندس السلام عليكم، أنا برا المجال تماما كنت اداب انجلش و هقدم على منحة الiti و محتاجين اكون عارفة big data، ممكن نصيحة، و هل الكورس هيفيدني؟ حاليا بذاكر داتابيز و الحمدلله ماشية فيها و الانجلش عندي كويس الحمدلله بس محتاجة نصيحة قبل بداية الكورس عشان انا حاسة ان ال audience اللي قولت عليهم مش مبتدئين، لو فيه كورس المفروض اخده قبله مثلا ؟ اخر حاجة بحاول ادخل لجوجل كلاس روم بس بيقولي full

هو لو عايز اعمل query هنا لازم اعمل join ل ال3 لو عايز اجيب الweight مثلا صح؟

جزاكم الله خير فيديو مفيد والشرح سهل ♥️ ممكن بس البريزنتيشن اللي بشمهندس كريم بيشرح منها؟

💌

هو الصوت مش شغال صح ؟

ال classroom بقي Full معرفتش أدخل يا بشمهندس

ي بشمهندس الرود ماب دي تنفع حاليا ولا لاء وجزاك الله خيرا ❤️❤️

Thank you!

ليه حضرتك بتشرح علي rdd مش dataframes