Машинное обучение и нейросети / Интервью с техническим директором Яндекс.Дзен
HTML-код
- Опубликовано: 2 июн 2024
- Из этого выпуска вы узнаете о том, что такое машинное обучение (machine learning), какие бывают нейронные сети, что такое data sets и чем инженер машинного обучения отличается от data scientist.
В гостях CTO компании Яндекс.Дзен - Антон Фролов.
Кроме того, у Антона история обычного парня, который не блистал знаниями ни в школе, ни в универе, но добился многого к своим годам.
Так что, заваривайте чаинский/кофеинский и погнали! 😉
~~~~~~~~~~~~~~
ЛЮБИМЫЙ ПАРТНЁР ELBRUS CODING BOOTCAMP
Elbrus - это лучший формат обучения программированию.
У ребят идет набор в новый поток, подробнее тут: clck.ru/NmqtM
Старт 6 июля. Вступительные экзамены до конца июня, ПОСПЕШИ!😎
~~~~~~~~~~~~~~
Linkedin Антона: / anton-frolov-15912047
Емейл для связи: anton-fr@yandex-team.ru
Аудио-версия выпуска: bit.ly/3dsavWt
Материалы из выпуска: t.me/itbeard/393
______________________________
АЙТИБОРОДА В ИНТЕРНЕТЕ:
🔹 Сайт - itbeard.com
🔹 RUclips - / itbeard
🔹 SoundCloud - / itbeard
🔹 Discord - s.itbeard.com/discord
🔹 Telegram - t.me/itbeard
🔹 Instagram - / itbeard
🔸 Стать спонсором - ruclips.net/user/itbeardjoin
______________________________
00:00 - Начало
01:14 - Про себя
07:55 - РЕКЛАМА
11:32 - Разработка процессоров
22:21 - О переездах в Европу на ПМЖ
24:51 - Переход в Касперский
28:06 - Переход в Яндекс
34:29 - О PhD
37:41 - Переход в Дзен
41:23 - Примеры алгоритмических фидов
42:15 - Что такое Machine Learning
45:23 - О хайпе ML
46:09 - Почему считают на видео-картах
47:36 - В каких областях применяется ML
49:01 - Когда применять ML целесообразно
50:11 - Как называют спеца в ML и чем он занимается
52:16 - Что такое модель данных
53:24 - Почему важно выбрать удачную модель
56:55 - Кто работает в ML - градации специалистов
1:00:16 - Отличие датасаентиста от инженера по машинному обучению
1:04:41 - Реально ли начать учится ML у себя на ноутбуке
1:05:59 - Типы моделей машинного обучения
1:10:26 - Про нейросети
1:12:48 - Разметка данных
1:13:57 - Проблемы в ML
1:15:26 - GAN - конкурирующие сети
1:19:36 - Самообучающиеся модели
1:22:09 - Про Искусственный Интеллект
1:27:17 - Как стать ML инженером
1:35:08 - Про собеседования
1:37:43 - Источники знаний для ML-специалиста
1:39:07 - Хобби и занятия по-за работой
#айтиборода #ityoutubersru 
Наука
![KFF Singapore Badminton Open 2024 | Alfian/Ardianto (INA) [7] vs. Liang/Wang (CHN) | QF](http://i.ytimg.com/vi/g0QGafkoT2o/mqdefault.jpg)
![A Day To Remember: Feedback [OFFICIAL VIDEO]](http://i.ytimg.com/vi/iXVnysmQ4e0/mqdefault.jpg)
Актуально и свежо! Чувствуется профессиональный подход к созданию качественного и актуального контента! Thank you so much Lex !
До просмотра этого видео я думал что мне интересно направление ML, теперь я в этом уверен! Спасибо за контент! )
Шикарное инервью. Я заслушался также как Лекс))
Видно что человек глубоко знает - может простыми словами объяснять
Очень интересный гость! Лекс красавчик, правильные вопросы задаёшь! Продолжай в том же духе👍🔥💪
На собеседовании на ML-специалиста в компанию МТС меня спросили: "С каким фруктом у вас ассоциируется наша компания?"
Я: с яйцом!
HR: это фрукт?
Я: Нет, но ассоциируется с яйцом...
P.S. Ну в общем собеседование я не прошёл.
#конкурс
Назвал бы фрукт в форме яйца.
@@inksmart типа лимон, но он жёлтый, возможно слива, ну не знаю... У меня ассоциация только с яйцом!
@@cheloveknauk возможно груша
может манго какое-нибудь красное
Спасибо большое за интервью Антоном Фроловым, было интересно послушать. Данные видео добавляют желания больше заниматься программированием и нейронками, и, вероятно, уйти потом в эту сферу, или что-то смежное. (из электроэнергетики)
Охрененный выпуск!
Сам начинаю погружаться в область. Многие моменты прояснились, спасибо)
Спасибо, что просвящаете.
Очень интересно и познавательно.
Спасибо!
Обожаю эту рубрику! Спасибо за данные видео)
на здоровье)
Классный пример человека, которого не сломало школьное образование
как может сломать то, что можно просто прогулять?) Слабенькие какие то люди пошли))
@@MrAleksQD скорее, правильные
@@viennasovello4623 А в чем их правильность..?
@@Dpon0 В том что они враги своих мыслей
@@danielk8368 вариант: домашнее образование
За вставки про места Белоруссии отдельный лайк)
Тут самая адекватная аудитория. Читаю комменты и не верю что я в ютубе.
Выпуск очень полезный, подача тоже не хромает. Лайк, все от души прям
Очень классное и полезное интервью, вынес для себя много полезных вещей, благодарю!
"Поможешь выбрать лучший вопрос?"
"Конечно, за меня это сделает нейронка"
Так здорово! Хотя тема ролика "машинное обучение" и начинается с 42 минуты)
Благо метки есть, за это респект!
Не по колокольчику, а по зову сердца
Спасибо, хехе)
Шикарное интервью! Отличный гость! Просто и красиво разложил всю сферу и развеял мистический ореол вокруг индустрии! Спасибо!!
Отличные вставки с определениями, не напрягающие. Отдельный плюс :)
По поводу банков и сьёма жилья полностью согласен, особенно магазинов которые работают пока ты на работе...
круто и вовремя, спасибо большое
Огонь 🔥
Одно из лучших интервью.
Почему то после просмотра интервью на этом канале появляется вдохновение .не понятно как это работает .
и пусть я просто делаю сайты. все равно все очень интересно .
а после вдохновение, тебя опускает в грязь дипрессия, что тебе как до луны по сравнению с этими людьми
@@cryday3270 они были на том же самом месте
@@ghostinthewires7006 поверь им было похуй, они ни кем не вдохновлялись, а тратили своё время на себя любимых. Тупо 24/7 делали что им нравится и это их привело к тому, что сейчас они собой представляют. Удачи если ты кем-то вдохновляешься, тебе не то, что тяжело будет, у тебя вобще ничего не будет. Хааха)))
@@cryday3270 что плохого в вдохновение? Мне кажется, ты путаешь вдохновения с сотворением кумиров. Каждый человек вдохновляется чем-то или кем-то и я не вижу в этом ничего плохо. Сколько научных открытий было сделано, когда тот или иной учёный вдохновился работами другого. Вдохновение этот тот щелчок, который говорит тебе "слушай, там Илон Маск снова побил рекорд. Блин, нужно мне тоже постараться и сделать что-то крутое", а кумиры это: "Илон Маск такой круто!!!1!!1! Хочу быть как он! Точно, он работает по 100+ часов в неделю, буду также и тогда я стану как он!"
И вообще, я бы тебе посоветовал не быть таким песимисстом, а если уже решил им быть, то хотя бы не нужно кидаться фразами "у тебя ничего не выйдет", это отвратительно... Хотя бы аргументируй свою позицию и предложи альтернативы. А то в таком случае поступаешь, как то же самое русское образование 🙃
И ещё. Если ты сравниваешь себя с другими людьми и после этого у тебя пропадает мотивация, то земля тебе духом, дружище
@生陳港 Гениям говорят, что это не их и они неправы. Рад видеть тому подтверждение, темболее от кунг-фу... хз кто ты, джэки чан какой-то, твой батя чтоли?
Одно из самых интересных интервью на канале, наравне с интервью с разработчиком на ГО
Отличное интервью, вопросы все в точку! Спасибо!
Таймлайны в поддержку земляков:
00:00 - Начало
01:14 - Про себя
22:21 - О переездах в Европу на ПМЖ
24:51 - Переход в Касперский
28:06 - Переход в Яндекс
34:29 - О PhD
37:41 - Переход в Дзен
41:23 - Примеры алгоритмических фидов
42:15 - Что такое Machine Learning
45:23 - О хайпе ML
46:09 - Почему считают на видео-картах
47:36 - В каких областях применяется ML
49:01 - Когда применять ML целесообразно
50:11 - Как называют спеца в ML и чем он занимается
52:16 - Что такое модель данных
53:24 - Почему важно выбрать удачную модель
56:55 - Кто работает в ML - градации специалистов
1:00:16 - Отличие датасаентиста от инженера по машинному обучению
1:04:41 - Реально ли начать учится ML у себя на ноутбуке
1:05:59 - Типы моделей машинного обучения
1:10:26 - Про нейросети
1:12:48 - Разметка данных
1:13:57 - Проблемы в ML
1:15:26 - GAN - конкурирующие сети
1:19:36 - Самообучающиеся модели
1:22:09 - Про Искусственный Интеллект
1:27:17 - Как стать ML инженером
1:35:08 - Про собеседования
1:37:43 - Источники знаний для ML-специалиста
1:39:07 - Хобби и занятия по-за работой
Европу*
Здравствуйте я ваш подписчик а вы знаете такого ютубера Хауди хо (Howdy ho)?
Знаю
Закрепи коммент
@@oleg_1_ef ждём когда он Сталкер 2 сделает 😁
Классное интервью с крутым специалистом на интересную тему
О, Обнинск! Землякам привет! Гимназии тоже, я из ФТШ. Тройки в гимназии это ок, я тоже троечник)
Лексу, как обычно, респект)
ооооо дааа. прокачаем наши нейронные сеточки. звоню друзьям чтобы ставили лайки
Эх где же мой 2014.. Я как раз тогда хотел такими вещами заниматься, но вообще не представлял что это и как, думал что изучать ЯП способны только суперумные люди.
отличное интервью, прямо как бальзам на душу :) познавательно
Спасибо за интересное интервью с профессионалом высочайшего уровня!
а так ли это?
Благодарю за информацию, очень интересно. Особенно, комментарий Антона по поводу того, что математика в ML не rocket science. Примерно подразумевал, что это именно так :)
Лекс, красава! Инетерсное интервью получилось !
Классный выпуск! Сейчас ищу ml разработчиков в свою компанию и видео помогло чуть лучше понять суть работы, спасибо
Добрый день а вы не ищите стажера?
Классное интервью. Отличный рассказчик
Обмазался выпуском, спасибо что не даешь умереть с информационного голода)
Спасибо за выпуск, очень хотел послушать ML специалиста. А теперь к конкурсу: Кофе какой марки стоит у вас в автомате? И какой он по крепкости?
Сидела разбиралась с новой работой и гуглила ролики про ML тренинг моделей и наткнулась на этот среди обучающих
Спасибо за такой полезный контент
_____________________________________
Давай больше таких умных дядек.
____________________________________
Начальник из Яндекса скажи, как сделать так чтобы в браузере телефона не открывались страницы Яндекс turbo
Полная противоположность более раннему интервью со Славой, тут описал что все в МЛ так легко бери и делай. Все что нужно подберешь по ходу, класс
Спасибо за гостя
Очень хочу интервью с джуном который попал в топовую компанию, либо с синьором который взобрался по карьерной лестницы очень быстро за 3-4 года.
Будет что-то в этом роде ?
Просто в основном интервью с теми кто уже давно знаком с IT ( а хотелось бы посмотреть про тех кто вообще был полным нулем)
блин. все они были полными нулями и рассказывают как попали
@@itbeard Фантазер просто хочет услышать от кого то волшебную пилюлю с которой думая, что сможет обхитрить других
На #Конкурс .
Не совсем интервью, мы защищали курсовые после третьего курса.
Работа была по определению пола человека на изображенит. И один из преподов просто заваливал дико тупыми вопросами.
Вот один из моментов:
"
- Какая точность у вас получилось?
- около 92%.
- ого как много вы наверное и обучение и проверку на одном датасете проводили.
- если бы мы так сделали было бы 100%
- ну хорошо, а вот если я вам шотландца в юпке подам на вход ваша же программа ошибется, а если у меня вся выборка из шотландцев о каких 92% может идти речь.
"
После этого препод был послан, так как выборка должны быть стохастичной. До сих пор не знаю он хотел услышать такой ответ или просто пытался с умным видом задавать вопросы в том, что не шарил. Другим ребятам он тоже кучу вопросов таких задавал "Что вы подаете на обработку программе, не можете же вы все изображение подать? - Ну, вообще-то именно этим я и занимаюсь.". Поначалу у нас немного горело, а потом мы уже не могли сдерживать смех.
Хочу книжечку) Жду стрим!)
Видео ОГОНЬ!
Борода настоящий красаучик) спасибо что делаешь это, всех благ тебе. Лайк, репост, подписка. Пожалуйста пригласи еще кого-нибудь из веба, понимаю что было уже по 2 js и php разраба, но все равно) эта ниша одна из самых обширных. Пожалуйста))
Спасибо)
задавали вопрос можно ли сделать так чтобы не верный ответ давала намерена. например место кота говорила собака но когда это нужно
Интересно, спасибо!
А можно ссылку на интервью с data scientist?
в интервью было рассказано о ссылках на дополнительные материалы... не могу найти, где эти ссылки?
В телеграме
Спасибо за интервью, Лекс! Хотелось бы, чтобы на канале появилось интервью с Rust Developer.
будет когда-то)
@@itbeard Надеюсь :)
@@user-tv3jq2vt8s вышло)
К сожалению, про сам только Rust мало сказано. Оно и понятно - язык то молодой.
на 22:50 сноска: "Citizen - гаражанини" (от слова гараж)
хах)
@@itbeard правильно переводится - гражданини
5:20 - 5:34 - что за заклинание он прочитал? Можно бригаду начинающему недо-программисту
Сильный мужик
#конкурс в начале диалога "Сейчас нам нужен эМэЛ ...", я перебил на мандраже - "да конечно, (и назвал свой эМэйл)", в итоге смотрю фильмы режиссёра Вонг Кар-Вай, особо доставляет язык света и подчёркивание любовных сцен каустикой - английский продвинутый (не требует перевода) поэтому с удовольствием изучил бы этот кирпич.
Спасибо тебе за все, Айпи Борода
на здоровье!
я так понимаю, что если поставить солнечную батарею и запитать от неё насос, который будет из речки перекачивать воду в банку, то солнечная энергия будет преобразована в банку воды?)
Если поставить солнечную батарею на автопогрузчик, то солнечная энергия будет преобразована в пару ящиков пива
Не в саму банку, а в потенциальную энергию банки воды
@@Krymgujin в массу банки)) Ну если верить, что в случае с растениями солнечная энергия переходит в массу.
Очень интересное интервью!
Какие результаты конкурса из видео про яндекс дзен
Было интересно и вполне информативно, в целом мне понравилось.
Для меня Яндекс.Дзен не особо привлекательный сервис, но, допускаю, что далеко не всю его работу на самом деле замечаю, это раз, а во-вторых, не хочу ставить негативный ярлык на то, что может будет мне полезно, он ведь в любом случае развивается.
Для меня получилось интервью такого общепознавательного и немного мотивационного характера. Антон - обычный человек, да, вероятно, с рядом психологических комплексов, впрочем также как и те, кто поминутно и посекундно на это зачем-то указывают в комментариях, впрочем также как и Я САМ, который зачем-то сейчас на это указывает им:) Так вот, обычный чел, чем-то увлеченный и предпринимающий какие-то конкретные действия для достижения результата и к каким-то конкретным результатам приходящий. Причем результатам явно выше среднего уровня!
Интервьюеру отдельная благодарность. Я слабо помню даже школьную математику, в принципе не знаком с программированием, но в целом все было доступно, если не на понятийном, то хотя бы на интуитивном уровне .
СПАСИБО!
Пора обновить это интервью😅
круто! спасибо
Может быть я чего-то не знаю, но при фотосинтезе свет не преобразуется в массу. Свет совершает работу по преобразованию воды и углекислого газа в углевод и кислород.
Свет действительно преобразует воду и углекислый газ в углевод (глюкозу), но данная реакция требует огромных энергетических затрат, которые в конечном счете аккумулируются в той самой массе углевода. примерно так)
@@user-th9cp1zb2tздесь принципиально то, что масса до фотосинтеза и после не меняется, а вопрос был поставлен именно таким образом, что свет преобразуется в массу. Поэтому меня зацепил этот момент в интервью, так как странно слышать такие вещи.
Фёдор Гончаров мне кажется, Вы просто слишком цепляетесь за слово масса. В данном случае под массой имеется в виду не мера инертности тела как в физике. Под словом масса подразумевается вещество как-таковое. Свет преобразуется в вещество с нулевой массой, например. Но я тоже такой себе эксперт, так что могу быть не права )
@@user-th9cp1zb2t Вы не права. Свет не преобразуется ни в какое вещество и ни в какую массу, если только не происходит реакция ядерного превращения (синтеза или распада), к коим фотосинтез не относится. Айти борода не совсем хорошо учил физику или просто не думал над вопросом) Федор +
Спасибо за видео
Реально ли попасть в бэкенд новичку без тех образования?
Это ОЧЕНЬ КРУТАЯ идея! Показывать достопримечательности своей Родины, страны, города! 👍👍👍👍 Так держать!
посмотрев этот интервью понял что я был частично ML специалистом ;))) готовить данные, извлекать данные, особенно когда БД транзакционная и не предназначено для анализа это искуство ))) потом среди всего этого шума искать аномалии, и себя перепроверять по сто раз, а точно ли я все учел. Или когда уже данные были отправлены ты осознаешь что забыл один момент )))) это большая ответсвенность, согласен с Антон, посравнению с разработкой софта
По поводу научных исследований в ML, разве не исследуется активно раздел долгосрочной памяти в нейронных сетях? Почем то совсем не затронули эту тему, хотя это очень важный кмк вопрос, так как сейчас это большая преграда перед тем чтоб действительно чему то учить. Я не специалист но когда год назад, активно изучал вопрос по МЛ наткнулся на то что у НС фактически нет памяти она может делать предположение только из текущего стейта, есть подходы по реализации краткосрочной памяти но они тоже имеют проблемы.
Модели долгосрочной памяти исследуются, но это лишь один из десятков (или даже сотен) подразделов машинного обучения, так что нет ничего странного, что про него не вспомнили.
RNN, а конкретно LSTM
Очень интересное интервью! Антон Фролов говорит медленно - но удивительно по делу, так что не приходится включать 1.25, или 1.50 к скорости. ML - крутая вещь!
#конкурс
Вопрос: Кто лучший программист в сфере Data Science ? Ответ: градиентный спуск.
лучший программист в сфере Data Science тот мужик, который в прошлый раз у бороды рассказывал об этом..
#конкурс Какой уровень образования должен быть у нейронной сети, чтобы она занялась самообучением?
Интро балдежное)))
А где ссылки на источники знаний ( курсы, книги и т.д. )
Я слышал о машинном обучении с учителем. А почему нет графического воплощения, ПО для этих задач? Например мне крайне необходима программа по определению чкакой рисунок я вижу - ксерокопию или оригинальный чистый текст, рисунок, чертеж. Почему многое ушло на сайты Google, где приведен код программы и на нем идет расчет? Да не важно для пользователя насколько быстро идет задача, хотелось бы решать офлайн.
@@just_weirdo печально ))))
Интересный и конкретный собеседник !
Спасибо!
42:14 круто объяснил
как программист, программистам))
"чувтсвуешь себя там человеком второго сорта", спасибо, проорался. Я давно переехал и ни минуты себя так не чувствовал, мне с внж ипотеку под 1.8% выдали без проблем, все плюшки "ситизена" крмое голосования с порога были доступны. В Европе страны настолько разные, насколько это возможно. А чел рассуждает так, будто во всех странах пожил, рофлан-поминки.
Расскажи про лучшие или худшие курсы Минска!!!!
сразу видно, человек познал дзен
5:20 что за hive recons stranding ?
Классный выпуск, от души
Лекс давай интервью по IoT!!
интересно ролик смотрится из текущей действителтности 🫣
Обывательский вопрос: а что например изменилось?
Борода, можешь запилить видосики с состоявшимися работниками в сфере тестировщиков ПО? Есть такие ребята Тестпро что-то так пиарят их, неужели правда что там сразу на работу берут?
Лекс, на WPF пишешь? Или только веб?
веб
А можно эту часть о том, откуда вылез человек вот как то сократить?
По вопросам чувствуется, что Борода все же понимает кто чей брат в ML)
Не соглашусь про тухлость высшего технического образвания 10 лет назад. Судить по обучению на техническую специальность в РУДН как-то странно. Так же как было бы странно ожидать хорошего обучения на переводчика в условном МФТИ. Сам поступал в 2009 году в МИФИ на факультет Кибернетики и Информационной Безопасности и образованием остался очень доволен.
В остальном выпуск интересный и, гость молодец, что решил пойти по сложному пути, учиться дальше, а не получать честную "копейку" за верстку веб-страничек.
1:32:44 подскажите, пожалуйста, курс где пройти он посоветовал
coursera
Заканчиваю курс ML на Coursera от Andrew Ng, очень интересно было послушать, некоторые моменты подчеркнул для себя!Впереди ещё многому нужно будет научиться, главное не опускать руки и хорошо бы иметь ментора и команду с которой вместе двигаешься вперёд, это очень ускоряет процесс обучения! Всем кто на этом пути, желаю дойти до заветной цели. Удачи!
Лабы делал? Не могу решиться купить подписку или продолжать в режиме read only
@@juergen5948 Делал всё, а иначе как тогда можно в этом начать разбираться, ко всему это же и в работе всё будет, читать можно сколько угодно, а водить нужно учиться, я думаю Америку не открыл, и так всё понятно что нужно делать)
Сильный матан для этого надо был?
И насколько хорошо пайтон надо знать?
@@LetspleionSamp Andrew Ng объясняет всё по полочкам, даже если никогда не был знаком с мат. анализом, python знать нужно, чем лучше, тем больше ты молодец), изучаем python Эрик Мэтиз_3 для начала будет хорошо . Но можно и походу разобраться, но тут всё зависит от человека и его способностей, сугубо индивидуально. English mast have.
Люто плюсую)
Очень интересная беседа и познавательная, но меня коробят англо-нижегородские жаргонизмы.Спасибо гостю и интервьюеру!😊
#конкурс
Самый странный вопрос на собеседовании на ML инженера: как владеете экселем?
Да, на 1.25 хорошо слушается :-)
можно подумать, сейчас нет Desktop приложений и автоматизации бухгалтерии )
С первого взгляда показалось, что это или Хауди Хо, или его старший брат :)
не упоминай этот шлак здесь
Если кто интересуется человеческим Сознанием и попыткой реализации этого с помощью AI стоит посмотреть Константина Анохина. В конце 2020 он говорил об этой теме.
Amazing content about ML. I hope he is in the UK
Отличное Видео! Аве!