ЦОС Python #1: Метод наименьших квадратов

Поделиться
HTML-код
  • Опубликовано: 13 сен 2024
  • Теория алгоритма метода наименьших квадратов на примере аппроксимации данных линейной функцией.
    Инфо-сайт: proproprogs.ru
    Реализация алгоритма на Python (файл mnsq.py): github.com/sel...

Комментарии • 54

  • @fakhrutdinovski
    @fakhrutdinovski 2 года назад +42

    Золотой человек. Честный. По факту. Вот кто должен быть в универе ректором и убирать неадекватных людей с должностных лиц, а то некоторые профессоры возомнили что слишком много знаю. Лайк - 100% заслуженно. Просмотров тебе и славы

  • @user-zo1xk2hk3f
    @user-zo1xk2hk3f 2 года назад +13

    Исключительно поддерживаю комментаторов ниже! Такие люди как автор - золотой фонд интеллектуальной элиты нашей страны.

  • @alexeygrom1834
    @alexeygrom1834 3 года назад +15

    единственное видео во всем ютубе с объяснением откуда есть берутся квадраты в регрессии. Спасибо !!!

    • @sanyajonny2833
      @sanyajonny2833 2 года назад

      Ну если не слышали про функцию правдоподобия то да, но я сам видел лекции где этой проблеме выделялся час времени, так же само для классификации максимизируется правдоподобие распределения бернулли и получается бинарная кроссэнтропия в качестве лоса.

  • @raybradbury4701
    @raybradbury4701 3 года назад +15

    Спасибо! Редкая способность объяснять ёмко и понятно.

  • @zerox2536
    @zerox2536 Месяц назад +1

    Я видео пока не начал смотреть, уже подписался🤣

  • @user-xd9yr1tt6h
    @user-xd9yr1tt6h 2 года назад +9

    Видео отличное. Преподаватель -высший класс! Спасибо большое.

  • @user-qj6tk5fw9p
    @user-qj6tk5fw9p 6 месяцев назад +1

    Самое подробное и понятное обьяснение которое можно найти. Спасибо за урок!

  • @geralt5664
    @geralt5664 11 месяцев назад +2

    От студента 1 курса мфти - автору огромное спасибо!

  • @martinfinger3155
    @martinfinger3155 Год назад +4

    Спасибо большое за ролик, очень качественные объяснения сложной темы.

  • @dicloniusN35
    @dicloniusN35 Месяц назад +1

    срочно надо весь канал посмотреть

  • @user-oi3be8dm8x
    @user-oi3be8dm8x 2 года назад +7

    Потрясно! То, что искал. С первого раза не совсем понял как происходит минимизация, но просмотрев несколько раз дошло. Отличное изложение ♥️

  • @user-ci9jx1tc3h
    @user-ci9jx1tc3h 3 года назад +9

    Вот это я понимаю объяснение! Всё по полочкам разложено, большое спасибо)

  • @maximbravtsev3648
    @maximbravtsev3648 2 года назад +6

    Спасибо вам за передачу знаний!

  • @user-ii6yk1sm7y
    @user-ii6yk1sm7y 3 года назад +4

    Потрясающий канал ! И такая же подача!!

  • @user-lv6yj9zy5b
    @user-lv6yj9zy5b 3 года назад +7

    Очень понравилось изложение. Всё понятно, большое спасибо!

  • @user-on8eg7ny1g
    @user-on8eg7ny1g 3 года назад +4

    Спасибо! Нормальное понятное объяснение на пальцах!

  • @bujhmybrjkftd643
    @bujhmybrjkftd643 4 года назад +10

    спасибо, очень ценный материал!

  • @andrus3125
    @andrus3125 2 года назад +4

    Круто, умеете объяснять

  • @dizogdizog2591
    @dizogdizog2591 3 года назад +4

    Супер!! чтобы освоить numpy plotlib это самое то!!!

  • @VIP-iu5rj
    @VIP-iu5rj 3 года назад +5

    Ты лучший, я в честь тебя назову сына))))

  • @marines8725
    @marines8725 17 дней назад +1

    спасибо!

  • @14types
    @14types Год назад +2

    Блин, что-то похожее я "изучал" в универе (КГУ ВМК), но на деле прогуливал и играл в Варкрафт3. И дипломная была про апроксимации функций в каких-то гильбертовых пространствах. Я ничего не учил, блин, даже дипломную назвать не могу. Теперь уже самостоятельно изучаю.

  • @user-tt8dc6pi1k
    @user-tt8dc6pi1k 3 года назад +5

    Привет. Ты крут!!!

  • @shncl
    @shncl Год назад +1

    чел ты легендарный

  • @clever-cat
    @clever-cat Год назад

    Спасибо! Помог реализовать данную аппроксимацию в JavaScript. И немного понять Python

  • @dvd6307
    @dvd6307 3 года назад +2

    Интересно

  • @jamjam3337
    @jamjam3337 8 месяцев назад +1

    😎

  • @shncl
    @shncl Год назад +1

    оп, снова ты)

  • @andreiobukhov2470
    @andreiobukhov2470 3 года назад +2

    Хотелось бы, конечно, чтобы немного подробнее рассмотрены были математические вычисления и преобразования. Если можно, дополните пожалуйста материалами. Спасибо!

    • @selfedu_rus
      @selfedu_rus  3 года назад +3

      В смысле? Там и так предельно подробно расписано. Если остаются вопросы, то см. плейлист по теории вероятностей на этом канале.

  • @osvab000
    @osvab000 4 года назад +2

    Производную можно определить как скорость изменения функции, то есть нуль это экстремум, а какое то значение это изменение функции (то есть она либо возрастает, либо убывает в этой точке). Скорость изменения скорости (в физике) это ускорение. Значит производная от скорости - ускорение!

    • @selfedu_rus
      @selfedu_rus  4 года назад +3

      все верно, еще это тангенс угла наклона касательной с осью абсцисс и в точках экстремума он принимает нулевое значение

  • @colibri228
    @colibri228 3 года назад +4

    Здравствуйте, очень полезное видео!
    У меня вопрос: что нужно поменять в коде, что бы использовать его, например для 3+ признаков?

    • @selfedu_rus
      @selfedu_rus  3 года назад +1

      Спасибо. Использовать трехмерную плотность распределения.

  • @user-qj6tk5fw9p
    @user-qj6tk5fw9p 6 месяцев назад +1

    хотел спросить, с чем может быть связано: попытался данным методом апроксимировать функцию
    f(x) = 0.3х^2 - 2х + 1. использовал для апроксимации параболу, соответственно три коеффициента для апроксимации
    f(x; a,b,c), дифференцировал, все как в уроке только с учетом 3 коэфициентов. В итоге функция апроксимирует очень и очень не точно. С чем это может быть связано? может есть какие то стандартные причины?

  • @alexandersidorov4761
    @alexandersidorov4761 4 месяца назад +1

    А почему на 4:28 первый множитель перевернулся (сигма на корень два Пи) вместо 1 / (сигма корень 2ПИ)?

  • @ЕвгенийНовашов
    @ЕвгенийНовашов 4 года назад +1

    Добрый день. Когда мы брали частную производную от функции, мы применили правило дифференцирования сложной функции ? Если, да, то мы потеряли константу "2" ?

    • @selfedu_rus
      @selfedu_rus  4 года назад +3

      Все верно, я ее намеренно отбросил, т.к. умножение на константу не влияет на вычисление точки оптимума.

  • @numberzero6833
    @numberzero6833 Год назад +1

    С синусом не получится сделать? У меня производные сложных функций получились и там ничего не вынесешь как a11,a2 получается?

    • @selfedu_rus
      @selfedu_rus  Год назад

      да, уравнения не всегда линейными могут получаться

    • @numberzero6833
      @numberzero6833 Год назад

      @@selfedu_rus А полученные производные можно раскладывать по формуле sin(x+y)=sin(x)cos(y)+cos(x)sin(y)

  • @crueldarkdreams
    @crueldarkdreams 3 года назад +2

    ruclips.net/video/8sVfWyQrMiM/видео.html на 3.58 утрачен числитель дроби с сигмой в формуле плотности вероятности?
    Подача материала отличная!

    • @selfedu_rus
      @selfedu_rus  3 года назад +1

      да, спасибо, ошибка... хотя она не влияет на дальнейшие рассуждения и кроме того, до этого в формуле все верно

    • @crueldarkdreams
      @crueldarkdreams 3 года назад +2

      @@selfedu_rus , да, всё здорово! Спасибо!:)

  • @vadim.gerasimenko
    @vadim.gerasimenko 4 года назад +2

    Бамп

  • @14types
    @14types Год назад

    А если набор точек случайный, без всяких сигм, то это будет работать?

    • @selfedu_rus
      @selfedu_rus  Год назад

      сигма - это мера разброса случайных точек

  • @IlyaAb
    @IlyaAb 3 года назад

    а почему в формуле квадрата ошибок E = Sum(y - f(x))^2 нету деления на кол-во элементов и корня, так бы получалась более наглядная средняя ошибка, из вычислений не особо ясно, может есть какая-то более простая мысль?

    • @selfedu_rus
      @selfedu_rus  3 года назад

      Нам нужно минимизировать квадрат отклонений. Конечно, эту величину можно разделить на N, или на другую константу, но эта дополнительная операция совершенно ничего не дает для алгоритма, поэтому, просто отброшена.

    • @IlyaAb
      @IlyaAb 3 года назад

      @@selfedu_rus понял вроде, алгоритму всё равно с какими числами работать, главное уменьшать, а если в качестве метрики использовать, то там уже для наглядности эти операции можно проделать

  • @sofinew8030
    @sofinew8030 2 года назад +1

    Это как то не очень к ЦОС относится