ChatGPT Pro за 200$ vs Claude 3,5 Sonnet за $20 - Вот, что я понял

Поделиться
HTML-код
  • Опубликовано: 16 янв 2025

Комментарии • 91

  • @andreiantonov7303
    @andreiantonov7303 День назад +31

    Вообще крайне странное сравнение, логичнее было бы сравнивать
    o1 pro (200$) против o1 (20$) против Gemini 2.0 flash thinking (0$) на задачах по матану и сложному кодингу
    либо
    gpt 4o (20$) против Claude 3,5 Sonnet (20$) против Gemini-Exp-1206 (0$) на сложных текстовых задачах, например сочинение стихов.

  • @molkotok
    @molkotok День назад +17

    Claude не заявлялся как "думающая" модель, как позиционируют o1. А вот DeepSeek про это говорили. Было бы прикольно и её задействовать в тестах. Как я понял, они нацелились именно на конкуренцию с 01

    • @Anya_zaika
      @Anya_zaika День назад

      Плохо понял, она и рядом не стоит

    • @AHTOH2010
      @AHTOH2010 День назад

      ​@@Anya_zaikaDeepseek переваривает дофига строк кода, так что успокойся.

    • @OliinykO
      @OliinykO День назад

      @@Anya_zaikaЕщё как стоит. Это вы не разобрались видимо! У DeepSeek на сегодня просто не хватает функционала, а по знаниям и уму, как таковому, она на уровне всех топовых моделей!

    • @dmk_5736
      @dmk_5736 День назад +1

      Deepseek по факту думающей не является, хотя она решает задачи логичнее и успешнее чем Claude, но по общему уровню ближе к gpt4, моя оценка что 20% математических задач лучше решает реально думающая qwq32b, которая кстати и использовалась для обучения Deepseek, т.е. если долгих рассуждений не нужно то Deepseek справится, если нужно - то даже qwq32b скорее всего окажется лучше, разумеется o1 pro лучше, чем все существующих (кроме o3) в смысле решения задач, где требуется размышления и логика + математика, или медицина, Deepseek v3 при переводе (русeng) медицинских терминов изредка ошибается причём по глупому (когда транслитерация была бы ближе к истине), однако Deepseek v3 дешевле и с учётом близости по уровню к gpt4 а по логике чуть лучше, то в отстутсвии тяжёлых задач она предпочтительна (цена играет решающую роль)

    • @Anya_zaika
      @Anya_zaika День назад

      @@OliinykO соболезную

  • @StellaIOV
    @StellaIOV 10 часов назад +1

    Ну шапочка супер🤣👍👍👍

  • @aveel_z
    @aveel_z День назад +2

    Очень приятно что ты задал этот вопрос в самом начале. ❤❤

  • @mikeai686
    @mikeai686 17 часов назад +1

    я проверяю ИИ запросом придумать 20 новых очень смешных анекдотов. Клод Opus справляется лучше всех, как правило.

  • @mikeai686
    @mikeai686 19 часов назад +2

    будет о3 интересно сравнить. потому что про нее обещали 🔥

  • @pro.game.
    @pro.game. 13 часов назад +1

    12:30 - стоит в целом код проверять локально, так как такие задачи могут на подобных платформах иногда не корректно работать

  • @vladhanov1530
    @vladhanov1530 День назад +1

    Спасибо за контент. Интересно сравнить за 200 vs за 20. Хотя из вашего обзора понятно, что разница будет небольшая.

    • @dmk_5736
      @dmk_5736 День назад

      к сожалению кроме последней он не давал реально сложные задачи, на сложных задачах o1 pro думает >5 min и на этих задачах становится видна разница в моделях (обычно остальные на множестве задач показывают себя хуже)

  • @marialanti
    @marialanti День назад +3

    Можно попробовать модельку в разметке сложных данных и сложных классификаций, например симптомы болезни или результаты анализов в гипотезы диагнозов, скорее всего есть открытые дата сеты на это, обезличенные данные реальных пациентов. Можно попробовать поиски креативных решений и создание чего то нового ТРИЗ скажем )

    • @dmk_5736
      @dmk_5736 День назад

      да это реально то где o1 pro крутая, разумеется если спрашивать её по английски, но можно в принципе её попросить перевести, остальные модели для этих запросов заметно отстают.

  • @MysticFly
    @MysticFly День назад +2

    Дядя Д., спасибо за любопытные вопросы. Думаю потестировать Gemini Exp 1206. Нравится она мне в последнее время. С первым вопросом, думаю, 1206 справилась :)
    Ответ:
    Учитывая сложность живых организмов, вероятность самопроизвольного зарождения жизни крайне мала, но не невозможна, в то время как концепция создателя умозрительна и не поддается проверке, поэтому на данный момент ни одна из гипотез не может быть однозначно подтверждена или опровергнута.

  • @ILYA2606
    @ILYA2606 8 часов назад +1

    Сделай плиз сравнение с Gemini Flash 2.0 и Gemini Pro 1.5

  • @kartashovdima9
    @kartashovdima9 19 часов назад +3

    У тебя в тестах не о1про, а максимум о1.
    О1про думает даже над простыми задачами по несколько минут. А у тебя в видео всё по 7 секунд.
    Это не та версия

    • @TheNikit0s
      @TheNikit0s 14 часов назад +1

      100%, у меня o1 Pro даже над самыми простыми задачами думал минимум минуту, задачи на кодинг или многобукв это 5-6 минут
      Это только о1 научили думать «оптимизировано» по 10-20 секунд после о1 превью, который думал по минуте над любым промтом
      Хотелось бы от автора видео услышать какой-то комментарий по этому поводу

    • @ProdAdvice
      @ProdAdvice  12 часов назад

      2:18 выбрана модель о1 pro

    • @ProdAdvice
      @ProdAdvice  12 часов назад

      @@TheNikit0s2:18 смотрите на выбранную модель

    • @dalisoft
      @dalisoft 29 минут назад

      Для projects модель выберется gpt-4o автоматический. Почитайте про projects подробнее

  • @Lucio11a
    @Lucio11a День назад +3

    Чисто смеха ради:
    А можно сравнение по кодингу "популярных" ии плагинов для IDE? Codieum, CoPilot, JetBrains AI (для райдер)?

  • @vifvrTtb0vmFtbyrM_Q
    @vifvrTtb0vmFtbyrM_Q День назад +9

    DeepSeek и Qwen

    • @gornostai4ik_lol
      @gornostai4ik_lol 13 часов назад

      У меня после гпт в повершелле скрипт не выполнялся и гпт не хотел в фигурные скобки переменную брать. В дипсик решил проблему и там-сям поулучшал.
      Лимиты в дипсике как будто сейчас только на количество сообщений в сессии. И можно начать новый чат без проблем.

  • @ulibkaify
    @ulibkaify День назад +2

    Для написания кода на JS Вы сейчас какую модель используете?

  • @awakened_I
    @awakened_I 16 часов назад +1

    o1 не нужна для обычного пользователя, она изначально создавалась для лабораторий, исследований и сложных расчетов связанных модуляцией ситуаций (стихийных бедствий, траекторий полетов астероидов и всякой такой фигни, для этого и сделали режим мозгов), по сути все задачи можно выполнять обычным GPT или нейронкой от гугла студио, тем более платить за это 200$, сейчас столько стало бесплатных нейронок, что даже за 20$ покупать подписку нет большой нужды, разве что побаловаться с расширенным голосовым режимом.

    • @TheNikit0s
      @TheNikit0s 14 часов назад

      Хз, что там у тебя за обычные задачи. Я для своего приложения пытался генерить текстовый контент, казалось бы - идеальная работа для GPT, но он справляется отвратительно. Все предложения строились по одной и той же структуре, на втором абзаце уже было невозможно читать, нужно все переписывать. При этом обычный о1 справлялся чуть получше, но налил очень много воды, терял контекст других текстов, которые я прислал для примера и формат. Типа я просто прошу его выделить жирным определенные заголовки, он пишет - да, хорошо и не делает этого. О1 Pro справлялся значительно лучше по качеству именно учета контекста и формата, но текста все равно нужно было переписывать, жирные заголовки вставлял, но не всегда - приходилось перегенерировать, я так понимаю, что это уже ограничение всего семейства моделей и о1 Pro может выдавать более точный результат, но на том же уровне.
      Так это задача просто генерить текст на основе других текстов, до профессиональных лабораторных работ там еще как до луны. Для перевода контента, кстати, мне моя программа генерирует текст формата id строки: многострочный текст на русском;;
      Я просил все модели просто взять весь русский текст, перевести его, а все остальное (спец символы и переносы на новую строку) не трогать. С этой задачей не справилась ни одна из моделей ни с первого, ни с десятого раза. В ответ я каждый раз получал действительно переведенный текст, но все переносы на новую строку он зачем-то убирал внутри текста, хотя я много и разными способами просил его этого не делать. В итоге пришлось просить его присылать ответ файлом, только в этом случае о1 про выдавал то, что мне нужно.
      Вообщем, начиная, наверное, с модели о5 про можно будет доверить ИИ не сложную работу, сейчас больше времени потратил на промтопердолинг

  • @amnyam_cut
    @amnyam_cut День назад +2

    Взял за 200 чисто из-за 120к контекста, очень полезная штка.

  • @PavelBali-r6c
    @PavelBali-r6c 14 часов назад

    Спасибо за подробный обзор. Как раз думал брать для тестирования или нет

  • @Ibsvich
    @Ibsvich 23 часа назад +2

    Вот с этим еще ни одна LLM не справилась: У меня 3 брата. У каждого из моих братьев по 2 брата. У моей единственной сестры тоже 3 брата. Сколько всего братьев и сестер в моей семье? (3 брата 2 сестры)

    • @mikeai686
      @mikeai686 18 часов назад

      после длительных до**бов (наводящих вопросов, ставящих под сомнение логику рассуждений) Клод 3.5 Sonnet решил задачу правильно.

    • @mikeai686
      @mikeai686 17 часов назад

      другой вариант запроса, как Клод быстрее приходит к решению:
      У меня 3 брата. У каждого из моих братьев по 2 брата. У моей единственной сестры тоже 3 брата. Сколько всего братьев и сестер в моей семье?
      ОЧЕНЬ ВНИМАТЕЛЬНО проверь ответ на соответствие ВСЕМ условиям задачи. проверь 2 раза это соответствие. попунктно!
      ------------
      потом все равно приходится сомневаться в его каких-то частях решения... и тогда он решает верно в итоге. а ChatGPT и Gemini не решает верно вообще никогда) как ни докапывайся. выдают чушь. Grok чуть умнее чем Gemini но в общем тоже довольно чушь.

  • @Lalalahhu7gf
    @Lalalahhu7gf День назад +1

    Бро, сделай обзор на то как прошка кодит обучением в игре Змейка. Задача в том , что бы научить змейку находить цель

  • @firiasu
    @firiasu День назад +2

    Отказался от ChatGPT, а потом взял подписку за 200$? Ничего себе перемены

  • @nikkor6471
    @nikkor6471 День назад +1

    Задайте задачу любой модели такого типа: есть несколько букв 2 и 4 нужно из например 7 букв разгадать итоговое слово , реальность в том что хрен один отгадывает нарушая условия задачи

  • @Salber1990
    @Salber1990 День назад +3

    Да, надо сравниение с DeepSeek

  • @СергейМакаренко-ж5р

    🔥🔥🔥🔥🔥🔥🔥

  • @bikeonoor4006
    @bikeonoor4006 21 час назад +5

    К сожалению автор еще молод (и глуп😂) и не смог подобрать интересные тесты для ИИ. В результате получил тривиальные ответы. Не забывайте, что ЛЛМ модели - это вероятностные модели и с точки зрения получения новых знаний результат их анализа максимально тривиален и бесполезен. Современные системы ИИ это как «бог из машины» знания-то они содержат, но очень трудно их оттуда извлечь. Необходимо самостоятельно предлагать к рассмотрению не стандартные точки зрения на проблемы. Например, в тесте на происхождение жизни можно было попросить вычленить «факты» божественного вмешательства и оценить их вероятность. В примере с дождём, попросить проанализировать возможные политические, экономические и социальные цели, которые могут преследовать элиты используя тему манипулирования климатом. Попробуйте😂

  • @now.7348
    @now.7348 День назад +14

    не дать протестить pro средне- обьемную задачу по ПРОГРАММИРОВАНИЮ (с подробн.описанием "контекста , требований" - это ..ты безтолку 200$ выбросил(считаю). Убрал лайк, т.к. ждал именно этого😮

    • @MrDantem
      @MrDantem День назад

      Последнее задание с подключением апишки openai достаточно объёмно для такого сравнения

    • @nothingmore9291
      @nothingmore9291 День назад

      Ну так покажи как надо, сними видео

    • @bikeonoor4006
      @bikeonoor4006 21 час назад

      Он не выбрасывал. Ему дали попробовать. Ставь лайк обратно 😂. Что касается задач по программированию, то ЛЛМ модели и заточены под проекты, связанные с языками (естественными и искусственными). Там всё хорошо. А в чем плохо, то это почти во всем остальном.

  • @RedpaX
    @RedpaX День назад

    Кстати Sora даже в релакс моде генерит видео быстрее любых дрцгмх видеонейронок. Так что Сора считай и так безлимитная даже на подписке чатГПТ плюс.

  • @nikanetique
    @nikanetique 2 часа назад

    сравнение не очень удачное. нужны задачи, в которых требуется именно размышление, с неопределенностью. Клод конечно как всегда хорош, но для него эти задачи более менее стандартны. ДДД (3D?) задай самой О1 вопрос о чем она думает лучше других, пусть даст 10 примеров, оценит их по 10 топовым, как она сама считает, параметрам и предложит 10 задачек на подумать хотя бы 5 минут

  • @sedovolosyi
    @sedovolosyi День назад

    Про теорию заговора то они из Wikipedia взяли на счет Blue Beam.

  • @of_youtube
    @of_youtube День назад

    наконец то уже

  • @socialexperiment8267
    @socialexperiment8267 День назад

    Open AI " rag " модели ефективно манипулирует словами, намного лучше чем богатейшие политики. Это страшно...
    И знаешь когда их палят они типо это не мы это модель так "хочет".
    ВООБЩЕ не очень их сравнивать...сделай rag + несколько експертов , тогда да...
    Кнопки все жму.

  • @АлександрКолков-с8ч

    Потрясно, что упоминаете фреймворки, но вообще не понимаете как ими пользоваться. Продвинутый фреймворк делает из колода 3.5, не менее чем в 10 раз более мощную модель чем без него. И все эти gpt с одной библиотекой входа просто мусор! Для думающих Я уже всё сказал😅

    • @mikeai686
      @mikeai686 17 часов назад +1

      а какой фреймворк делает из Клода в 10 раз более мощную модель? и для каких задач более мощную?

    • @АлександрКолков-с8ч
      @АлександрКолков-с8ч 12 часов назад

      @@mikeai686скажу так, реальная мощность ИИ это не та которая доступна с ноооля!

    • @АлександрКолков-с8ч
      @АлександрКолков-с8ч 12 часов назад

      @@mikeai686 ответы на ваш вопрос не прогружаются...

  • @rachserg
    @rachserg День назад

    интересный вопрос, - Как бы поступил, для справки не один ИИ пока не в состоянии заработать, хотя бы 1$, о чём есть статья Майкрософта и разработчика openAi, а вот это платить за облачные сервисы хрен пойми за что...?

    • @bikeonoor4006
      @bikeonoor4006 21 час назад +1

      ИИ сам должен пройти все пути заработка или нужно заработать с помощью ИИ. Если второе, то с помощью ИИ УЖЕ «заработали» миллионы человек сотни миллиардов долларом. Взять хоты бы ту же OpenAI…😂

    • @mikeai686
      @mikeai686 17 часов назад

      доделать до агентного ИИ просто надо. либо кому-то либо самим компаниям-разработчикам. это вполне реал

  • @DelMen667
    @DelMen667 День назад +1

    Чё то Прошка знает про элIты

    • @gornostai4ik_lol
      @gornostai4ik_lol 13 часов назад

      Секретное салохранилище 🤔
      S3 это не про данные 😮

    • @gornostai4ik_lol
      @gornostai4ik_lol 13 часов назад

      Вышел на белорусский слел

  • @AlexMithrin
    @AlexMithrin День назад

    ?? Главное отличие pro от plus - в ЛИМИТАХ использования o1!

  • @vvetti.
    @vvetti. День назад

    я чатом джипите бесплатно пользуюсь

  • @andrewcoban9177
    @andrewcoban9177 4 часа назад

    А вы задайте вопрос про ковид. И очень сильно удивитесь цензуре

  • @annx4417
    @annx4417 День назад

    я плачу за o1 20 баксов но легко бы платил и 500 если бы бы были такие цены

  • @ARislanV
    @ARislanV День назад

    Не насыщенный выпуск

  • @alexanderprint6841
    @alexanderprint6841 День назад

    забавно что аффтар не захотел дать линк на статью ))

    • @ProdAdvice
      @ProdAdvice  День назад

      ттержите www.latent.space/p/o1-skill-issue

    • @MrDantem
      @MrDantem День назад

      Надо же как-то людей цеплять в телегу, чтобы лучше монетизировать проект, а не на одном энтузиазме работать

  • @LionbI4
    @LionbI4 День назад

    Хорошее сравнение. Не идеальное, но хорошее. Чувствуется рука мастера.

  • @yurim7756
    @yurim7756 День назад

    да и о1 мини прекрасно кодит. Не всегда, прямо, на любых языках, но просто надо подход. Я на выходных за полдня треть транслятора C# в Си на нем сделал (сам ни строчки кода не написал). Ну треть, может громко сказано, треть из того что планировал. Сам транслятор не нужен, понятно, это я просто для проверки о1 мини делал, и прозрел.
    Это как вы понимаете, задача вообще не для всех программистов. Если бы я писал, я бы это неделю точно писал, что получилось с ним. В общем, с пару лет максимум, программистов не будет.
    Вот что единственное меня остановило дальше продолжать эксперимент, даже о1 мини за подписку в 20 баксов - лимит на день - 50 запросов

    • @dimmArtist
      @dimmArtist День назад

      так если у программистов большие зп и ты был очень доволен, то 200 баксов окупается для них влегкую?

    • @yurim7756
      @yurim7756 День назад +1

      @@dimmArtist Я пока не знаю, я не использую, это я проверил. Но если он начнет кодить хотя бы частично, то конечно окупится. Я уже придумал как его заставить кодить через API.
      Попробую. Т.е. так чтобы не вмешиваться, дать ему задание и он сделал от начала до конца.
      Я не уверен, что он сможет удерживать контекст долго. Но если так не получится, то 200 долларов просто не за что платить, т.к. есть подписка в 20 долларов, там 50 запросов за день. Это пока не так часто лично мне надо - какую-то задачу помочь решить. Когда уже опыт большой то и сам могу. Но начал в последнее время иногда спрашивать, как написать код работы с какой-то библиотекой для меня новой, он это быстро делает.
      Для новичков он будет заметной помощью. Но у них и зп меньше.

  • @OliinykO
    @OliinykO День назад

    У кого то в начале сложного Проекта есть полное понимание как его реализовывать, чтоб создать ПОЛНЫЙ ПРОМТ? Тогда вам и AI не нужно, вы и так знаете как решать. Глупость это, Промт пишется НЕПРЕРЫВНО на протяжении всей реализации проекта и ни как иначе. У меня за пол года не было ни одного проекта при создании алгоритмов параметрического 3D моделирования, чтоб я мог в начале целиком его в промте описать.
    О1 имеет смысл на сегодня использовать не в Pro подписке, а в Plus для генерации списка эффективных путей решения какой то сложной алгоритмической или тригонометрической (например) задачи. Тут он Claude 3.5 может помочь выйти из тупика. Вот пока и всё.
    Зря они сделали такую цену, это просто большую часть пользователей заставит пробовать другие AI и они больше не вернутся!

  • @aldm-z2c
    @aldm-z2c День назад

    Клод условно топово соображает и креативит, но его слабая сторона - способность глубоко ориентироваться в заложенных при обучении знаниях, их комплексно анализировать. Например, в юридических тонкостях может что-то наперепутать маленько. Может даже не вспомнить вовремя, что кто-то уже умер, когда биографическую статью пишет. В общем, в фактологии за ним нужен иногда глаз, врёт ведь очень убедительно. Нечасто,но думается,что о1 должна быть лишена этого почти

    • @mikeai686
      @mikeai686 17 часов назад

      ему бы факт-чекинг добавить для достоверности поиском на веб. это да. не пойму почему Антропик не добавят.

  • @АлексейМалашкин-в5п

    Вроде норм но пипееееец как душно…

  • @annx4417
    @annx4417 День назад +2

    200 баксов это копейки за такой сервис особенно для предприятия. люди о чем вы вообще
    посмотрите сколько всегда софт стоит.

    • @alexanderprint6841
      @alexanderprint6841 День назад

      тоже всегда удивляет когда кричат "огооо аж 200 баксов", но про зарплату мидлов сеньоров в 2-5-7+К не кричат ого

    • @annx4417
      @annx4417 День назад

      @@alexanderprint6841 если честно я был уверен что такие сервисы будут только по закрытой подписке и цена подписки будет миллионы долларов

    • @SerhiiZhydel
      @SerhiiZhydel День назад

      ​@@alexanderprint6841 так тут же все равно придется нанимать мидла/синьера чтоб добиться хотя бы рабочего прототипа от этих ллмок. Если все равно придется применять людей в том же обьеме, то нафиг тогда платить больше? Ну для прототипа разве что - там да, может быстрей выйдет. И то, наверняка после добавления 3 "очевидных" уточнений от заказчика, придется переписывать все вручную)

  • @roppor2194
    @roppor2194 День назад

    ВНИМАТЕЛЬНО посмотрел данный ролик.
    Вывод:
    Как и предполагал, когда
    подписчикам предложили дать интересные промты, для дорогой версии GPT, ничего умнее теории заговоров, и другой чуши, никто не придумал.
    Что касается кодинга, если ты не обладаешь хотя бы общими знаниями, то не сможешь ничего сделать, хоть с gpt, хоть с папой римским.
    Автору просьба:
    Не много сменить направление обзоров, на решения которые можно применить в реальной жизни.
    Есть пара задумок, но хотел бы написать в ЛС.

    • @diAx007
      @diAx007 День назад

      да автор тут ни одного запрос нормально не разобрал. Я вот проверяю все модели одним хитрым запросом, логической задачкой. Даже О1 ее без моих подсказок не решает, по крайней мере с первого раза. А остальные и подавно. Писанина про теорию заговоров бесполезна в жизни чуть более чем полностью, а вот решение логических задач в текстовом виде это уровень

    • @roppor2194
      @roppor2194 12 часов назад

      @ У меня сейчас другая задача. Блин инструкции даю, продвигаюсь со скрипом. Больше к реальным жизненным задачам пытаюсь применять