Go за гранью скорости: pprof на проде | avito.code

Привет! Это avito.code. Здесь опытные инженеры Авито делятся знаниями и рассказывают про свои рабочие инструменты.
В этом выпуске Иван Нещадин, старший инженер в команде Architecture Governments, продолжает делиться опытом оптимизации и профилирования приложений на Go. Речь пойдет о том, как использовать pprof на проде. Добавление специальных хендлеров в http-сервер сервиса.
Таймкоды
00:00 | Вступление
00:45 | Как добавлять хендлеры в http-сервер
03:12 | Собираем профиль CPU
05:26 | Как сработала утилита wrk
06:41 | Смотрим на полученный профиль
08:29 | Собираем профиль памяти с помощью pprof
11:41 | Разбираемся, где и почему было выделено 7 миллионов объектов
13:31 | Пробуем убедиться, что проблема заключается в garbage collector
15:44 | Заменяем библиотеку на bigcash
17:11 | Ещё раз нагружаем сервис
20:05 | Заключение
AvitoTech - это команда инженеров Авито. Подпишитесь на наш канал, соцсети и блоги, чтобы узнавать больше о технологиях Авито 👇🏻
ВК: avitotech
Телеграм: t.me/avitotech
Хабр: habr.com/ru/company/avito
Медиум (eng): / avitotech
Гитхаб: github.com/avito-tech
Сайт: avito.tech
#avitocode #go #pprof

[@ayaz.ayupov]

просмотрел больше 10 видео про pprof, это видео без сомнения лучшее
спасибо

[@skubach]

Сравнение профилей 🔥

[@user-kp4mt2jc3d]

Отличная подача материала, спасибо!

[@chemax87]

Большое спасибо

[@viktorsolovev8401]

Пуля-бомба. Спасибо!

[@ofp1979]

что мешает в данном видео сделать чтобы введённые команды переносились на следующую строку для читабельности?

[@Iyozy]

Спасибо за видео. Насколько это плохая идея сделать хранилище на хэш таблицах, если придётся там хранить большой объем данных, их придётся так же прятать от GC, как я понимаю.

[@AvitoTech]

Добрый день!
Получится тот же самый эффект, что и на видео, ведь в видео по-сути тоже используется библиотека, внутри которой и используется хэш мапа (github.com/bluele/gcache/blob/master/lru.go#L11). Но это зависит от того, сколько вы объектов планируете хранить, если до 100к, то в целом решение должно подойти, но если больше - лучше уже смотреть в сторону github.com/allegro/bigcache

[@hooker7108]

@@AvitoTechа что если хранить структуры неопределенного размера в байтах? Bigcache не подойдет?

[@glebdanichev9956]

2023 год у них в коде interface{} 🤦‍♂️

[@exitialislp]

Это код сторонней библиотеки 2021 года. А чем вам так interface{} не угодил?

[@glebdanichev9956]

@@exitialislp про генерики слышали ?

[@user-td6vu1hh3y]

алиас any наверное подразумевается@@exitialislp

[@user-xl1qb5yn1z]

покажите ваш гитхаб

[@glebdanichev9956]

Про any слышали ?