Микросервисы на InfiniBand: 800 Gbps в распределенном обучении / Алексей Морозов
Приглашаем на конференцию HighLoad++ 2025, которая пройдет 6 и 7 ноября в Москве! Программа, подробности и билеты по ссылке: https://highload.ru/moscow/2025 ________ Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем HighLoad++ 2024 2 и 3 декабря 2024. Москва, Кампус СКОЛКОВО Презентация и тезисы: https://highload.ru/moscow/2024/abstracts/13727 Распределенное обучение на примере ранжирующей модели в отделе рекламы Яндекса — это: 1. датасеты в 1+ PiB с требованием распределенного сортированного чтения; 2. шардированный parameter server в несколько TB параметров и рабочей нагрузкой в 300+ Gbps (37 GB/s) на хост; 3. сотни миллиардов рублей в год, с т.з. бизнеса. ... -------- Нашли ошибку в видео? Пишите нам на [email protected]
Приглашаем на конференцию HighLoad++ 2025, которая пройдет 6 и 7 ноября в Москве! Программа, подробности и билеты по ссылке: https://highload.ru/moscow/2025 ________ Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем HighLoad++ 2024 2 и 3 декабря 2024. Москва, Кампус СКОЛКОВО Презентация и тезисы: https://highload.ru/moscow/2024/abstracts/13727 Распределенное обучение на примере ранжирующей модели в отделе рекламы Яндекса — это: 1. датасеты в 1+ PiB с требованием распределенного сортированного чтения; 2. шардированный parameter server в несколько TB параметров и рабочей нагрузкой в 300+ Gbps (37 GB/s) на хост; 3. сотни миллиардов рублей в год, с т.з. бизнеса. ... -------- Нашли ошибку в видео? Пишите нам на [email protected]