Skip to content
JS
JScriptiser
System Online
Patches
Platform
Quiz
FAQ
🇷🇺
ru
Sign In
To The Lab
Sign In
Knowledge Base
ML System Design
Estimation and Experiments
Estimation and Experiments
Back-of-the-envelope estimates, A/B design and sizing, interference, sensitivity, interview conduct
All
Easy
Medium
Hard
Default
Most popular
Easy first
Hard first
Expand
Collapse
1
Medium
7
Прикидка на салфетке: как быстро оценить объём данных, время обучения и стоимость ML-системы?
2
Medium
6
Как посчитать длительность A/B-теста модели: минимальный значимый эффект, размер выборки, метрики-отношения?
3
Hard
6
Когда A/B врёт: интерференция, switchback и кластерные дизайны?
4
Hard
7
Как повысить чувствительность A/B, не увеличивая трафик: коррекция по прошлым данным, стратификация, последовательные тесты?
5
Medium
8
Незнакомый домен на ML system design интервью: как проговаривать допущения и не завязнуть?
6
Medium
7
Как прикинуть размер индекса приближённых соседей: сколько памяти нужно под миллиард векторов?
7
Medium
6
Как оценить стоимость обучения модели: что считать, кроме часов на видеокарте?
8
Medium
8
Как посчитать стоимость инференса и когда пакетный режим дешевле онлайнового в десятки раз?
9
Medium
8
Сколько места и денег съедят данные ML-системы: как оценить объём логов, витрин и признаков?
10
Medium
7
Мощность эксперимента: как связаны минимальный значимый эффект, размер выборки и риск не заметить улучшение?
Previous
1
2
Next
Estimation and Experiments | JScriptiser