Онлайн-эксперименты – рискованное занятие: когда изменения, которые мы тестируем, плохие, бизнес теряет пользователей и деньги. В научной статье под названием "Accordion: A Trainable Simulator for Long-Term Interactive Systems" авторы предлагают обучить симулятор, который можно запускать офлайн и тестировать гипотезы безопасно для бизнеса. В экспериментах авторы используют симулятор для двух задач: настройки гиперпараметров рекомендательной системы и предсказания результатов A/B теста. Выводы, полученные на этом симуляторе, точнее, чем выводы, полученные на других. Что же, давайте сделаем краткий обзор этой работы.