Заказчик захотел раз в неделю выгружать на свои сервера все данные из системы по своим пользователя. Вообще все: данные, логи, метрики, трейсы. Около 90% метаданных мы даже у себя не хранили, а согласно ТЗ просто должны были раз в неделю генерировать и отправлять. Команда посчитала — получилось, что передавать нужно десятки терабайт, причем быстро (максимум за час). Две недели думали, как это сделать, но всегда получалось либо очень дорого, либо очень долго, либо требовало доработок на принимающей стороне.

Решили для прикола предложить заказчику раз в неделю присылать к нам курьера и забирать коробку с жесткими дисками. Посчитали бюджет, и вышло очень дешево, а время в пути на метро всего 45 минут. Если до метро доезжать на самокате, то 38 минут. Заказчик одобрил план 😳

Наши парни всё утро расчёты проводят, спорят об оптимальном весе курьера, скоро сопротивление воздуха начнут учитывать. Кажется, мы в итоге изобретем самую быструю и недорогую передачу данных. Выступим на следующей Highload Conf.
#путьсамурая