yorko Jun 30 2022 at 16:01

Эй-Яй, крипта, MLOps и командный пет-проджект

16 min

9.5K

Open Data Science corporate blogOpen source*Data Mining*Machine learning*Project management*

+22

Comments 9

svntmr Jun 30 2022 at 16:49

интересная статья, спасибо!

от себя добавлю, что Арсений является прекрасным человеком и специалистом, очень советую его хантить!

yorko Jun 30 2022 at 16:55

да и задор есть, речь бодрая, я часто лыбу давил на встречах, вроде тимлид, надо серьезность сохранять

ardaal Jul 1 2022 at 21:04

Спасибо за статью, очень живая!

Настолько вдохновляет, что сразу же захотелось тоже поучаствовать в какой-нибудь командной движухе! :)

nikolay_karelin Jul 1 2022 at 21:37

Отличная статья! Подскажите, какие у вас затраты на железо получились для хостинга?

yorko Jul 1 2022 at 23:42

Спасибо!

У нас не самый показательный случай, поскольку получили две машинки бесплатно - с GPU от Hostkey и без - от dstack.ai.

Машина от Hostkey была космос: Xeon E-2288G 3.7GHz (8 cores)/64Gb/1Tb NVMe SSD/RTX 3090, карта A5000 на борту. Эта тачка покрывала все нужды.

Дев и прод мы разделили физически - машинка от dstack- это один из скромных EC2 инстансов. За счёт ONNX, мы справились без GPU во время инференса.

Если б бесплатных машин не было, мы бы использовали Kaggle Notebooks / Google Colab для экспериментов и мелкую машинку для деплоя. Я на время брал Hetzner CX31 – 8 Gb RAM, 2 vCPU, 80 GB disk, 10.77 евро/мес.

Не критично, 11 евро/мес. командой осилили бы. Но если есть возможность, советую получать ресурсы за бесплатно :)

antonblockchain Jul 2 2022 at 03:07

Очень круто!
А в живую пробовали этим торговать?
Или бектест именно на тикере BTCUSDT?
как это стыкуется с трейдингом у вас?
Спасибо.

yorko Jul 2 2022 at 10:24

Я делал дисклеймер, что в трейдинг не хочу лезть. То есть оно вроде и должно заработать, но если ещё 20x времени вложить.

Из любопытства, конечно, был эксперимент, где по сентиментам предсказывал, пойдёт ли биток вверх или вниз. Уверенный ROC=50% на валидации. Not so easy.

Зарабатывать проще было бы, продавая прогнозы тональности. Но это уже прод надо поддерживать, с клиентами общаться - выходит за рамки душевного пет-проджекта.

antonblockchain Jul 5 2022 at 14:34

Спасибо.
Если вы проверили что прогнозы тональности никак не являются сигналами.

Точнее что вы не знаете как их применять, или их применять вообще нельзя.
То как этими прогнозами будут пользоваться покупатели?

yorko Jul 5 2022 at 16:36

Я проверил самую простую и быстро проверяемую гипотезу. То что в прогнозах тональности не хватает сигнала, чтоб только на них одних предсказывать движение курса, не значит, что признак бесполезен. Он может использоваться в более сложных моделях как дополнительный признак.