Илья Биин: Организация совместной работы Go и Python-based сервисов в Ostrovok.ru
2 likes1,070 views
Документ обсуждает выбор технологий для стартапа, подчеркивая важность скорости и простоты разработки на этапах создания прототипа. Рассматриваются плюсы и минусы использования Python и Go, а также вопросы, связанные с зависимостями и тестированием. В конце предлагается гибридная архитектура, совмещающая оба языка, что позволяет оптимизировать разработку и улучшить производительность.
Илья Биин: Организация совместной работы Go и Python-based сервисов в Ostrovok.ru
- 2. Что такое стартап Done is better then perfect ostrovok.ru
- 3. Что такое стартап Done is better then perfect Нет понимания конечной точки ostrovok.ru
- 4. Что такое стартап Done is better then perfect Нет понимания конечной точки Постоянные эксперименты и развороты на 180 градусов ostrovok.ru
- 5. Что такое стартап Done is better then perfect Нет понимания конечной точки Постоянные эксперименты и развороты на 180 градусов Большой резерв для экстенсивного развития ostrovok.ru
- 6. Что такое стартап Архитектура «взрослого» проекта ostrovok.ru
- 7. Что такое стартап Архитектура «стартапа» ostrovok.ru
- 8. Когда выбирать Go? 3 - отлично 2 - хорошо 1 - хорошо, с серьезными оговорками 0 - плачевно Simplicity Performance Libs Concurrency Python 3 0 2 0 Java 1 2 2 2 C/C++ 0 3 1 1 Go 2 2 0 3 Erlang 1 1 1 3 ostrovok.ru
- 9. Когда выбирать Go? В стартапе можно выделить два этапа развития ostrovok.ru
- 10. Когда выбирать Go? В стартапе можно выделить два этапа развития Разработка прототипа ostrovok.ru
- 11. Когда выбирать Go? В стартапе можно выделить два этапа развития Разработка прототипа Важнее всего скорость и простота разработки Выкидываем из сравнения производительность и многозадачность, получим несомненного лидера ( python ) c 5 баллами ostrovok.ru
- 12. Когда выбирать Go? В стартапе можно выделить два этапа развития Разработка прототипа Важнее всего скорость и простота разработки Выкидываем из сравнения производительность и многозадачность, получим несомненного лидера ( python ) c 5 баллами Необходимость как-то маштабировать написанное ранее ostrovok.ru
- 13. Когда выбирать Go? В стартапе можно выделить два этапа развития Разработка прототипа Важнее всего скорость и простота разработки Выкидываем из сравнения производительность и многозадачность, получим несомненного лидера ( python ) c 5 баллами Необходимость как-то маштабировать написанное ранее Скорость и простота разработки по-прежнему очень важна, но в некоторых случаях забивать на производительность становится невозможно Java и Go набирают в таком случае по 7 баллов ostrovok.ru
- 15. Итого, где именно? Идеальным вариантом для нас показался гибрид python-кода и golang-сервисов. В сервисы были вынесены: ostrovok.ru
- 16. Итого, где именно? Идеальным вариантом для нас показался гибрид python-кода и golang-сервисов. В сервисы были вынесены: Система кеширования ( 1Тб данных, 90000 ключей/сек ) ostrovok.ru
- 17. Итого, где именно? Идеальным вариантом для нас показался гибрид python-кода и golang-сервисов. В сервисы были вынесены: Система кеширования ( 1Тб данных, 90000 ключей/сек ) Обработка и переформатирование потока данных от поставщиков ( 30-50 МБ/сек ) ostrovok.ru
- 21. Протокол обмена ØMQ Redis queues HTTP keep-alive ostrovok.ru
- 25. Сериализация json/gzip 200/500мс msgpack/gzip 150/400мс json/snappy 120/170мс ostrovok.ru
- 26. Сериализация json/gzip 200/500мс msgpack/gzip 150/400мс json/snappy 120/170мс msgpack/snappy 80/120мс ostrovok.ru
- 28. Дополнительные плюсы Golang строго типизирован. Это приводит к тому, что формат входных и выходных данных зафиксирован. Это форсирует в коде на python элементы контрактного программирования. ostrovok.ru
- 29. Дополнительные плюсы Golang строго типизирован. Это приводит к тому, что формат входных и выходных данных зафиксирован. Это форсирует в коде на python элементы контрактного программирования. Код, будучи разбит на несколько независимых подпроектов, становится мнее связным. Каждый фрагмент можно релизить независимо. ostrovok.ru
- 31. Сложности перехода Отсутствие аналога virtualenv в частности и пакетного менеджера вообще. Неудобная работа с зависимостями. ostrovok.ru
- 32. Сложности перехода Отсутствие аналога virtualenv в частности и пакетного менеджера вообще. Неудобная работа с зависимостями. Неудобная работа со типом данных map. Пример: для того, чтобы отсортировать мэп по значениям, в каждом проекте есть собственноручно-написанный костыль. ostrovok.ru
- 33. Сложности перехода Отсутствие аналога virtualenv в частности и пакетного менеджера вообще. Неудобная работа с зависимостями. Неудобная работа со типом данных map. Пример: для того, чтобы отсортировать мэп по значениям, в каждом проекте есть собственноручно-написанный костыль. Низкое качество библиотек. ostrovok.ru
- 34. Сложности перехода Отсутствие аналога virtualenv в частности и пакетного менеджера вообще. Неудобная работа с зависимостями. Неудобная работа со типом данных map. Пример: для того, чтобы отсортировать мэп по значениям, в каждом проекте есть собственноручно-написанный костыль. Низкое качество библиотек. Не работает привычный подход к тестам (отсутствие возможности «мокать» код на лету. ostrovok.ru
- 35. Сложности перехода Отсутствие аналога virtualenv в частности и пакетного менеджера вообще. Неудобная работа с зависимостями. Неудобная работа со типом данных map. Пример: для того, чтобы отсортировать мэп по значениям, в каждом проекте есть собственноручно-написанный костыль. Низкое качество библиотек. Не работает привычный подход к тестам (отсутствие возможности «мокать» код на лету. Непривычная работа с ошибками ostrovok.ru
- 36. Ваши вопросы ! ! ! Илья Биин, архитектор в компании Островок.ру ! ! ! ! ! Пишите: me@ilyabiin.com ostrovok.ru