Мы — одна из немногих команд в стране, которая разрабатывает ядро распределённой базы данных, а не просто эксплуатирует её. У нас собственный форк Apache Cassandra, поверх которого реализовано то, чего нет в ванильной версии: транзакции, глобальные индексы, генератор последовательностей.

С чем предстоит иметь дело:

- Распределённые системы на практике: репликация, кворумы, консистентность — в продакшене из кластеров на сотни узлов в нескольких дата-центрах, обслуживающем сервисы с многомиллионной аудиторией

- Живая миграция между мажорными версиями базы без downtime продуктов

- Производительность на уровне движка хранения: стратегии компакшена, тюнинг GC, работа с off-heap, профилирование под продакшен-нагрузкой

- Отказоустойчивость: сценарии потери целого дата-центра, расчётные модели доступности, разбор реальных инцидентов до первопричины

- Работа с апстримом: наш форк регулярно синхронизируется с ванильной Apache Cassandra

— вы будете читать и понимать код одной из самых известных open-source баз на уровне контрибьютора

- Баги, которые не воспроизвести на ноутбуке: часть проблем существует только на больших данных и больших кластерах. Реальный пример из нашей практики — переполнение int32 при компакции SSTable, у которых файл метаданных сжатия перерос 2 ГБ: код работал годами, пока данные не доросли до граничного значения

Задачи

- Разработка и поддержка собственного форка Apache Cassandra

- Развитие ядра форка: транзакционный слой (ACID поверх Cassandra), глобальные индексы, слияние с апстримом Apache Cassandra

- Миграция продуктовых сервисов на использование последней версии форка

- Разработка и поддержка интеграции Cassandra во внутреннюю систему managed database

- Работа с нагрузочными тестами

- Работа с метриками, алертами, написание ранбуков, совершенствование инструментов диагностики

- Дежурство по своим сервисам, разбор инцидентов и устранение их причин

- Техническое ревью изменений и менторинг в команде

- Работа с командами-потребителями: разбор их проблем с производительностью, схемой данных и конфигурацией

Требования

- Практический опыт разработки на Java от пяти лет. Core, многопоточность, работа с памятью и сборщиком мусора, профилирование

- Понимание того, как база данных устроена внутри: хранение на диске, индексы, журнал записи, слияние файлов данных, транзакции и уровни изоляции. На примере любой СУБД

- Опыт чтения и доработки исходного кода инфраструктурного open-source: баз данных, брокеров сообщений, распределённых систем

- Опыт работы в большой чужой кодовой базе: умение разобраться в незнакомом коде и вносить изменения, не ломая смежную функциональность

- Понимание распределённых систем: репликация, консистентность, кворумы, поведение при отказе узлов и сетевых разделениях

- Готовность участвовать в дежурстве по своим сервисам и разбирать инциденты

Будет плюсом

- Опыт работы с Apache Cassandra любой версии

- Опыт с другими NoSQL-хранилищами: HBase, ScyllaDB, MongoDB, Redis

- Опыт эксплуатации баз под нагрузкой: диагностика по метрикам и логам, разбор инцидентов на продакшене