Администратор Hadoop

it-компания gnivc- партнер государственных компаний и лидеров российского бизнеса, разработчик и системный интегратор крупнейших государственных информационных систем, а также коммерческих решений для налогового мониторинга.

• Компания входит в ТОП-100 лучших работодателей страны и 10 место в категории "IT-компании" 2024 года по рейтингу работодателей hh.ru среди крупных компаний;
• Мы в 25% лучших по уровню счастья среди компаний отрасли IT и России 2024 по версии Happy Job;
• Являемся аккредитованной ИТ-компанией.

Ищем Администратора Hadoop в отдел сопровождения систем больших данных. Занимаемся инфраструктурным сопровождением Hadoop от вендора Arenadata. Текущая позиция предполагает в первую очередь владение навыками администрирования Hadoop. Сопровождение одной из самых больших инсталляций Hadoop в России, сотни нод с объемом данных в несколько Петабайт.

Задачи:

• Участие в решении архитектурных вопросов по Hadoop;
• Формирование подхода по миграции на новые версии Hadoop и его компонентов;
• Управление изменениями ПО и железа;
• Решение вопросов сетевых доступов\недоступности серверов;
• Внедрение подхода к управлению (хранению и синхронизации) конфигурацией Hadoop;
• Подготовка инструкций по параметрам ключевых метрик и выстраивание мониторинга сервисов Hadoop;
• SL-3 для службы сопровождения;
• Анализ и решение инцидентов в промышленном и тестовом контурах;
• Взаимодействие с вендорами по вопросам сопровождения;
• Активный мониторинг и обеспечение бесперебойной работы основных сервисов Hadoop;
• Консультирование и подготовка рекомендаций для разработчиков приложений при возникновении сложных проблем и ошибок в прикладных задачах;
• Разработка мероприятий по предотвращению инцидентов;
• Стабилизация работы кластеров Hadoop и тюнинг производительности;
• Участие в развертывании релизов Озера Данных;
• Наращивание экспертизы в Hadoop внутри команды и распространение ее на всех заинтересованных;
• Формирование решений по внедрению новых технологий, проведение RND;
• Подготовка проектной документации.

Мы от вас ждём:

• Знания Unix\Linux (опыт написание скриптов на bash, работа с репозиториями, управление доступами, управление процессами и ресурсами, установка ОС, разбор логов);
• Знания Hadoop (опыт установки кластера, настройки сервисов, обновление версий, оптимизация, знание компонентов экосистемы Hadoop что и для чего используется и их особенностей, опыт поиска решения проблем с сервисами);
• Понимание принципов развертывания контейнеризованных приложений;
• Понимание преимуществ\ограничений между реляционными и NoSQL базами данных, концепции распределенных СУБД;
• Java начальный уровень (понимание кода, чтение логов, jvm, принципов ООП).

Дополнительные требования:

• опыт работы со Spark под Hadoop;
• Опыт тюнинга производительности любой СУБД,
• Опыт DevOps.

МЫ ПРЕДЛАГАЕМ:

• Работу в офисе, гибридный график или дистанционный формат на территории РФ;
• Пятидневную рабочую неделю (Пн. – Чт. с 09.00 до 18.00, Пт. с 09.00 до 16.45);
• Конкурентную заработную плату по результатам собеседования, премии за эффективную работу и результат;
• Оформление в соответствии с требованиями ТК РФ: оплачиваемые отпуска + доплата к отпуску 50% от оклада через 11 месяцев работы в Компании, выплата заработной платы дважды в месяц и др.;
• Компенсация Больничный листа продолжительностью до 7 дней с сохранением полной оплаты, какая была бы в случае нахождения на работе.
• возможность взять 5 дополнительных оплачиваемых выходных (ресурсных) дней в течение календарного года (с 1 января до 31 декабря) сотрудникам, проработавшим в компании больше 11 месяцев;
• Профессиональное обучение и сертификация за счёт компании;
• А еще мы организуем митапы, хакатоны, конференции, семинары и тренинги: как внутренние, так и внешние;
• ДМС по окончании испытательного срока, с огромным перечнем лучших медучреждений и включая классную стоматологию;
• Партнерские программы по обучению иностранному языку и прокачки скиллов от Skyeng и Skillbox;
• Доступ к корпоративной библиотеке на платформе Alpina Digital;
• Возмещение до 50 % затрат на занятия спортом;
• А также, множество других приятных и интересных бонусов и преференций.