SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Стек технологий: Linux (RHEL), Hadoop (Hive, YARN, Oozie) RH IDM IPA (LDAP, IDM, CA, DNS, HBAC, SUDO), PostgreSQL + Patroni, Apache Ozone, Kafka, HAProxy, NGinx, Grafana + Prometheus, Ansible, Jenkins, Vault (hashicorp), Git, Bash, Python.### Задачи
* установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры
* участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов
* автоматизация рутинных операций для повышения производительности и надежности систем (самостоятельно и с привлечением смежных команд, выставление ТЗ на контрагентов)
* анализ и оперативное устранение нештатных ситуаций, отказов приложений, а также исследование корневых причин их возникновения
* поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку
* создание эксплуатационной документации для сопровождаемых систем
* организация работ, взаимодействие со смежными командами, исправления выявленных недостатков.### Требования
* глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux
* написание различных SQL запросов, понимание что такое DML, DDL, DCL, TCL, знание принципов работы реляционных БД
* понимание работы стека TCP/IP
* опыт эксплуатации CI/CD систем (Jenkins/Github/TeamCity/etc) и с системами мониторинга (Prometheus, Zabbix)
* понимание технологий интеграции между системами (форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ)
* опыт автоматизации на скриптовых языках (shell/perl/python/etc)
* опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP
* знание ITSM, ITIL и опыт написания технической документации и технических заданий.
Будет плюсом
* опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flume, Solr, Ranger
* английский язык на уровне чтения технической документации
* техническое образование.### **Условия**
* офисный формат работы по адресу г Москва, наб Новоданиловская (БЦ Даниловский Форт, ДФ), 10
* график: 5/2
* ежегодный пересмотр зарплаты и годовая премия
* более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
* программа адаптации и помощь руководителя на старте
* расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
* гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
* подписка Прайм с возможностью совместного использования на трёх близких
* вознаграждение за рекомендацию друзей в команду Сбера.