Ваш браузер устарел
Вы пользуетесь устаревшим браузером, который не поддерживает современные веб-стандарты и представляет угрозу вашей безопасности.
Пожалуйста, установите современный браузер:

Эксперт по развитию архитектуры NoSQL КХД

Задачи:

  • • Обеспечивает сбор данных из различных источников различного типа по требованию владельцев данных с применением средств и методов передовых технологий в области Big Data.
  • • Организует процесс сбора данных в рамках требований хранения исходных данных по заданному плану для возможности их последующей оперативной обработки используя средства ETL и Big Data, в том числе технологии Hadoop sqoop, Apache Flume, Informatica PC
  • • Гарантирует полноту и доступность хранимых данных, в рамках установленных требований, для обеспечения дальнейшей их очистки и выгрузки итоговых решений с использованием различных средств интеграции сред Big Data с установленными RDBMS средами.
  • • Проводит анализ неструктурированных или слабоструктурированных данных больших объемов по требованию бизнес заказчиков, на основании подготовленных аналитических требований с использованием технологий Hadoop hive и парадигмы mapreduce.
  • • Предлагает решения по оптимизации текущих процессов на основании результатов анализа производительности, а также для обеспечения полноты и взаимосвязанности данных из разных источников с использованием инструментов программного обеспечения и готовых пакетов программ оптимизации.
  • • Разрабатывает регламенты и сопроводительную документацию к разработанным продуктам при передаче продукта в эксплуатацию, по требованию эксплуатационных служб. • Предоставляет рекомендации по настройке сред Big Data и формирует требований для источников и потребителей результатов работы процессов.

Требования:

  • • Высшее образование
  • • Знание архитектуры Hadoop
  • • Опыт использования технологий Hadoop hive, sqoop.
  • • Понимание парадигмы mapreduce
  • • Знания в разработке Java core, в том числе с использованием Hadoop API
  • • Знания PL/SQL, SQL
  • • Разработка в Informatica PC
  • • Способность разработки bash скриптов приветствуется.