Architecte Expert technique HADOOP HORTONWORKS CLOUDERA Nouvelle distribution Horton Works / Freelance

POUR UN DE NOS CLIENTS, NOUS RECHERCHONS : un Administrateur - Expert Big Data (Hadoop, Hortonworks, Cloudera). Notre client souhaite investir sur une distribution open source from scratch en réutilisant les composants Hadoop open source. Il ne s'agit pas de réécrire Hadoop, bien entendu, mais de le packager sous la forme d'une nouvelle distribution. Le profil recherché doit être pointu : compétences dev et architecture avancées pour créer une distribution Hadoop from scratch. L'objectif est de partir des composants open source pour construire une distribution indépendante de cloudera. === Le profil recherché doit avoir une bonne maîtrise des distributions Hortonworks (v2.6.x et v3.1.x) et Cloudera (v7.x). Build des modules Apache, sécurité (kerberos), tests d'intégration et d'évolutivité des modules, déploiement automatique, développement d'une IHM d'administration et d'exploitation et, tout cela en s'appuyant sur des nouvelles technologies (Cloud, kubernetes, terraform, ansible, docker, etc). Jalon 1 Apache Hadoop 3.1.1 Apache ZooKeeper 3.4.6 Apache TEZ 0.9.1 Apache Hive 3.1.0 Apache Spark 2.3.2 Jalon 2 Apache Ranger 1.2.0 Apache HBase 2.1.6 Apache Phoenix 5.0.0 Apache Knox 1.0.0 Apache Oozie 4.3.1 Jalon 3 D'autres modules + Exploitabilité, maintenance, etc. COMPÉTENCES MAJEURES : Profil recherché Administrateur Hadoop maîtrisant les distributions Hortonworks et Cloudera.