Architecte big data F/H

L’architecte big data préconise les solutions techniques à mettre en œuvre dans les projets nécessitant la collecte, le stockage ou l’utilisation de données en masse (big data). Il/elle intervient ainsi sur de nombreux projets et met en place des solutions génériques pour faciliter le travail des équipes de développeurs. Cela lui permet notamment d’avoir une vision globale des données de l’entreprise. Travaillant dans un écosystème qui évolue rapidement, il/elle assure également la veille technologique autour du big data.

Autres intitulés

  • Architecte data H-F
  • Architecte de la donnée H-F

MOTS CLEFS

  • Architecture
  • Big data
  • Collecte
  • Homogénéisation des pratiques
  • Stockage
  • Structuration de la donnée
  • Système d’information
icone user

Activités

Collecte, stockage et identification des données

  • Cartographier les données de l’entreprise et mettre en œuvre la construction d’une plateforme de données (data lake…) si celle-ci n’existe pas déjà.
  • Recueillir les attentes utilisateurs et définir les différentes briques qui vont répondre à leurs besoins.
  • Préconiser notamment des solutions techniques à mettre en place dans la collecte des données (en termes de transfert, format, fréquence d’actualisation, sécurité…).
  • Préconiser aussi des solutions techniques à mettre en place dans le stockage des données (en termes de technologie ou de service utilisé – cloud ou serveur local –, dimension des serveurs, mise à disposition des données, gestion des accès, optimisation des requêtes…).
  • Préconiser des solutions techniques permettant de s’engager sur une qualité et une continuité de service selon les contraintes (par exemple : temps de réponse de l’application…).
  • Analyser l’impact des solutions retenues selon le besoin métier.


Facilitation de l’usage des données dans l’entreprise

  • Mettre en place des outils génériques utilisables sur l’ensemble des projets.
  • Homogénéiser l’ensemble des développements.
  • Documenter cette donnée de façon fonctionnelle (schéma d’architecture…).


Conformité, veille et sensibilisation des utilisateurs aux problématiques de la data

  • Être garant de la conformité des solutions développées au regard du RGPD.
  • Assurer une veille technologique sur les outils big data.
  • Assurer un contact avec les éditeurs de solution pour suivre les nouvelles fonctionnalités ou la gestion des anomalies.
  • Participer à des conférences ou à des colloques sur les sujets du big data.
  • Diffuser la culture « data » dans l’entreprise.

VARIABILITÉ DES ACTIVITÉS 

Dans les entreprises où un data lake n’a pas encore été mis en place, un/une architecte big data prend part au projet de construction de celui-ci. L’architecte big data pourra alors travailler en tant que consultant/consultante ou être directement embauché(e) dans l’entreprise.

Les compétences demandées aux architectes data sont également variables et dépendent des solutions technologiques choisies par les entreprises. Par exemple, la solution de stockage des données choisie (sur un espace local ou dans un cloud) demande des compétences spécifiques à l’architecte big data. Le stockage de données en local demande, par exemple, à l’architecte davantage de compétences sur les couches basses de l’informatique (serveur…). Les entreprises qui valorisent le stockage de données en local sont des entreprises aux besoins de sécurité élevées (banque, etc.). 

RATTACHEMENT HIÉRARCHIQUE

  • Responsable d’équipe data
  • Responsable pôle big data
  • IT data director

CONTEXTE ET FACTEURS D’ÉVOLUTION DU MÉTIER

Aujourd’hui, avec l’afflux massif de données, les entreprises se voient offrir des opportunités nouvelles, et ce, quel que soit leur secteur d’activité. Les données sont ainsi incontournables pour piloter la satisfaction client, les services après-vente, la gestion des fraudes. L’implémentation de plus en plus régulière de capteurs dans les outils de production permet également de prédire des pannes ou d’automatiser les processus industriels. Certaines entreprises s’orientent vers des organisations dites data centric, avec la constitution d’équipe et/ou mobilisation de compétences techniques dédiées et valorisent la dissémination de la culture des données.

Les architectes big data sont également confronté(e)s à de nombreuses évolutions technologiques, dont la démocratisation du cloud au sein des entreprises. Cela leur demande de s’adapter, de se former et d’être capables de travailler avec ces nouveaux outils. La gouvernance de données est également de plus en plus prise en main par les entreprises, ce qui oblige les architectes big data à s’investir plus fortement qu’avant sur ces sujets.

icone user

Profil

Diplômes requis

  • Formation de niveau Bac +5
    • Diplôme d’école d’ingénieurs avec une spécialisation en informatique
    • Master en informatique architecte logiciel avec une spécialisation en big data
  • Certification Togaf, ArchiMate


Durée d’expérience

Avoir entre cinq et dix ans d’expérience est primordial pour être embauché comme architecte big data. Cette expérience peut avoir été accumulée en tant qu’architecte logiciel, data engineer ou dans une équipe big data, que ce soit en entreprise de services du numérique (ESN) ou en interne.

icone user

Compétences requises

Compétences techniques

  • Maîtrise de l’environnement Hadoop/Spark/Yarn (que ce soit en local ou sur cloud)
  • Maîtrise des systèmes d’exploitation (Unix, Windows…)
  • Maîtrise de langages de programmation (C++, Java, Python, R, Scala…)
  • Maîtrise en base de données et gestion de base de données (SQL/NoSQL)
  • Maîtrise d’un outil de gestion de flux (Kafka, Flink…)
  • Bonne compréhension et connaissance des interfaces réseaux et de l’infrastructure matérielle
  • Connaissance de la réglementation concernant les données personnelles et des principes de cybersécurité
  • Connaissance des solutions de manipulation des données ETL/LET
  • Bonne compréhension de la stratégie d’entreprise et des besoins business


Aptitudes professionnelles

  • Esprit d’équipe
  • Sens de l’écoute et de la communication
  • Organisation
  • Force de proposition et de conviction
  • Capacité à prendre du recul
icone user

Rémunération

Rémunération annuelle brute (fixe + variable) proposée dans les offres d'emploi : 80 %  sont comprises entre 42 k€ et 105 k€  (moyenne 62 k€)