Engenheiro de Dados

O Engenheiro de Dados é o responsável por garantir que os dados estarão disponíveis para a análise de forma segura. Engenheiros de dados constroem enormes reservatórios para Big Data. Eles desenvolvem, constroem, testam e mantêm arquiteturas, tais como bancos de dados e sistemas de processamento de dados em grande escala. Uma vez que estes imensos reservatórios de dados estejam criados, Cientistas de Dados podem aplicar suas técnicas analíticas e extrair informação relevante. O trabalho do Engenheiro de Dados está diretamente ligado a infraestrutura de TI.

Engenheiro de Big Data

Esta carreira é uma extensão da carreira de Engenheiro de Dados, mas, com foco em Big Data. Montar uma infraestrutura para armazenamento e processamento de grandes conjuntos de dados não é tarefa fácil. Hadoop, Spark, Cassandra, Hive, Hbase, Pig, Sqoop, MongoDB, API de integração. Cada solução será apropriada para um projeto específico e cabe a este profissional provisionar o Big Data de modo que os analistas e cientistas de dados possam aplicar seus modelos preditivos e resolver problemas de negócio. Assim como o Engenheiro de Dados, o Engenheiro de Big Data tem seu trabalho diretamente ligado à infraestrutura de TI.