Data Engineer Jr

  • Infoprice
  • Remoto
  • 23/09/2020
CLT Full Banco de dados

Descrição da vaga

DESCRIÇÃO DA VAGA

O ambiente é informal, nível "Vamos jogar um play para descontrair". Somos um time jovem, cheio de energia e propósito. Aliás, propósito este, que não é pouca coisa: queremos revolucionar as interações de consumo no varejo, inundando-o com tecnologias completamente disruptivas!

Demos o pontapé inicial em 2013, hoje atuamos com grandes varejistas em nosso portfólio. Naturalmente precisamos trazer mais gente boa para nos ajudar a realizar e sonhar cada vez mais alto. Ser "Faca na caveira", "sangue nos olhos", "faca entre os dentes", "ponta firme", "apaixonado pelo que faz", faz parte da nossa identidade!

Buscamos uma pessoa para atuar na área de Dados da InfoPrice, que se juntará a um time multidisciplinar de Data Engineers, Data Analytics, Data Scientists e BI Analysts. Nós, InfoPricers da Área de Data and Analytics, temos como foco tirar o máximo proveito dos dados que nos são disponibilizados por sistemas internos, externos e de clientes.

Como trabalhamos com dados de varejo físico, você irá trabalhar com dados real-time e batch de mais de 60 milhões de Preços e Sortimento por dia (entre dados internos e externos), ajudando a garantir visibilidade e assertividade em nossos dados, pré-cálculo que garanta nosso SLA de modelagem de preço e sortimento em menos que 30ms, através de data pipelines que suportem nossa operação em campo, assim como nossas análises e pré-cálculo de produção e auxílio a criação de dataset junto com nossos data scientists.

RESPONSABILIDADES E ATRIBUIÇÕES

  • Manter nosso Data Lake sempre atualizado, como novas fontes de dados e integridade das atuais.
  • Criar e manter data Pipeline de Big Data (Ingestão de Dados, pré-cálculo e cálculo).
  • Garantir qualidade e monitoramentos dos pipelines.
  • Criar e manter nossos workflows de coleta de dados abertos e de bases de parceiros.
  • Otimização de processos de ETL para garantir menor custo e tempo de execução.
  • Otimização dos ETL em nossos bancos SQL e No-SQL.
  • Ser proativo com nossos processos de data science e business intelligence.

REQUISITOS E QUALIFICAÇÕES

  • Ser fluente nas ferramentas de Big Data como Apache Spark.
  • Ser fluente em Linux e Bash Scripting.
  • Ter tido contato com tecnicas web scrapping.
  • Ingestão de Dados.
  • Conhecer técnicas de pipeline.

Será legal se você você tiver:

  • Governança de Dados.
  • Pipeline de streaming de dados.
  • Experiência com ferramentas de Data Viz (Metabase, Power BI, etc).
  • Experiência com stack de dados da AWS (EMR e S3).
  • Experiência no varejo.
  • Gostar de ensinar: gostamos de oferecer treinamentos internos de como usar dados para tomar decisões.

INFORMAÇÕES ADICIONAIS

Aqui na Info você vai:

  • Fazer parte de um time maravilhoso <3
  • Fazer parte de um ambiente muito da hora e
  • descontraído :)
  • No dress code!
  • Ter a oportunidade de fazer parte de uma empresa cheia de energia, inovadora e que está revolucionando a forma como empresas fazem suas pesquisas de preços!
  • Benefícios de mercado: VT, VR, assistência médica e odontológica, seguro de vida, descontos corporativos (vinculados ao nosso parceiro Convenia).

Salário

A combinar