Descrição da vaga
Nos preocupamos com o que você entrega e não como você se veste. Sabe como é uma Startup, né? Pessoas criativas, ambiente dinâmico, despojado, horário flexível, pouca burocracia e formalidades... Dá uma olhada nas fotos para sentir a vibe dos nerds :P
Estamos procurando Engenheiros de Dados apaixonado(a)s para nos ajudar a acabar com o SPAM no mundo. Não é brincadeira, temos uma missão de transformar a experiência de compra das pessoas em algo muito mais humanizado e inteligente.
Com grandes poderes vêm grandes responsabilidades e para ser um super Miner vai lidar com isso aqui:
- Escalabilidade / Performance (+200 milhões de pessoas impactadas/mês)
- Organizar e Gerenciar Terabytes de dados em nosso Data Lake
- Identificar gargalos e garantir a performance de leitura e escrita de nosso Data Lake
- Processamento de dados em real time
- Tomar decisões para nossa arquitetura de dados
Valorizamos muito a capacidade de aprendizado, mas precisamos de alguém que já chegue dando uma voadora nestas linguagens/arquiteturas:
- Python
- Hadoop Ecosystem (Apache Spark, EMR, HDFS)
- Estrutura de dados com Object Storage (AWS S3)
- Arquiteturas de Dados para processamento em batch e realtime
- ETL´s
Estas aqui são nice to have:
- Apache Zeppelin
- Apache Livy
- Apache Airflow
- Apache Cassandra
- Elasticsearch
- AWS Kinesis
- AWS Redshift
* Incentivamos a rotatividade em projetos diferentes para disseminar o conhecimento do time.
A Social Miner é uma plataforma de People Marketing que ajuda empresas a automatizarem sua comunicação de marketing, entregando experiências personalizadas para cada indivíduo em grande escala. A startup possui mais de 40 milhões de usuários conectados através de seus plugins sociais e mais de 500 milhões de impressões únicas mês.