Arquiteto de Soluções em Big Data

  • São Paulo,São Paulo

Compartilhar vaga

A Escale

Somos uma empresa de aquisição de clientes que conecta marcas parceiras a milhões de novos consumidores. Fundada em 2013 por dois empresários americanos, atualmente estamos com mais de 700 colaboradores.

Usamos dados, tecnologia e design para oferecer experiências de compra mais inteligentes e otimizadas aos consumidores e entregamos um funil completo de conversão de vendas aos nossos parceiros.

Com investimentos recentes dos principais VCs, como Kaszek Ventures, QED Investors, Invus Opportunities, Global Founders Capital e Redpoint e.Ventures, estamos em rápido crescimento e buscamos talentos incríveis para escalar com a gente.

 

Sua escalada

Como arquiteto de dados na Escale, você fará parte do time que mantém nossa plataforma de dados. Você será responsável por desenvolver e manter uma arquitetura de plataforma de dados que capacita nossas equipes a armazenar, transformar e recuperar informações valiosas por meio de tecnologias de ponta. Nossa plataforma visa as arquiteturas de última geração do mercado (Kappa e Lambda) e atualmente estamos avançando para o processamento em tempo real e uma plataforma de aprendizado de máquina. Diariamente, você trabalhará com sistemas altamente escaláveis, distribuídos e tolerantes a falhas com foco no processamento analítico.

 

Também encorajamos o uso de tecnologias de código aberto, como Kafka, Kubernetes, Airflow, Amundsen, bem como retribuir à comunidade contribuindo em projetos de código aberto.

 

Responsabilidades

- Responsável pelo desenho da solução de arquitetura de dados

- Eventualmente desenvolver aplicações ou pipelines que componham a nossa plataforma;

- Avaliar novas ferramentas para compor nossa stack de dados;

- Apoiar na ingestão de dados para o Data Lake.

 - Suportar os clientes da nossa plataforma no seu uso e dúvidas


Requisitos Técnicos

- Base sólida em ciência da computação e fluência em aplicá-la a problemas práticos;

- Bons conhecimentos de uma linguagem de programação moderna. Ex. Python, Scala, etc;

- Desenho  e operações em sistemas distribuídos e armazenamento de dados: Hadoop, Spark, Presto, Redshift, Athena, Glue;

Conhecimento prático de Object Stores ou Distributed File Systems. Ex. S3, Google Cloud Storage, HDFS, etc

- Conhecimento prático de formatos de dados. Ex. JSON, Parquet, Avro, etc;

- Experiência com computação em nuvem, bem como problemas de escalabilidade e desempenho;

- Conhecimento em Arquitetura Lambda ou Kappa;

- Conhecimento em processamento distribuído