Engenheiro(a) de Dados - I (Coleta de dados regulatórios e políticos)

Estamos desenvolvendo um projeto de inovação financiado pela FAPESP, o qual tem o objetivo de elevar a qualidade das informações para a tomada de decisões estratégicas de grandes empresas. Para isso, precisamos de uma equipe apaixonada por propor e desenvolver soluções capazes de revolucionar suas áreas!

‍

Esta vaga está relacionada à nossa área de dados, a qual é responsável por coletar, armazenar, organizar e transformar os dados governamentais em informações úteis para serem utilizados por outras áreas da Sigalei.

‍

Esta é a oportunidade de trabalhar junto com a nossa equipe de dados e se relacionar com as demais áreas da empresa. Você será responsável por desenvolver novos robôs de coletas automatizadas e propor soluções para obstáculos intelectuais e tecnológicos. É necessário manter a nossa operação de coleta de dados governamentais (regulatórios e políticos) funcionando, pois sem dados não tem informação!

‍

Oferecemos feedbacks constantes e todo o apoio necessário para você alcançar o sucesso na sua carreira profissional.

‍

Estamos construindo uma cultura horizontal focada no aprendizado e na autonomia da pessoa. Assim, você terá total liberdade para testar ideias e métodos.

‍

‍Vamos juntos!

‍

‍Responsabilidade da vaga

‍

Junto com o time de desenvolvimento do projeto, você será responsável por propor novos robôs de coleta automatizada de documentos governamentais (regulatórios e políticos) em fontes diversas e desafiadoras. Por exemplo, leis, decretos, portarias e documentos oficiais. Também será de responsabilidade estruturar os dados e garantir o armazenamento com confiabilidade e tolerância a falhas.

‍

Por último e não menos importante, será o responsável em implementar monitores de funcionamento dos robôs para garantir uma boa “saúde” da coleta de dados, comunicando de maneira efetiva possíveis interrupções no funcionamento.‍

‍

Requisitos:

• Comprovar 5 anos de experiência após a graduação; ou título de doutor;
• Formação em Ciência da Computação, Engenharia da Computação ou áreas correlatas
• Dedicação de 40 horas semanais
• Dedicação exclusiva ao projeto em desenvolvimento

‍

Conhecimentos:

• Programação em Python
• Conhecimento em web-crawling
• Conhecimento em estruturação de dados
• Conhecimento em banco de dados não-relacional

‍

Diferenciais:

• Conhecimento em Scrapy
• Conhecimento em ElasticSearch
• Conhecimento em docker
• Experiência com provedores de cloud computing (Google Cloud)

‍

‍

Bolsa:

Dedicação: 40 h/semanais

Duração: 24 meses

Valor: R$ 9.046,80

‍

Previsão de Início: Julho de 2024

‍

Informações adicionais sobre a bolsa FAPESP https://fapesp.br/bolsas/tt 

‍