Evaluating bids

Etl Pipeline + Python and Gcp

Published on the August 06, 2020 in IT & Programming

About this project

Open

Preciso extrair dados de uma CSV em um Storage (Cloud Storage ou S3) utilizando Google Cloud Functions (por exemplo) gravando os dados no Big Query ou Spanner.

O CSV seria depositado no Storage a cada 30min (por exemplo, podendo ser mais ou menos).

Utilizar a Google Functions para disparar rotinas de Transform.

Project overview

A partir de dados extraídos por RPA, são gerados arquivos CSVs que devem ter os dados armazenados em banco de dados, para posterior visualização via Metabase / Visual Studio (esta parte de visualização está fora do escopo.

Category IT & Programming
Subcategory Web development
What is the scope of the project? Small change or bug
Is this a project or a position? Project
I currently have I have specifications
Required availability As needed
API Integrations Cloud Storage (Dropbox, Google Drive, etc.)
Roles needed Developer, Other
Other roles needed Cloud

Delivery term: Not specified

Skills needed

Other projects posted by G.