Automatização: Webscrapping diário e integração de dados (typescript)
16/11/2023 às 11:17Descrição do Projeto:
# Características do Projeto:
- Verificação diária para identificar novos arquivos utilizando fluxo eficiente.
- Monitoramento de alterações no tamanho do arquivo para garantir atualizações precisas.
- Salvamento seguro dos arquivos CSV em uma tabela no Directus.
- Prevenção de importação de dados duplicados para manter a integridade dos registros.
- Gestão cuidadosa de caracteres UTF-8, assegurando a preservação de acentos.
- Flexibilidade na criação da coleção no Directus de acordo com suas preferências.
# Detalhes Adicionais:
Localização dos Arquivos CSV: https://www.tesourotransparente.gov.br/ckan/dataset/transferencias-constitucionais-para-municipios
Nome dos Arquivos a serem Capturados: Mensal_Transferência_Municipios_202302
Padrão de Nomenclatura: Transferência Mensal Municípios ANO MÊS
Todos os arquivos dentro dessa nomenclatura serão salvos em uma coleção no Directus.
# Observação Importante:
Este projeto não envolve a criação da coleção no Directus; isso será feito internamente. Seu papel é garantir a captura e integração eficientes dos dados, que posteriormente serão transformados em gráficos.
Se você é especialista em webscrapping e busca por desafios estimulantes, este projeto é perfeito para você! Candidate-se agora e faça parte da automação inteligente.
Habilidades desejadas:
Arquivos anexados:
Entre ou Cadastre-se para ver os arquivos anexados.
Atividades do cliente nesse projeto:
Última visualização: 18/12/2023 às 10:29
Última interação: 19/11/2023 às 08:33
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
Sistema de ficha de anamnese digital com assinatura - Estou buscando um profissional para criar ou configurar um sistema para minha clínica, com as seguintes funções: • Ficha de anamnese digital personalizada (com campos edi...
Desenvolvimento de site para escritório de advocacia - Preciso de um profissional para me auxiliar na criação de um site para o escritório de advocacia. Já possuo um site pessoal, assinatura na Wix e domínio, mas pr...
Criar site para negócio de roupas - Quero que crie um site para meu negócio de roupas. Com um design padrão para vendas de roupas e direcionamento autônomo.
Desenvolver integração do Supabase com Lovable - Precisando de programador(a) para desenvolver a integração do Supabase com Lovable. É necessário ter experiência com esse tipo de demanda! Serão 10 tabelas ...
Sistema de sorteios com rastreamento de influenciadores - Desenvolvimento de um sistema de sorteios online com rastreamento de influenciadores via parâmetros UTM. O sistema permite que usuários participem de promoções gerando c&...
