Automatização: Webscrapping diário e integração de dados (typescript)
16/11/2023 às 11:17Descrição do Projeto:
# Características do Projeto:
- Verificação diária para identificar novos arquivos utilizando fluxo eficiente.
- Monitoramento de alterações no tamanho do arquivo para garantir atualizações precisas.
- Salvamento seguro dos arquivos CSV em uma tabela no Directus.
- Prevenção de importação de dados duplicados para manter a integridade dos registros.
- Gestão cuidadosa de caracteres UTF-8, assegurando a preservação de acentos.
- Flexibilidade na criação da coleção no Directus de acordo com suas preferências.
# Detalhes Adicionais:
Localização dos Arquivos CSV: https://www.tesourotransparente.gov.br/ckan/dataset/transferencias-constitucionais-para-municipios
Nome dos Arquivos a serem Capturados: Mensal_Transferência_Municipios_202302
Padrão de Nomenclatura: Transferência Mensal Municípios ANO MÊS
Todos os arquivos dentro dessa nomenclatura serão salvos em uma coleção no Directus.
# Observação Importante:
Este projeto não envolve a criação da coleção no Directus; isso será feito internamente. Seu papel é garantir a captura e integração eficientes dos dados, que posteriormente serão transformados em gráficos.
Se você é especialista em webscrapping e busca por desafios estimulantes, este projeto é perfeito para você! Candidate-se agora e faça parte da automação inteligente.
Habilidades desejadas:
Arquivos anexados:
Entre ou Cadastre-se para ver os arquivos anexados.
Atividades do cliente nesse projeto:
Última visualização: 18/12/2023 às 10:29
Última interação: 19/11/2023 às 08:33
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
Criação de site institucional para escritório de consultoria tributária - Criação de site institucional para um escritório de consultoria tributária e fiscal, semelhante a um site de escritório de advocacia. Na verdade, são 2 adv...
Desenvolvimento de fórum/comunidade - Preciso de um profissional que realmente entenda sobre desenvolvimento. Estou querendo desenvolver um fórum/comunidade, onde qualquer usuário que tenha conta pode fazer um post e qual...
Programador Java com experiência em iText - Tenho um sistema de assinaturas de documentos desenvolvido em Laravel. A API que estamos usando retorna um raw_signature, que contém um base64 com o certificado digital. Pelo que verifiquei,...
Alteração em página de vendas - Preciso de alguém que consiga fazer a alteração de algumas partes em uma página de vendas que não fui eu que criei. É uma página que anuncio como af...
Criação de site para plataforma de assinatura e venda avulsa - Estamos à procura de um profissional para o desenvolvimento de um site, com experiência em plataformas de assinatura e e-commerce, para lançar nosso novo projeto de box surpresa...
