Automatização: Webscrapping diário e integração de dados (typescript)
16/11/2023 às 11:17Descrição do Projeto:
# Características do Projeto:
- Verificação diária para identificar novos arquivos utilizando fluxo eficiente.
- Monitoramento de alterações no tamanho do arquivo para garantir atualizações precisas.
- Salvamento seguro dos arquivos CSV em uma tabela no Directus.
- Prevenção de importação de dados duplicados para manter a integridade dos registros.
- Gestão cuidadosa de caracteres UTF-8, assegurando a preservação de acentos.
- Flexibilidade na criação da coleção no Directus de acordo com suas preferências.
# Detalhes Adicionais:
Localização dos Arquivos CSV: https://www.tesourotransparente.gov.br/ckan/dataset/transferencias-constitucionais-para-municipios
Nome dos Arquivos a serem Capturados: Mensal_Transferência_Municipios_202302
Padrão de Nomenclatura: Transferência Mensal Municípios ANO MÊS
Todos os arquivos dentro dessa nomenclatura serão salvos em uma coleção no Directus.
# Observação Importante:
Este projeto não envolve a criação da coleção no Directus; isso será feito internamente. Seu papel é garantir a captura e integração eficientes dos dados, que posteriormente serão transformados em gráficos.
Se você é especialista em webscrapping e busca por desafios estimulantes, este projeto é perfeito para você! Candidate-se agora e faça parte da automação inteligente.
Habilidades desejadas:
Arquivos anexados:
Entre ou Cadastre-se para ver os arquivos anexados.
Atividades do cliente nesse projeto:
Última visualização: 18/12/2023 às 10:29
Última interação: 19/11/2023 às 08:33
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
Desenvolvimento do projeto K2 - Estou anexando a documentação funcional detalhada do projeto para facilitar o entendimento e o arquivo de arquitetura. É imprescindível que as tecnologias abaixo sejam ...
Landing page para automação de processos - Estou em busca de um profissional de desenvolvimento para criar uma landing page para meu serviço personalizado de automação de processos. A landing page deve ter entre 7 e 12 ...
Criação de landing pages - Estou procurando um freelancer que faça as seguintes páginas para lançamento: 1ª página: página de cadastro, só com e-mail 2ª página: p&a...
Manutenção em Site - corretivas e preventiva - Olá tudo bom? Freela para manutenção em site. Realizar manutenção corretivas e preventiva, alterações de layouts quando solicitado e outros. Obs:...
Desenvolvedor(a) Frontend para página em Angular - Tenho um design simples de página que deve ser feito em Angular. O projeto já foi iniciado. Vou enviar o arquivo em zip, ou seja, você terá que finalizar ou refazer uma t...
