Automatização: Webscrapping diário e integração de dados (typescript)
16/11/2023 às 11:17Descrição do Projeto:
# Características do Projeto:
- Verificação diária para identificar novos arquivos utilizando fluxo eficiente.
- Monitoramento de alterações no tamanho do arquivo para garantir atualizações precisas.
- Salvamento seguro dos arquivos CSV em uma tabela no Directus.
- Prevenção de importação de dados duplicados para manter a integridade dos registros.
- Gestão cuidadosa de caracteres UTF-8, assegurando a preservação de acentos.
- Flexibilidade na criação da coleção no Directus de acordo com suas preferências.
# Detalhes Adicionais:
Localização dos Arquivos CSV: https://www.tesourotransparente.gov.br/ckan/dataset/transferencias-constitucionais-para-municipios
Nome dos Arquivos a serem Capturados: Mensal_Transferência_Municipios_202302
Padrão de Nomenclatura: Transferência Mensal Municípios ANO MÊS
Todos os arquivos dentro dessa nomenclatura serão salvos em uma coleção no Directus.
# Observação Importante:
Este projeto não envolve a criação da coleção no Directus; isso será feito internamente. Seu papel é garantir a captura e integração eficientes dos dados, que posteriormente serão transformados em gráficos.
Se você é especialista em webscrapping e busca por desafios estimulantes, este projeto é perfeito para você! Candidate-se agora e faça parte da automação inteligente.
Habilidades desejadas:
Arquivos anexados:
Entre ou Cadastre-se para ver os arquivos anexados.
Atividades do cliente nesse projeto:
Última visualização: 18/12/2023 às 10:29
Última interação: 19/11/2023 às 08:33
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
-
Submetido: | Oferta: Privado | Duração estimada: Privado
Correção e execução de código em Python - O código-fonte é escrito em Python, utilizando o framework Flask para a construção da API backend. Além disso, ele utiliza SQLAlchemy para manipulaçã...
Incluir agendamento de mensagens no modo calendário no Whaticket - Trocar o modelo de lista para o modo calendário na aba de agendamento do Whaticket para melhor organização das mensagens agendadas.
Estrutura de e-commerce para loja de roupas - Preciso de uma estrutura de um e-commerce para uma loja de roupas. É necessário que a tela inicial tenha um tema com um carrossel de imagens ocupando toda a tela. A loja tem uma pegad...
Suporte para bugs no Whaticket - Preciso de uma pessoa que entenda de programação para solucionar bugs na ferramenta Whaticket. Estou com a ferramenta ativa e preciso resolver esses problemas, porém não...
Integração API entre ClickUp e plataforma de aprovação - A agência de publicidade utiliza o ClickUp para gerenciar as tarefas. O objetivo é fazer uma integração com alguma plataforma ou até o site da agência, para ...
