-
Desenvolvimento Web
|
Especialista |
Publicado:
|
Tempo restante: |
Propostas: 16 |
Interessados: 22
Procuramos alguém para gerir, corrigir e manter nossos scripts rodando de marketplace para gestão de produtos, atualização de estoque, web scraping e outras funções relacionadas.
- Experiência ampla em web scraping com Python, principais bibliotecas: requests e Selenium.
- Necessário conhecimentos sólidos em manipulação e análise de dados.
- Saiba e exerça princípios de testes unitários.
- Conhecimentos em Python, JavaScript, Node, Vue.js, SQL e NoSQL.
- Tenha conhecimentos de Agile Scrum.
- Experiência com desenvolvimento web.
Cliente:
Rubentek M.
(8
avaliações)
-
Outra - Web, Mobile & Software
|
Intermediário |
Publicado:
|
Tempo restante: |
Propostas: 21 |
Interessados: 34
RESUMO: Desenvolvimento de scripts Python para coletar dados de produtos de alguns sites e gravar os resultados em CSV.
DETALHES:
1. Você receberá 7 URLs de sites diferentes com listas de produtos. Dessas URLs, 3 seguem exatamente a mesma estrutura.
2. Cada URL possui uma lista de produtos. Essa lista pode ser paginada ou é carregada ao rolar a página. Todos os dados desejados estão presentes na lista, sem a necessidade de entrar em cada produto individualmente.
3. Os scripts devem coletar os dados desejados e gravar em um arquivo CSV.
4. Os scripts devem ter os mecanismos para evitar bloqueios do servidor: rotação de User Agent, proxies, rotação de IPs e headless browser.
5. Não é exigida documentação externa, mas cada script deve ter seus comentários bem detalhados no código.
6. A entrega são 7 scripts Python, um para cada URL.
Python
Web Crawling
Web Scraping
Cliente:
(Sem feedback)
-
Desenvolvimento Web
|
Intermediário |
Publicado:
|
Tempo restante: |
Propostas: 9 |
Interessados: 18
Estamos desenvolvendo um sistema de gestão de obras utilizando Nest.js, Next.js e MySQL e buscamos um freelancer para desenvolver o módulo de orçamentos, que terá as seguintes funcionalidades:
Objetivo do módulo de orçamento:
O módulo de orçamentos permitirá a criação de orçamentos personalizados para cada cliente e obra, com integração aos principais bancos de dados de custos de obras. O sistema deverá permitir a seleção de dados do SINAPI e outros bancos de dados de todos os estados do Brasil, com a possibilidade de escolher entre os anos disponíveis para cada estado.
Bancos de dados que deverão ser integrados:
- Nacional: SINAPI, SICRO3, SICRO2, SBC.
- Sudeste: SETOP, IOPES, SIURVE, SIURB INFRA, SUDECAP, CPOS, FDE, EMOP, SCO.
- Nordeste: ORSE, SEINFRA, CAEMA, EMBASA, CAERN, COMPESA.
- Centro-Oeste: AGESUL, AGETOP CIVIL, AGETOP RODOVIÁRIA.
- Norte: SEDOP.
- Sul: DERPR.
As tabelas de dados geralmente são fornecidas em formatos como PDF ou XLS, e podem ter várias regiões. O sistema deve ser capaz de extrair essas informações e armazená-las em um banco de dados estruturado.
Funcionalidades do módulo de orçamento:
- Seleção de encargos e BDI:
O usuário deve poder escolher encargos sociais desonerados e não desonerados (o sistema deve puxar esses dados), além de poder escolher entre um BDI padrão ou uma taxa para o BDI (Benefícios e Despesas Indiretas) que impactarão no preço final do orçamento.
- Criação de orçamentos:
O cliente poderá selecionar insumos individualmente ou adicionar composições de insumos. O sistema deve permitir misturar insumos e composições dentro do mesmo orçamento.
- Exportação de orçamentos:
O orçamento gerado deverá ter a opção de exportação em formatos como PDF ou XLS.
- Listagem de insumos e composições:
O módulo deve permitir ao usuário listar os insumos e composições presentes no banco de dados, de acordo com a base de dados escolhida.
- Dashboard:
O módulo deve possuir uma sessão com um relatório com dados sobre a criação de orçamento por cada cliente.
Solução técnica:
Consideramos que o módulo poderia ser desenvolvido em Python para extrair os dados dos arquivos de cada banco e depois armazená-los em um banco de dados estruturado (MySQL), garantindo que a consulta e o carregamento das informações sejam rápidos e eficientes, sem sobrecarregar a performance do sistema. No entanto, estamos abertos a outras soluções técnicas que atendam aos requisitos de performance e escalabilidade.
Após finalizado esse módulo, precisamos que hospede ele e o banco de dados na AWS e integre ao sistema.
Desenvolvimento de API
MySQL
NodeJS
Python
Web Scraping
Cliente:
Desenvolvimento Ni
(2
avaliações)
-
Desenvolvimento Web
|
Especialista |
Publicado:
|
Tempo restante: |
Propostas: 16 |
Interessados: 20
A ideia do projeto é cadastrar os imóveis no nosso site (WordPress) e, depois, com a integração, adicionar o cadastro automaticamente nas plataformas citadas no título.
Link para o estudo da solução:
https://developers.olx.com.br/anuncio/api/home.html
O site já está criado; eu preciso apenas de alguém que faça essa integração com a API das plataformas.
JSON
PHP
Web API
Web Scraping
Wordpress
Cliente:
Matheus S.
(6
avaliações)
-
Outra - Web, Mobile & Software
|
Iniciante |
Publicado:
|
Tempo restante: |
Propostas: 38 |
Interessados: 48
Preciso de um código em Python para raspar e organizar em uma planilha os dados de jogos e cotações do site da Betfair.
Cliente:
Paulo C.
(Sem feedback)
-
Outra - Web, Mobile & Software
|
Iniciante |
Publicado:
|
Tempo restante: |
Propostas: 13 |
Interessados: 21
Busco desenvolvimento de web scraping para pesquisa do maior número possível de dados de whois de sites. Daremos preferência para propostas em que o profissional já tenha feito serviços semelhantes ou já possua base de dados de whois para disponibilizar.
Scrapy
Web Scraping
Cliente:
Leonardo
(16
avaliações)