Encerrado

Projeto Python Utilizando o Scrapy

Projeto Python Utilizando o Scrapy

Habilidades necessárias: Python, Html, MongoDB

Script rodará diáriamente 1 vez por dia, com o objetivo de identificar novos produtos, se algum produto está indisponível ou se algum produto voltou a disponibilidade.

Rotina:

Acessar um site de um fornecedor

Acessar todas as categorias de produtos

Pegar os links de todos os produtos disponiveis recursivamente em todas as paginas da paginação

Se o produto ja foi capturado somente atualizar o valor e disponibilidade, se não existir no banco de dados inserir todos os dados do novo produto

Acessar todas as páginas dos produtos capturados e pegar os dados necessários

Url, Titulo, Valor, Imagens, Descição, Atributos(SKU, Peso, Altura, Largura, Comprimento, Certificado) Disponibilidade

Verifica se esse produto (item) já foi capturado

Se ja foi capturado verifica se: está ainda disponível, a data da ultima verificação, e o valor

Atualiza a data da ultima verificação se for um dia mais atual que a ultima verificação

Se estiver disponível verifica/atualiza o valor

Se estiver indisponível marca como indisponivel OU Se estava indiponivel e agora estiver disponível marca como disponivel

Se não foi capturado ainda insere no banco de dados

Salvar esses valores no banco de dados MongoDB sem duplicidade de produtos utilizar a URL como base

Habilidades: Python, Captura de dados na web, MongoDB, Scrapy, HTML5

Sobre o Cliente:
( 0 comentários ) Montes Claros, Brazil

ID do Projeto: #26993300

7 freelancers estão ofertando em média $80 nesse trabalho

suyashdhoot

Hi I am a very experienced statistician, data scientist and academic writer. I have completed several PhD level thesis projects involving advanced statistical analysis of data. I have worked with data from several comp Mais

$30 USD in 7 dias
(21 Comentários)
5.4
benliao

Olá senhor. Como você está? Acabei de ler a descrição do seu projeto e posso ajudá-lo com minhas ricas experiências. Tenho experiências ricas em raspagem de python e controle mongodb em python Eu lhe darei o resultado Mais

$20 USD in 100 dias
(7 Comentários)
4.3
albertnbr

Olá, Eu possuo uma boa experiencia em web scrapping, principalmente em plataformas de ecommerce, Já realizei extração automatizada de dados em sites como Aliexpress, OLX, Kabum e Mercado Livre, Eu posso te enviar um Mais

$120 USD in 7 dias
(9 Comentários)
3.6
greatswork

Hello, I have reviewed the description of the project, I have high specialization and experience in web, desktop and mobile development I have skills with the following programming languages: C, "C++", "C#", Python, G Mais

$200 USD em 1 dia
(3 Comentários)
3.1
guigo79

Bom dia, posso te ajudar com essee projeto. Já escrevi scripts em python para web scrapping para sites como olx e mercado livre, tenho certeza que posso te ajudar com o teu projeto. Espero que possamos trabalhar juntos Mais

$60 USD in 5 dias
(3 Comentários)
1.7
tuchinski

Olá, Sou estudante de Ciência da Computação e tenho experiência com scraping de dados em Python. Acredito que tenho as competências necessárias para realizar este trabalho. Desde já agradeço, Leonardo M. Tuchinski

$55 USD in 8 dias
(1 Comentário)
1.0
Rudson1

Posso ajudar com o projeto.

$78 USD in 20 dias
(0 Comentários)
0.0