Encerrado

Projeto Python Utilizando o Scrapy

Projeto Python Utilizando o Scrapy

Habilidades necessárias: Python, Html, MongoDB

Script rodará diáriamente 1 vez por dia, com o objetivo de identificar novos produtos, se algum produto está indisponível ou se algum produto voltou a disponibilidade.

Rotina:

Acessar um site de um fornecedor

Acessar todas as categorias de produtos

Pegar os links de todos os produtos disponiveis recursivamente em todas as paginas da paginação

Se o produto ja foi capturado somente atualizar o valor e disponibilidade, se não existir no banco de dados inserir todos os dados do novo produto

Acessar todas as páginas dos produtos capturados e pegar os dados necessários

Url, Titulo, Valor, Imagens, Descição, Atributos(SKU, Peso, Altura, Largura, Comprimento, Certificado) Disponibilidade

Verifica se esse produto (item) já foi capturado

Se ja foi capturado verifica se: está ainda disponível, a data da ultima verificação, e o valor

Atualiza a data da ultima verificação se for um dia mais atual que a ultima verificação

Se estiver disponível verifica/atualiza o valor

Se estiver indisponível marca como indisponivel OU Se estava indiponivel e agora estiver disponível marca como disponivel

Se não foi capturado ainda insere no banco de dados

Salvar esses valores no banco de dados MongoDB sem duplicidade de produtos utilizar a URL como base

Habilidades: Python, Captura de dados na web, MongoDB, Scrapy, HTML5

Veja mais: python web crawler scrapy, a tradução do texto i want your job chocolate taster, analista de licitação freelancer, animação 2d online, animação 2d online gratis, animação freelancer, associação de freelancers, baixa ativação xara photo graphic designer, carta de apresentação para trabalho freelancer, certificação ruby on rails, chương trình đào tạo copywriter, combinação de cores web design, freelancer edição de imagens, freelancer programação python, edição de imagens, projeto elétrico de iluminaçào predial, edição e tratamento de imagens, correção de imperfeições, pós-produção de fotos, tratamento de books e ensaios, retoque, projeto de decoração , ediçåo de imagens, projeto redação

Acerca do Empregador:
( 0 comentários ) Montes Claros, Brazil

ID do Projeto: #26993300

7 freelancers are bidding on average $80 for this job

suyashdhoot

Hi I am a very experienced statistician, data scientist and academic writer. I have completed several PhD level thesis projects involving advanced statistical analysis of data. I have worked with data from several comp Mais

$30 USD in 7 dias
(21 Comentários)
5.4
benliao

Olá senhor. Como você está? Acabei de ler a descrição do seu projeto e posso ajudá-lo com minhas ricas experiências. Tenho experiências ricas em raspagem de python e controle mongodb em python Eu lhe darei o resultado Mais

$20 USD in 100 dias
(7 Comentários)
4.3
albertnbr

Olá, Eu possuo uma boa experiencia em web scrapping, principalmente em plataformas de ecommerce, Já realizei extração automatizada de dados em sites como Aliexpress, OLX, Kabum e Mercado Livre, Eu posso te enviar um Mais

$120 USD in 7 dias
(9 Comentários)
3.6
greatswork

Hello, I have reviewed the description of the project, I have high specialization and experience in web, desktop and mobile development I have skills with the following programming languages: C, "C++", "C#", Python, G Mais

$200 USD em 1 dia
(3 Comentários)
3.1
guigo79

Bom dia, posso te ajudar com essee projeto. Já escrevi scripts em python para web scrapping para sites como olx e mercado livre, tenho certeza que posso te ajudar com o teu projeto. Espero que possamos trabalhar juntos Mais

$60 USD in 5 dias
(3 Comentários)
1.7
tuchinski

Olá, Sou estudante de Ciência da Computação e tenho experiência com scraping de dados em Python. Acredito que tenho as competências necessárias para realizar este trabalho. Desde já agradeço, Leonardo M. Tuchinski

$55 USD in 8 dias
(1 Comentário)
1.0
Rudson1

Posso ajudar com o projeto.

$78 USD in 20 dias
(0 Comentários)
0.0