Evaluating bids

Desenvolvimento de scrapper para anúncios de imóveis na Olx

Published on the January 23, 2023 in IT & Programming

About this project

Open

Desenvolvimento de um crawler que colete informações de anúncios de imóveis na OLX e deposite de forma padronizada em um banco de dados Postgresql. Tanto o motor de busca quanto o banco de dados devem rodar na mesma máquina.

Especificações:
- Motor de busca: Qualquer tecnologia de scrap.
- Banco de dados de hospedagem: Postgresql.
- Estrutura da tabela de saída: uma tabela, com estrutura de campos no arquivo anexo, mais possíveis tabelas de controle.
- Ambiente: Ubuntu 22.04 LTS com Docker.
- Repositório: Github, a ser fornecido pelo contratante.
- Funcionamento: Coleta de anúncios pelo menos uma vez por semana, com cada novo ciclo substituindo completamente os anúncios do ciclo anterior.
- Parâmetros de busca e filtros: Colocar parâmetros de busca e de filtragem em um arquivo de configuração separado. O arquivo deve conter: 1) Intervalo do ciclo de busca, em dias; 2) Pares chave/valor para filtro de busca de anúncios.
- Instalação no servidor: A cargo do contratado
- Período de testes/garantia: Pelo menos duas semanas após entrega

Project overview

Estou fazendo um levantamento de anúncios de imóveis na internet, por isso a necessidade de criação de um scrapper. A tabela padrão tem que ser seguida exatamente no formato fornecido, mas a população de dados depende da disponibilidade das informações.

Category IT & Programming
Subcategory Web development
What is the scope of the project? Medium-sized change
Is this a project or a position? Project
I currently have I have specifications
Required availability As needed
Roles needed Developer

Delivery term: Not specified

Skills needed

PostgresSQL Web Scraping

Want to start working on this project?

Log into your Workana account or Register today. Boost your freelance work!

Other projects posted by S. M.