Analisando propostas

Desenvolvimento de scrapper para anúncios de imóveis na Olx

Publicado em 23 de Janeiro de 2023 dias na TI e Programação

Sobre este projeto

Aberto

Desenvolvimento de um crawler que colete informações de anúncios de imóveis na OLX e deposite de forma padronizada em um banco de dados Postgresql. Tanto o motor de busca quanto o banco de dados devem rodar na mesma máquina.

Especificações:
- Motor de busca: Qualquer tecnologia de scrap.
- Banco de dados de hospedagem: Postgresql.
- Estrutura da tabela de saída: uma tabela, com estrutura de campos no arquivo anexo, mais possíveis tabelas de controle.
- Ambiente: Ubuntu 22.04 LTS com Docker.
- Repositório: Github, a ser fornecido pelo contratante.
- Funcionamento: Coleta de anúncios pelo menos uma vez por semana, com cada novo ciclo substituindo completamente os anúncios do ciclo anterior.
- Parâmetros de busca e filtros: Colocar parâmetros de busca e de filtragem em um arquivo de configuração separado. O arquivo deve conter: 1) Intervalo do ciclo de busca, em dias; 2) Pares chave/valor para filtro de busca de anúncios.
- Instalação no servidor: A cargo do contratado
- Período de testes/garantia: Pelo menos duas semanas após entrega

Contexto Geral do Projeto

Estou fazendo um levantamento de anúncios de imóveis na internet, por isso a necessidade de criação de um scrapper. A tabela padrão tem que ser seguida exatamente no formato fornecido, mas a população de dados depende da disponibilidade das informações.

Categoria TI e Programação
Subcategoria Programação
Qual é o alcance do projeto? Alteração média
Isso é um projeto ou uma posição de trabalho? Um projeto
Tenho, atualmente Eu tenho especificações
Disponibilidade requerida Conforme necessário
Funções necessárias Desenvolvedor

Prazo de Entrega: Não estabelecido

Habilidades necessárias

PostgresSQL Web Scraping

Voce gostaria de começar trabalhar neste projeto?

Entre com sua conta Workana ou faça o seu cadastro! Potencialize seu trabalho freelancer

Outro projetos publicados por S. M.