Додайте свій проект безкоштовно і почніть отримувати пропозиції від фрілансерів-виконавців вже через хвилини після публікації!
500 ₽

Парсер на python scrapy

минув час актуальності


Необходимо написать парсер сайта https://www.weblancer.net/jobs на python scrapy.

Парсить нужно только проекты со страницы, указанной выше. В приложении схема таблиц. В таблице project_service хранится название сервиса (WebLancer) и ссылка на сервис (https://www.weblancer.net). В таблице project_counter хранится название счетчика (weblancer) и номер текущей страницы, которая будет парсится. При каждом запуске парсера номер страницы увеличивается на единицу. При завершении обхода всех страниц номер страницы сбрасывается в единицу. При запуске парсера парсится только одна страница. В таблице project_project хранится название проекта, дата создания записи в таблице, описание проекта, стоимость проекта, ссылка на проект, дата добавления проекта на сервисе, id сервиса из таблицы project_service. Схема таблиц представлена из Postgres.


Зробити ставку!

Замовник не бажає робити передплату? Запропонуйте оплату через Сейф, щоб уникнути можливого шахрайства.

  1. 7 днів10000 ₽
    Максим Семёнов
     295   1   0

    Добрый день.

    Почему именно scrapy, а не тот же beautifulsoup? Зачем натравливать его на все страницы и запускать вручную? Аналогичный мониторинг бирж я выполняю по крону и отправляю только новую работу себе в телеграм https://t.me/getFreelance.

    Росія Санкт-Петербург | 21 листопада о 22:28 |

Замовник
Олег Тюткин
Росія Санкт-Петербург
Проект опублікований
21 листопада о 22:04
46 переглядів
Способи оплати
Качество описания проекта
0
0
100%