Scrapy Parser Pep

Стек технологий

Асинхронный парсер PEP правил с официальной документации Python

Клонируйте репозиторий

git clone git@github.com:Creepy-Panda/scrapy_parser_pep.git

Переходим в папку с проектом, создаем виртуальное окружение, устанавливаем зависимости и запускаем парсер

cd pep_parser
python3 -m venv venv
pip install -r requirements.txt
scrapy crawl pep

После выполнения команды появится папка results в которой два файла:

pep_(дата) - Cписок всех PEP: номер, название и статус
status_summary_(дата) - Cодержит сводку по статусам PEP и колличество всех документов