Skip to content

k0sdm1/scrapy_parser_pep

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

4 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Проект парсинга pep на Scrapy

Проект содержит парсер PEP основанный на фреймворке Scrapy, собирвает данные обо всех документах PEP, считает количество PEP в каждом статусе и общее количество PEP, сохраняет результат в табличном виде в csv-файл.

Начало работы

Эти инструкции помогут вам склонировать репозиторий и настроить виртуальное окружение для разработки.

Предварительные требования

Убедитесь, что на вашем компьютере установлены следующие программы:

Установка

  1. Клонируйте репозиторий:

    Откройте терминал и выполните команду:

    git clone https://github.com/k0sdm1/scrapy_parser_pep.git
  2. Перейдите в директорию проекта:

    cd scrapy_parser_pep
  3. Создайте виртуальное окружение:

    python -m venv venv  //Windows
    python3 -m venv venv  //Linux
  4. Активируйте виртуальное окружение:

    Windows

    .\venv\Scripts\activate

    Linux

    source venv/bin/activate
  5. Установите зависимостей:

    pip install -r requirements.txt

Запуск и использование

  1. Для запуска находясь в основной директории выполните команду.

    scrapy crawl pep

Автор

Парсер PEP: k0sdm1

About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors

Languages