Как установить Scrapy на MacOS?

В этой статье мы узнаем, как установить Scrapy в Python на MacOS.

Scrapy — это быстрый высокоуровневый фреймворк для сканирования и парсинга веб-страниц, используемый для сканирования веб-сайтов и извлечения структурированных данных с их страниц. Его можно использовать для самых разных целей, от интеллектуального анализа данных до мониторинга и автоматизированного тестирования.

Монтаж:

Способ 1: использование pipto для установки Scrapy

Выполните следующие шаги, чтобы установить пакет SCrapy на macOS с помощью pip:

Шаг 1. Установите последнюю версию Python3 в MacOS.

Шаг 2: Проверьте правильность установки pip3 и python3.

python3 --version
pip3 --version

Шаг 3: Обновите ваш pip, чтобы избежать ошибок во время установки.

pip3 install --upgrade pip

Шаг 4: Введите следующую команду, чтобы установить Scrapy с помощью pip3.

pip3 install Scrapy

Способ 2: использование setup.py для установки Scrapy

Выполните следующие шаги, чтобы установить пакет Scrapy на macOS с помощью файла setup.py:

Шаг 1: Загрузите последний исходный пакет Scrapy для python3 отсюда.

curl https://files.pythonhosted.org/packages/e9/dc/b2f41d802f548fba35c2d7c443ab0ab3df358eebd261f4d30d19ad39658a/Scrapy-2.5.0.tar.gz > scrapy.tar.gz

Шаг 2: Извлеките загруженный пакет с помощью следующей команды.

tar -xzvf scrapy.tar.gz

Шаг 3: Войдите в папку и введите следующую команду, чтобы установить пакет.

Примечание. В вашей системе должны быть установлены инструменты разработчика для XCode MacOS.

cd Scrapy-2.5.0
python3 setup.py install

Проверка установки Scrapy на macOS:

Сделайте следующий импорт в вашем терминале Python, чтобы убедиться, что установка была выполнена правильно:

import scrapy

Если при импорте модуля возникает ошибка, значит он установлен неправильно.