環境
OS: Windows 7
python: 3.5.4
python: 3.5.4
pythonのscrapyとはwebサイトのクローリングやスクレイピングを行うための フレームワークです。
今回はwindows環境のpythonにscrapyをインストールする手順をメモしました。
必要な環境の準備
scrapyをwindowsにインストールするにあたって以下のソフトウェアが必要になります。・ .net framework 4.5.1 以上
・ Visual Studio C++ Build Tools
・ Python for Windows Extensions
Visual Studio の前提条件として.net freamworkが必要になるので 先に.net freamworkをインストール後VisualStudioのインストールを行います。
それぞれのソフトは以下よりダウンロードできます。
■ .net freamwork 4.5.1
■ Visual Studio C++ Build Tools
2018.6.7
以前紹介していたリンクから「Visual Studio C++ Build Tools」がダウンロードできなくなっていたのでmicrosoftへの直接リンクを記載しました。
以前紹介していたリンクから「Visual Studio C++ Build Tools」がダウンロードできなくなっていたのでmicrosoftへの直接リンクを記載しました。
■ Python for Windows Extensions
OLD project page for the Python extensions for Windows
scrapyのインストール
コマンドラインより以下のコマンドを実行します。
> pip install scrapy
インストールの確認
コマンドラインより以下のコマンドを実行してバージョンが表示されればScrapyのインストール成功です。
> scrapy version
Scrapy 1.4.0
Scrapy 1.4.0