柚子快報激活碼778899分享：Scrapy爬蟲基礎

http://yzkb.51969.com/

第1關：Scarpy安裝與項目創(chuàng)建

任務描述 本關任務：借助Scrapy框架編寫一個最基本的爬蟲小程序，掌握Scrapy的基礎理論和使用。

相關知識 Scrapy安裝與新建項目 Windows下安裝 由于 Python 官方已經(jīng)宣布在 2020 年停止對 Python2 的支持，因此本教程的相關 Python 操作均是在 Python3 下進行的，請確保所使用的電腦上已安裝 Python3。 在 Windows 環(huán)境下，如果安裝好了 Python3 ，可以借助 pip 進行 Scrapy 進行安裝：

pip install scrapy 由于 Scrapy 依賴 Wheel、Twisted、Pillow 等第三方包，所以安裝過程中很可能會由于依賴缺失而導致安裝失敗，這時可以根據(jù)提示依次進行各依賴的安裝并最終完成 Scrapy 的安裝。

Linux/Unix下安裝 同樣的請先確保安裝了 Python3，之后需要在命令行下執(zhí)行：

pip3 install scrapy 如果出現(xiàn)類似于ModuleNotFoundError: No module named ‘twisted.persisted’ 等由于依賴缺失導致的報錯，請先使用pip install命令完成相應依賴的安裝，之后即可完成 Scrapy 的安裝。

scrapy startproject HelloWorld

cd HelloWorld

scrapy genspider world www.baidu.com

柚子快報激活碼778899分享：Scrapy爬蟲基礎

http://yzkb.51969.com/

文章來源