摘要:安裝及下載文件驗證是否正確安裝接下來,下載網上人家編譯好的文件用搜索如下文件注后為版本,我是位的版本最后測試一下安裝是否成功
在開篇之前,不得不吐槽一下,配置Scrapy是我
搞python后配置環境最久的一次了。我趕緊將四小時的配置過程寫下來,以免浪費了這些寶貴的踩坑經驗。
在安裝Scrapy之前,要先安裝相關的依賴模塊,否則無論你是手動pip安裝還是用IDE(如Pycharm自動安裝都會報錯
error: Unable to find vcvarsall.bat
因為pip無法正常的安裝一些依賴,所以我們要用wheel來安裝。
安裝wheel及下載.whl文件pip install wheel
驗證wheel是否正確安裝
接下來,下載網上人家編譯好的.whl文件
http://www.lfd.uci.edu/~gohlk...
用Ctrl + F搜索如下文件
lxml-3.7.2-cp35-cp35m-win_amd64.whl
pywin32-220.1-cp35-cp35m-win_amd64.whl
zope.interface-4.3.3-cp35-cp35m-win_amd64.whl
pyOpenSSL-16.2.0-py2.py3-none-any.whl
Twisted-16.6.0-cp35-cp35m-win_amd64.whl
Scrapy-1.3.0-py2.py3-none-any.whl
注: cp后為python版本,我是64位python3.5的版本
最后測試一下安裝是否成功
scrapy startproject myproject
文章版權歸作者所有,未經允許請勿轉載,若此文章存在違規行為,您可以聯系管理員刪除。
轉載請注明本文地址:http://specialneedsforspecialkids.com/yun/38423.html
摘要:安裝可能的問題問題解決實例教程中文教程文檔第一步創建項目目錄第二步進入創建爬蟲第三步創建存儲容器,復制項目下的重命名為第四步修改提取數據引入數據容器第五步解決百度首頁網站抓取空白問題設置設置用戶代理解決相關解決數據保存亂 pip 安裝 pip install scrapy 可能的問題: 問題/解決:error: Microsoft Visual C++ 14.0 is requi...
摘要:快速入門接上篇學習一安裝,安裝后,我們利用一個簡單的例子來熟悉如何使用創建一個爬蟲項目。創建一個項目在已配置好的環境下輸入系統將在當前目錄生成一個的項目文件。這部分才是業務的核心部分。提取的方式有幾種。具體代碼詳見入門項目 快速入門 接上篇Scrapy學習(一) 安裝,安裝后,我們利用一個簡單的例子來熟悉如何使用Scrapy創建一個爬蟲項目。 創建一個Scrapy項目 在已配置好的環境...
摘要:如果想先學習的話推薦看下基礎教學菜鳥教程這個網站的教程里面的內容還是挺不錯的非常適合小白學習好了廢話不多說開始學習如何安裝吧安裝我上篇小白爬蟲篇簡介下面的鏈接安裝包后在或者在中輸入命令過程中可能會問你是否安裝其他擴展包選按回車就好了安裝完成 如果想先學習python的話推薦看下Python基礎教學|菜鳥教程這個網站的教程,里面的內容還是挺不錯的非常適合小白學習好了廢話不多說開始學習如何...
摘要:好啦一切準備工作就緒,現在開始安裝庫安裝成功后,安裝就簡單了,在命令提示符窗口直接輸入命令回車現在一切都搞定了,可以新建一個測試,敲一個基于框架的爬蟲程序咯。 最近忽然有了想要學習python爬蟲的想法,但是首先需要安裝工具。python安裝倒是很輕松,只要傻瓜式一鍵安裝即可,但是在Windows下安裝scrapy倒不是件容易的事情。言歸正傳,說下我從昨天下午到今天上午安裝的步驟: 1...
閱讀 3769·2021-09-02 09:53
閱讀 2749·2021-07-30 14:57
閱讀 3492·2019-08-30 13:09
閱讀 1179·2019-08-29 13:25
閱讀 810·2019-08-29 12:28
閱讀 1453·2019-08-29 12:26
閱讀 1129·2019-08-28 17:58
閱讀 3305·2019-08-26 13:28