百度貼吧爬蟲node+vue baidu_tieba_crawler

sf190404 發布于2019-08-22 10:49 / 2185人閱讀

baidu_tieba_crawler 演示地址

http://www.femirror.com/index
服務器很慢，請原諒

使用說明書

！！！爬蟲類的東東還是友善使用

程序運行不起來就要檢查下以下接口是否替換

~ 代理的api接口 ?mongo地址 socket地址

先說下目錄結構

├─model ? ? ? ? ? ?  mongooes 模型 ?Scheme
│  ├─model.js ? ? ? ?定義了數據庫模型 
├─server ? ? ? ? ? ? 運行socket 和 api的服務端代碼
│  ├─api.js          express路由生成的 restful api
│  ├─api_action.js   api.js 會調用我的函數 
│  ├─cp.js           socket.js會通過child_process調用我 我只運行在子進程里
├─fe                 vue-cli 生成的 Webpack 打包工具 便于調試。
│  │  ├─src          其他沒什么好介紹的了

真·調試

node socket.js //運行restful api 和socket服務
cd fe && npm run dev   //運行調試模式

關于技術棧

用到的東西挺多的，但是都是用了點皮毛知識,提前踩坑。

前端的

vue大禮包(vue-resource vue-router vue-socket.id element-ui)

后端的

express socket.io superagent cheerio mongoose

數據庫

mongo

GPU云服務器云服務器百度爬蟲 baidu_tieba_crawler Vue_Vue Vue

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/91336.html

[面試專題]一線互聯網大廠面試總結

摘要：道阻且長啊前端面試總結前端面試筆試面試騰訊一面瀏覽器工作原理瀏覽器的主要組件包括用戶界面包括地址欄后退前進按鈕書簽目錄瀏覽器引擎用來查詢及操作渲染引擎的接口渲染引擎渲染界面和是基于兩種渲染引擎構建的，使用自主研發的渲染引擎，和都使用網絡用來道阻且長啊TAT(前端面試總結) 前端面試筆試面試騰訊一面 1.瀏覽器工作原理瀏覽器的主要組件包括：用戶界面－包括地址欄、后退/前...

lemanli 2019-08-02 15:57 評論0 收藏0
[面試專題]一線互聯網大廠面試總結

摘要：道阻且長啊前端面試總結前端面試筆試面試騰訊一面瀏覽器工作原理瀏覽器的主要組件包括用戶界面包括地址欄后退前進按鈕書簽目錄瀏覽器引擎用來查詢及操作渲染引擎的接口渲染引擎渲染界面和是基于兩種渲染引擎構建的，使用自主研發的渲染引擎，和都使用網絡用來道阻且長啊TAT(前端面試總結) 前端面試筆試面試騰訊一面 1.瀏覽器工作原理瀏覽器的主要組件包括：用戶界面－包括地址欄、后退/前...

xfee 2019-08-21 11:53 評論0 收藏0
[面試專題]一線互聯網大廠面試總結

摘要：道阻且長啊前端面試總結前端面試筆試面試騰訊一面瀏覽器工作原理瀏覽器的主要組件包括用戶界面包括地址欄后退前進按鈕書簽目錄瀏覽器引擎用來查詢及操作渲染引擎的接口渲染引擎渲染界面和是基于兩種渲染引擎構建的，使用自主研發的渲染引擎，和都使用網絡用來道阻且長啊TAT(前端面試總結) 前端面試筆試面試騰訊一面 1.瀏覽器工作原理瀏覽器的主要組件包括：用戶界面－包括地址欄、后退/前...

leap_frog 2019-08-29 13:08 評論0 收藏0
React 服務端渲染完美的解決方案

摘要：服務端渲染兩種方式根據上文介紹對服務端渲染利弊有所了解，我們可以根據利弊權衡取舍，最近在做服務端渲染的項目，找到多種服務端渲染解決方案，大致分為兩類。第一種方式傳統方式服務端渲染，解決用戶體驗和更好的，有諸多工具使用這種方式如的的等。最近在開發一個服務端渲染工具，通過一篇小文大致介紹下服務端渲染，和服務端渲染的方式方法。在此文后面有兩中服務端渲染方式的構思，根據你對服務端渲染的利弊權...

DesGemini 2019-08-23 14:02 評論0 收藏0