<strike id="6aekw"></strike>

<ul id="6aekw"></ul>

某網頁數據爬取記錄

tain335 發布于2019-07-24 18:06 / 1551人閱讀

摘要：在某網站上進行搜索，發現搜索內容明和傳遞數據密有如下關系明北京大學密明北京大密明北京密明北密我一直以為這是某種加密傳遞。知道前段時間看了編碼的相關知識，才意識到自己傻逼了。但看編碼的內容明顯不是，而應該是。

在某網站上進行搜索，發現搜索內容(明)和傳遞數據（密）有如下關系：

明：北京大學
密：789C7BDA33FDC9AE354F972C7FBA761900391708BB
明：北京大
密：789C7BDA33FDC9AE354F972C070020DF0683
明：北京
密：789C7BDA33FDC9AE35000F480453
明：北
密：789C7BDA331D0004610209

我一直以為這是某種加密傳遞。知道前段時間看了base64編碼的相關知識，才意識到自己傻逼了。但看編碼的內容明顯不是base64，而應該是base16。

用python下的base64模塊進行解碼：

import base64
>>>base64.b16decode(b"789C7BDA331D0004610209")
b"xx9c{xda3x1dx00x04ax02	"

解碼之后，還是不能明白到底是啥意思。于是google了一下"xx9c"發現這有可能使用zlib壓縮之后的結果。

>>> zlib.decompress(b"xx9c{xda3x1dx00x04ax02	")
b"xe5x8cx97"

到這里，就很明顯是一個中文的utf-8編碼。

>>> b"xe5x8cx97".decode()
"北"

剩下的事情，就是遍歷一下。哈哈哈哈………………

GPU云服務器云服務器 java網頁爬取數據爬取網頁云盾爬取網頁 python爬取網頁圖片

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/37595.html

零基礎如何學爬蟲技術

摘要：楚江數據是專業的互聯網數據技術服務，現整理出零基礎如何學爬蟲技術以供學習，。本文來源知乎作者路人甲鏈接楚江數據提供網站數據采集和爬蟲軟件定制開發服務，服務范圍涵蓋社交網絡電子商務分類信息學術研究等。楚江數據是專業的互聯網數據技術服務，現整理出零基礎如何學爬蟲技術以供學習，http://www.chujiangdata.com。第一：Python爬蟲學習系列教程（來源于某博主：htt...

KunMinX 2019-07-25 11:29 評論0 收藏0
首次公開，整理12年積累的博客收藏夾，零距離展示《收藏夾吃灰》系列博客

摘要：時間永遠都過得那么快，一晃從年注冊，到現在已經過去了年那些被我藏在收藏夾吃灰的文章，已經太多了，是時候把他們整理一下了。那是因為收藏夾太亂，橡皮擦給設置私密了，不收拾不好看呀。 ...

Harriet666 2021-09-10 10:51 評論0 收藏0
Python微型異步爬蟲框架

摘要：微型異步爬蟲框架基于的異步框架，搭建一個模塊化的微型異步爬蟲。可以對該爬蟲的布隆過濾器進行配置，安裝中間件等。回調函數整個項目的主要實現在于回調函數的使用，利用異步請求得到響應后馬上調用其請求綁定的回調函數來實現爬蟲的異步爬取。 Amipy Python微型異步爬蟲框架(A micro asynchronous Python website crawler framework) 基于...

z2xy 2019-07-31 10:03 評論0 收藏0
惡意爬蟲這樣窺探、爬取、威脅你的網站

摘要：利用這一業務邏輯，惡意爬蟲通過各類社工庫拿到一批手機號后可以在短時內驗證這批號碼是否為某一網站的注冊用戶。事前的甄別預防才是關鍵惡意爬蟲在給網站帶來可觀訪問量的同時，也帶來了難以估量的威脅和損失。整個互聯網的流量中，真人占比有多少？ 80% ？?60% ？?50% ？ showImg(https://segmentfault.com/img/bVGSra?w=350&h=346); ...

wangbjun 2019-07-25 13:49 評論0 收藏0