Goutte基本用法

supernavy 發布于2019-06-27 15:58 / 710人閱讀

摘要：基本用法最近工作上用到爬蟲框架號稱是上最好用的爬蟲框架。這里記下自己用到過的使用技巧，免得下次使用的時候再摸索。

Goutte基本用法

最近工作上用到PHP爬蟲框架Goutte(號稱是PHP上最好用的爬蟲框架)。這里記下自己用到過的使用技巧，免得下次使用的時候再摸索。

table相關

html: 
      
   國內高匿代理IP
      更多

  
    國家
    代理IP地址
    端口
    服務器地址
    是否匿名
    類型
          存活時間
    驗證時間
  
  
  
    
    175.155.24.112
    808
    四川德陽
    高匿
    HTTP
      3小時
    1分鐘前
  
 
 
php: 
1.解析出td的內容
$crawler->filter("table#ip_list > tr")->each(function (Crawler $node, $i) {
            $ip = $node->filter("td")->each(function(Crawler $node_ip, $node_ip_num){
            $text = trim($node_ip->text());
            if (empty($text) && $node_ip_num > 0 && !empty(trim($node_ip->html()))) {
                $text = $node_ip->filter("div")->attr("title");
            }
            return $text;
            });
            return $ip;
        });
    }

2.按位置匹配td標簽
$td = $crawler->filter(‘td’)->eq(1)->text();

國內高匿代理IP 更多
國家	代理IP地址	端口	服務器地址	是否匿名	類型	存活時間	驗證時間
	175.155.24.112	808	四川德陽	高匿	HTTP	3小時	1分鐘前

匹配兩個class

html : 
php  : $crawler->filter(‘div.class1.class1’);

匹配id

html : 
php  : $crawler->filter(‘div#hello’);

圖片

html : 
php  : $crawler->filter(‘img’)->attr(‘src’);

內嵌html

這個我常用來檢測匹配規則是否正確

html : Helloworld
php  : $crawler->filter(‘catchMeIfYouCan’)->html();

部分原創，部分參考了這篇博客

云服務器 GPU云服務器基本用法 JSTL基本用法 Goutte 嵌套用法

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/22662.html

Goutte基本用法

摘要：基本用法最近工作上用到爬蟲框架號稱是上最好用的爬蟲框架。這里記下自己用到過的使用技巧，免得下次使用的時候再摸索。 Goutte基本用法最近工作上用到PHP爬蟲框架Goutte(號稱是PHP上最好用的爬蟲框架)。這里記下自己用到過的使用技巧，免得下次使用的時候再摸索。 table相關 html: 國內高匿代理IP 更多國家代...

?xiaoxiao, 2019-08-01 16:36 評論0 收藏0
PHP 開發者應了解的 24 個庫

摘要：下面是一個例子這個庫要求你至少安裝了和其中的一個，這可能意味著，在大多數主機提供商提供的主機上它可能用不了。借助它，你可以忘記如何書寫乏味的有一個姊妹庫叫，是一個基于的實現。 showImg(http://segmentfault.com/img/bVbJml); 作為一個PHP開發者，現在是一個令人激動的時刻。每天有許許多多有用的庫分發出來，在 Github 上很容易發現和使用這些庫...

0x584a 2019-06-27 10:31 評論0 收藏0
SVG基礎教程(超級詳細)

摘要：光滑三次貝塞爾曲線指令跟在指令或指令后面補刀，它會自動在基礎上生成一個對稱點，所以指令只需要兩個點就可以。二次貝塞爾曲線是控制點，表示的是曲線的終點。一、內置圖形: rect(矩形) circle(圓) ellipse(橢圓) line(直線) polyline(折線) polygon(多邊形) path(路徑) 二、內置圖形的html屬性或(css樣...

張憲坤 2019-08-21 17:42 評論0 收藏0
深入理解 Laravel Eloquent（一）——基本概念及用法

摘要：原文發表在我的個人網站深入理解一基本概念及用法在本系列文章中，我將跟大家一起學習的基本用法，探索的各種高級功能，理解背后的運行原理，并最終達到深入理解靈活使用的目的。下一步深入理解二中間操作流原文發表在我的個人網站：深入理解 Laravel Eloquent（一）——基本概念及用法在本系列文章中，我將跟大家一起學習 Eloquent 的基本用法，探索 Eloquent 的各種...

Edison 2019-07-01 14:14 評論0 收藏0