国产片侵犯亲女视频播放_亚洲精品二区_在线免费国产视频_欧美精品一区二区三区在线_少妇久久久_在线观看av不卡

服務器之家:專注于服務器技術及軟件下載分享
分類導航

PHP教程|ASP.NET教程|Java教程|ASP教程|編程技術|正則表達式|C/C++|IOS|C#|Swift|Android|VB|R語言|JavaScript|易語言|vb.net|

服務器之家 - 編程語言 - PHP教程 - 一個基于phpQuery的php通用采集類分享

一個基于phpQuery的php通用采集類分享

2020-06-22 14:13PHP教程網 PHP教程

這是自己以前寫的一個php的采集類,自己一直在用,自我感覺很簡單很強大,只要懂一點點選擇器的知識就可以采集任何頁面了,也支持https頁面,做簡單的采集足夠用了

一、采集類源碼

復制代碼 代碼如下:

<?php
  /**
  *通用列表采集類
  *版本V1.3
  *作者:JAE
  */
    require_once '../phpQuery/phpQuery/phpQuery.php';
    class QueryList{

        private $pageURL;
         private $regArr = array();
         public $jsonArr = array();
         private $regRange;
         private $html;
         /************************************************
         * 參數: 頁面地址 選擇器數組 塊選擇器
         * 【選擇器數組】說明:格式array("名稱"=>array("選擇器","類型"),.......)
         * 【類型】說明:值 "text" ,"html" ,"屬性"
         *【塊選擇器】:指 先按照規則 選出 幾個大塊 ,然后再分別再在塊里面 進行相關的選擇
         *************************************************/
         function QueryList($pageURL,$regArr=array(),$regRange='')
         {
             $this->pageURL = $pageURL;

             //為了能獲取https://
               $ch = curl_init();
                curl_setopt($ch, CURLOPT_URL,$this->pageURL);
                curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false);
                curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, false);
                curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
                $this->html = curl_exec($ch);
               curl_close($ch);

             if(!empty($regArr))
             {

                  $this->regArr = $regArr;
                 $this->regRange = $regRange;
                 $this->getList();
             }

         }
         function setQuery($regArr,$regRange='')
         {
             $this->jsonArr=array();
             $this->regArr = $regArr;
             $this->regRange = $regRange;
             $this->getList();
         }
        private function getList()
         {

             $hobj = phpQuery::newDocumentHTML($this->html);
             if(!empty($this->regRange))
             {
             $robj = pq($hobj)->find($this->regRange);

              $i=0;
             foreach($robj as $item)
             {

                 while(list($key,$reg_value)=each($this->regArr))
                 {
                     $iobj = pq($item)->find($reg_value[0]);

                       switch($reg_value[1])
                       {
                           case 'text':
                                 $this->jsonArr[$i][$key] = trim(pq($iobj)->text());
                                 break;
                           case 'html':
                                 $this->jsonArr[$i][$key] = trim(pq($iobj)->html());
                                 break;
                           default:
                                $this->jsonArr[$i][$key] = pq($iobj)->attr($reg_value[1]);
                                break;

                        }
                 }
                 //重置數組指針
                 reset($this->regArr);
                 $i++;
              }
             }
             else
             {
            while(list($key,$reg_value)=each($this->regArr))
             {
                $lobj = pq($hobj)->find($reg_value[0]);

                  
                   $i=0;
                   foreach($lobj as $item)
                   {
                       switch($reg_value[1])
                       {
                           case 'text':
                                 $this->jsonArr[$i++][$key] = trim(pq($item)->text());
                                 break;
                           case 'html':
                                 $this->jsonArr[$i++][$key] = trim(pq($item)->html());
                                 break;
                           default:
                                $this->jsonArr[$i++][$key] = pq($item)->attr($reg_value[1]);
                                break;

                        }

                    
                   }

       
             }
           }
         } 
         function getJSON()
         {
             return json_encode($this->jsonArr);
         }

}

 

二、使用例子

 

復制代碼 代碼如下:


<?php
require 'Query/QueryList.class.php';

 


//采集OSC的代碼分享列表,標題 鏈接 作者
$url = "http://www.oschina.net/code/list";
$reg = array("title"=>array(".code_title a:eq(0)","text"),"url"=>array(".code_title a:eq(0)","href"),"author"=>array("img","title"));
$rang = ".code_list li";
$hj = new QueryList($url,$reg,$rang);
$arr = $hj->jsonArr;
print_r($arr);
//如果還想采當前頁面右邊的 TOP40活躍貢獻者 圖像,得到JSON數據,可以這樣寫
$reg = array("portrait"=>array(".hot_top img","src"));
$hj->setQuery($reg);
$json = $hj->getJSON();
echo $json . "<hr/>";

//采OSC內容頁內容
$url = "http://www.oschina.net/code/snippet_186288_23816";
$reg = array("title"=>array(".QTitle h1","text"),"con"=>array(".Content","html"));
$hj = new QueryList($url,$reg);
$arr = $hj->jsonArr;
print_r($arr);

//就舉這么多例子吧,是不是用來做采集很方便

 

延伸 · 閱讀

精彩推薦
主站蜘蛛池模板: 亚洲精品一区二区三区在线 | 亚洲男人的天堂网站 | 国产精品久久久久久久久 | 亚洲精品久久久久久一区二区 | 日韩中文视频 | 视色影院 | 欧美激情一区二区 | 国产精品久久久久久久免费大片 | 91精品国产综合久久小仙女陆萱萱 | 国产精品美女久久久久久免费 | 亚洲一区二区免费看 | 一二三区字幕免费观看av | 日韩一区二区久久 | 性欧美精品久久久久久久 | 日韩91视频 | 亚洲精品视频在线 | 国产精品视频一二三区 | 国内精品在线视频 | 一区二区三区在线观看国产 | 中文字幕1区2区3区 亚洲欧美日韩精品久久亚洲区 | 国产一区二区三区四区 | 男女羞羞网站 | 久久亚洲欧美日韩精品专区 | 中文字幕不卡 | 久久精品一区二区三区四区 | 亚洲高清视频在线观看 | 亚洲视频免费 | 欧美在线观看成人 | 亚洲免费影院 | 久草福利在线视频 | 一区二区在线视频 | 欧美国产精品一区二区三区 | 成人一区二区三区久久精品嫩草 | 91亚洲精品乱码久久久久久蜜桃 | 99久久国语露脸精品对白 | 高清一区二区三区 | 日本精品一区二区三区在线观看视频 | 久久综合一| 伊人婷婷 | 国外精品久久久蜜桃免费全文阅读 | 久免费视频|