這幾天研究了一下php中的curl類庫,做了一個簡單的百度搜索,先上代碼
1 <div> 2 <div>百度搜索</div>
3 <form action="" method="get">
4 <input type="text" name="key">
5 <input type="submit" value="搜索">
6 </form>
7 </div>
8 <?php
9 $k = '';
10 $k = !empty($_GET['key'])?$_GET['key']:'';
11 session_start();
12 $_SESSION['key'] = $k;
13
14 $curl = curl_init();
15 // 設置你需要抓取的URL
16
17 for($i = 0;$i<2;$i++){
18 curl_setopt($curl, CURLOPT_URL, "http://www.baidu.com/s?wd={$_SESSION['key']}&pn={$i}");
19 // 設置header
20 curl_setopt($curl, CURLOPT_HEADER, 1);
21 // 設置cURL 參數，要求結果保存到字符串中還是輸出到屏幕上。
22 curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
23 // 運行cURL，請求網頁
24 $data = curl_exec($curl);
25
26 $pre = '/<h3 class="t"><a.*?href = "(.*?)".*?target="_blank".*?>(.*?)<\/a><\/h3>/s';
27 preg_match_all($pre,$data,$match);
28
29 foreach ($match[1] as $k => $v) {
30 ?>
31 <div>32 <a href="<?php echo $v;?>" target="_blank"><?php echo strip_tags($match[2][$k]);?></a>
33 </div>
34 <?php
35 }
36 }
37
38 curl_close($curl);
39
40
41 ?>
經過分析百度的搜索時的url發現有一個規律
https://www.baidu.com/s?wd=搜索的關鍵字
但是我發現使用https協議後不能夠獲得百度上的數據於是改為http://www.baidu.com?wd=搜索的關鍵字就可以啦!!
效果圖如下:
