天天躁日日躁狠狠躁AV麻豆-天天躁人人躁人人躁狂躁-天天澡夜夜澡人人澡-天天影视香色欲综合网-国产成人女人在线视频观看-国产成人女人视频在线观看

PHP CURL獲取cookies模擬登錄的方法

要提取google搜索的部分數據,發現google對于軟件抓取它的數據屏蔽的厲害,以前偽造下 USER-AGENT 就可以抓數據,但是現在卻不行了。利用抓包數據發現,Google 判斷了 cookies,當你沒有cookies的時候,直接返回 302 跳轉,而且是連續幾十個302跳轉,根本抓不了數據。
因此,在發送搜索命令時,需要先提取 cookies 并保存,然后利用保存下來的這個cookies再次發送搜索命令即可正常抓數據了。這其實和論壇的模擬登錄一個道理,先POST登錄,獲取cookies并保存,然后利用這個cookies訪問就可以了。
php 代碼如下:
復制代碼 代碼如下:
<?php
header('Content-Type: text/html; charset=utf-8');

$cookie_file = dirname(__FILE__).'/cookie.txt';
//$cookie_file = tempnam("tmp","cookie");

//先獲取cookies并保存
$url = "http://www.google.com.hk";
$ch = curl_init($url); //初始化
curl_setopt($ch, CURLOPT_HEADER, 0); //不返回header部分
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); //返回字符串,而非直接輸出
curl_setopt($ch, CURLOPT_COOKIEJAR,  $cookie_file); //存儲cookies
curl_exec($ch);
curl_close($ch);

//使用上面保存的cookies再次訪問
$url = "http://www.google.com.hk/search?oe=utf8&ie=utf8&source=uds&hl=zh-CN&q=qq";
$ch = curl_init($url);
curl_setopt($ch, CURLOPT_HEADER, 0);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_file); //使用上面獲取的cookies
$response = curl_exec($ch);
curl_close($ch);

echo $response;
?>

php技術PHP CURL獲取cookies模擬登錄的方法,轉載需保留來源!

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時間聯系我們修改或刪除,多謝。

主站蜘蛛池模板: 色爱区综合激情五月综合激情 | 黑人干日本美女 | 99久久免费精品国产 | 最新 国产 精品 精品 视频 | YY8090福利午夜理论片 | 国产中文视频无码成人精品 | 中文文字幕文字幕亚洲色 | 久久秋霞理论电影 | 亚洲国产在线播放在线 | 国产露脸150部国语对白 | 成人网18免费韩国 | 国产最猛性XXXX69交 | 国产欧美日韩网站 | gayxxxxgay呻吟受日本 | 小sao货水好多真紧h的视频 | CHINA篮球体育飞机2023 | 2019午夜福利757视频第12集 | xart欧美一区在线播放 | 亚洲国产在线精品第二剧情不卡 | 欧美高清videos 360p | 蜜臀AV精品一区二区三区 | 九九电影伦理片 | 3d在线看小舞被躁视频 | 久久亚洲精品AV成人无 | 亚洲 欧美 日韩 国产 视频 | 99视频精品全部 国产 | 国产乱码精品一区二区三区四川 | Zoofilivideo人馿交 | 日日夜夜国产 | 国产午夜精品久久久久婷婷 | 久久这里只精品国产99re66 | 精品欧美小视频在线观看 | 日日碰狠狠添天天爽 | 国产真实强被迫伦姧女在线观看 | 国产视频成人 | 骚妇BB双飞插 | 真实国产熟睡乱子伦对白无套 | 2018久久视频在线视频观看 | 欧美囗交xx bbb视频 | 羞羞麻豆国产精品1区2区3区 | 最近的中文字幕免费完整 |