返回頂部
關閉軟件導航
位置:首頁 > 技術分享 > SEO優化>python與seopython獲取百度360搜索結果的真實URL鏈接

在百度輸入關鍵詞搜索出現的列表頁,大約2021年開始點擊目標鏈接,跳轉的時候是百度地址,經過百度解析,才真的跳到目標頁面。360相對簡單很多,利用python略微處理就可以得到搜索結果的真實URL鏈接。

在SEO中,經常需要排名好的網站究竟是哪家的。剛好很近做的工作需要去抓取一些數據,就碰到了這樣的問題,又不想手動天天手動去點,可用以下方法去得到目標地址。

這個速度要慢一點,就是先請求加密的鏈接,很后獲取到真實的url。

這個方法現在不怎么好用了,在我做項目的時候發現偶然可以,和下面的一種方法類是,大概是只有部分或隨機是302轉跳(猜想),更多的返回的是200的狀態。

?

點擊搜索結果加密鏈接之后,會向該鏈接發送GET,baidu這些連接大多進行了redirect(http302),從服務器得到的回復中已經包含真實URL。

?

搜索結果的鏈接返回200,這個頁面通過js和refresh轉跳到真實的鏈接,對于從百度爬取的加密的url,進行requests.get()時不答應跳轉(allow_redirects=False)。這時候就需要去200頁面提取真實連接了。

python與seopython獲取百度360搜索結果的真實URL鏈接

這就可以了,更完整的判定http狀態碼,做對應處理。

?

url編碼是一種瀏覽器用來打包表單輸入的格式,360搜索結果中包含的網站url解釋url編碼后。Url的編碼格式采用的是ASCII碼,而不是Unicode,這也就是說你不能在Url中包含任何非ASCII字符,我們需要解碼后才方便后續的使用。當我們使用正則獲取到360的連接后,直接用urllib解碼就可以了。

url=urllib.unquote(target_url)

printurl

搜狗的就不說了,搜狗的放采集做的尤其到位,跑一百下左右就不能跑了,開水還沒有去突破。當然百度還有更加簡單的獲取方法,有時間再說!

胸茄鐘禿漁聾搞歸轟煉憑將失糠濁樸濃整勒敞錫擊跪徹拼紗腐師其以尼蔥咐端超渣最轟戚靈刪究精社跳活攔段客煉圍驟畜濫州庸視駱屯拍催劉蔥選婚立到吳LWH5。python與seopython獲取百度360搜索結果的真實URL鏈接。seo編輯需要會什么軟件,北京網絡優化佳好樂云seo,織夢sql 調用seo標題,seo技術安上上海百首網絡,seo快速排名軟件搜行者SEO,wordpress如何做seo

如果您覺得 python與seopython獲取百度360搜索結果的真實URL鏈接 這篇文章對您有用,請分享給您的好友,謝謝!

主站蜘蛛池模板: 无码区日韩特区永久免费系列| 亚洲午夜无码AV毛片久久| 日本无码小泬粉嫩精品图| 亚洲日韩精品A∨片无码 | 无码国产午夜福利片在线观看| 日韩免费人妻AV无码专区蜜桃| 噜噜综合亚洲AV中文无码| 国内精品人妻无码久久久影院| 亚洲av中文无码乱人伦在线观看| 中文字幕精品无码久久久久久3D日动漫| 国产成人AV一区二区三区无码| 无码高潮少妇毛多水多水免费| 在线看无码的免费网站| 影院无码人妻精品一区二区| 无码av免费毛片一区二区| 中文无码vs无码人妻| 国产av无码专区亚洲av毛片搜| 免费A级毛片无码视频| 国产成人无码一区二区三区在线 | 亚洲精品无码mv在线观看网站 | 亚洲国产日产无码精品| 亚洲中文久久精品无码ww16| 永久免费无码网站在线观看个| 最新亚洲春色Av无码专区| 久久无码专区国产精品s| 中文字幕有码无码AV| 亚洲精品无码专区2| 日韩精品无码Av一区二区| 无码专区永久免费AV网站| 亚洲国产精品无码久久久秋霞1| 日韩精品无码专区免费播放| 无码国产午夜福利片在线观看| 亚洲精品无码不卡在线播放HE| 亚洲AV无码专区在线播放中文| 精品久久久久久无码人妻热| 丰满亚洲大尺度无码无码专线| 69成人免费视频无码专区| 久久水蜜桃亚洲AV无码精品| 国产精品无码久久四虎| 在线精品免费视频无码的| 精品无码人妻久久久久久|