返回頂部
關閉軟件導航
位置:首頁 > 資訊 > 電商資訊>python抓取京東商城手機列表url實例代碼
python抓取京東商城手機列表url實例代碼

代碼如下:

#-*-coding:UTF-8-*-

”’

Createdon2021-12-5

python抓取京東商城手機列表url實例代碼1

@author:good-temper

”’

importurllib2

importbs4

importtime

defgetPage(urlStr):

”’

獲取頁面內容

”’

content=urllib2.urlopen(urlStr).read()

returncontent

defgetNextPageUrl(currPageNum):

#頁碼-1-1-72-4137-33.html

url=u’‘+str(currPageNum+1)+’-1-1-72-4137-33.html’

#是否有下一頁

content=getPage(url);

soup=bs4.BeautifulSoup(content)

list=soup.findAll(‘span’,{‘class’:’next-disabled’});

if(len(list)==0):

returnurl

return”

defanalyzeList():

pageNum=0

list=[]

url=getNextPageUrl(pageNum)

whileurl!=”:

soup=bs4.BeautifulSoup(getPage(url))

pagelist=soup.findAll(‘div’,{‘class’:’p-name’})

foreleminpagelist:

soup1=bs4.BeautifulSoup(str(elem))

list.append(soup1.find(‘a’)[‘href’])

pageNum=pageNum+1

printpageNum

url=getNextPageUrl(pageNum)

returnlist

python抓取京東商城手機列表url實例代碼2

defanalyzeContent(url):

return”

defwriteToFile(list,path):

f=open(path,‘a’)

foreleminlist:

f.write(elem+’

’)

f.close()

if__name__==‘__main__’:

list=analyzeList()

python抓取京東商城手機列表url實例代碼3

print‘共抓取’+str(len(list))+’條

writeToFile(list,u’E:\\jd_phone_list.dat’);

轉載請注明:seo-網站優(yōu)化-網站建設?python抓取京東商城手機列表url實例代碼

如果您覺得 python抓取京東商城手機列表url實例代碼 這篇文章對您有用,請分享給您的好友,謝謝
文章地址:http://www.meyanliao.com/article/online/12705.html
解放雙手無盡可能,有問題添加天線貓微信
主站蜘蛛池模板: 亚洲av无码片在线观看| 国产精品ⅴ无码大片在线看| 国产成人无码一区二区在线播放 | 久久久久亚洲AV成人无码| 无码人妻久久久一区二区三区 | 人妻无码一区二区三区四区| 日韩人妻无码精品专区| 精品无码久久久久国产| 国产av无码专区亚洲国产精品| 小13箩利洗澡无码视频网站| 亚洲av无码成人精品区在线播放 | 欧洲黑大粗无码免费| 亚洲av无码不卡| 亚洲精品97久久中文字幕无码| 色窝窝无码一区二区三区 | 无码少妇一区二区三区浪潮AV | 亚洲精品无码国产| YW尤物AV无码国产在线观看| 亚洲人av高清无码| 特级无码毛片免费视频尤物| 日韩精品无码一区二区三区四区| 精品久久亚洲中文无码| 人禽无码视频在线观看| 亚洲国产精品无码久久一线| 久久久久亚洲精品无码网址 | 18禁无遮挡无码国产免费网站| 国产AV无码专区亚洲AV漫画 | 精品国产v无码大片在线观看| 亚洲精品无码专区在线在线播放| 久久久久亚洲?V成人无码| 国产乱子伦精品免费无码专区| 亚洲精品久久无码| 爆乳无码AV一区二区三区| 亚洲中文字幕无码久久| 亚洲熟妇无码一区二区三区| 熟妇人妻无码xxx视频| 亚洲精品无码日韩国产不卡av| 亚洲成a∨人片在无码2023| 日韩精品成人无码专区免费| 97无码免费人妻超级碰碰碰碰 | 久久无码av三级|