第三周作業(yè) 爬取京東紅魔3手機(jī)評(píng)論點(diǎn)贊數(shù)等信息

import requests

import json

import pymysql

import time

conn= pymysql.connect(host='localhost',user='root',passwd='123456',db='mysql',port=3306,charset='utf8')

cursor= conn.cursor()

headers= {

'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36',

'Referer': 'https://item.jd.com/100005332346.html'

}

urls= [f'https://sclub.jd.com/comment/productPageComments.action?productId=100005332346&score=0&sortType=5&page={str(i)}&pageSize=10&isShadowSku=0&rid=0&fold=1' for iin range(0,10)]

for urlin urls:

        res= requests.get(url,headers = headers)

        json_data= json.loads(res.text)

        comments= json_data['comments']

        for commentin comments:

                content= comment['content']

                creationTime= comment['creationTime']

                productSize= comment['productSize']

                usefulVoteCount= comment['usefulVoteCount']

                cursor.execute("insert into mars_info (content, creationTime, productSize, usefulVoteCount) values(%s, %s, %s, %s)",

                (content, creationTime, productSize, usefulVoteCount))

                conn.commit()

          time.sleep(4)

conn.close()
屏幕截圖.jpg
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容