【Python爬蟲】陽(yáng)光電影網(wǎng)爬蟲

import requests
from lxml import etree

url = 'http://www.ygdy8.com/html/gndy/china/index.html'


def get_movie_info(url):
    html = requests.get(url)
    html.encoding = 'gb2312'
    selector = etree.HTML(html.text)
    infos = selector.xpath('//div[@class="co_content8"]/ul//table')
    for info in infos:
        movie_url = 'http://www.ygdy8.com' + info.xpath('tr[2]/td[2]/b/a[2]/@href')[0]
        movie_name = info.xpath('tr[2]/td[2]/b/a[2]/text()')[0]
        print(movie_url,movie_name)
        get_download(movie_url)

def get_download(url):
    html = requests.get(url)
    html.encoding = 'gb2312'
    selector = etree.HTML(html.text)
    down_url = selector.xpath('//tbody/tr/td/a/text()')[0]
    print(down_url)

if __name__ == '__main__':
    get_movie_info('http://www.ygdy8.com/html/gndy/china/index.html')

運(yùn)行結(jié)果:

C:\ProgramData\Anaconda3\python.exe E:/pyproject/803.py
http://www.ygdy8.com/html/gndy/jddy/20170806/54698.html 2017年動(dòng)作喜劇《生化藥尸/天師救僵》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg90.dydytt.net:8204/[陽(yáng)光電影www.ygdy8.com].生化藥尸.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170806/54676.html 2017年劇情《岡仁波齊》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7024/[陽(yáng)光電影www.ygdy8.com].岡仁波齊.HD.720p.中文字幕.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170802/54643.html 2017年愛(ài)情音樂(lè)《52赫茲,我愛(ài)你》BD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7022/[陽(yáng)光電影www.ygdy8.com].52赫茲,我愛(ài)你.BD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170731/54632.html 2017年楊冪霍建華動(dòng)作科幻《逆時(shí)營(yíng)救》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7020/[陽(yáng)光電影www.ygdy8.com].逆時(shí)營(yíng)救.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170731/54631.html 2015年高分獲獎(jiǎng)動(dòng)作《師父/師傅》BD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:8020/[陽(yáng)光電影www.ygdy8.com].師父.BD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170729/54619.html 2017年劇情《同囚》BD國(guó)粵雙語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:8018/[陽(yáng)光電影www.ygdy8.com].同囚.BD.720p.國(guó)粵雙語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170729/54618.html 2017年喜劇《仙球大戰(zhàn)/蹴鞠》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8029/[陽(yáng)光電影www.ygdy8.com].仙球大戰(zhàn).HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170728/54613.html 2017年懸疑驚悚《目擊者之追兇》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7018/[陽(yáng)光電影www.ygdy8.com].目擊者之追兇.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170728/54612.html 2017年獲獎(jiǎng)劇情《我心雀躍》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8028/[陽(yáng)光電影www.ygdy8.com].我心雀躍.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170727/54605.html 2017年周冬雨張孝全愛(ài)情喜劇《指甲刀人魔》BD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:8017/[陽(yáng)光電影www.ygdy8.com].指甲刀人魔.BD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170725/54594.html 2017年黃渤徐靜蕾懸疑驚悚《記憶大師》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:8015/[無(wú)極電影-www.wujidy.com].記憶大師.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170725/54593.html 2017年動(dòng)作《無(wú)罪之城》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7015/[無(wú)極電影-www.wujidy.com].無(wú)罪之城.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170723/54575.html 2017年高分獲獎(jiǎng)劇情《一念無(wú)明》HD粵語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7012/[陽(yáng)光電影www.ygdy8.com].一念無(wú)明.HD.720p.粵語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170722/54573.html 2017年劇情《臺(tái)北物語(yǔ)》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8026/[陽(yáng)光電影www.ygdy8.com].臺(tái)北物語(yǔ).HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170721/54566.html 2017年劇情《忠愛(ài)無(wú)言/老人與狗》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8025/[陽(yáng)光電影www.ygdy8.com].忠愛(ài)無(wú)言.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170719/54549.html 2017年愛(ài)情劇情《我們停戰(zhàn)吧》BD國(guó)粵雙語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8024/[陽(yáng)光電影www.ygdy8.com].我們停戰(zhàn)吧.BD.720p.國(guó)粵雙語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170717/54533.html 2017年奇幻喜劇《美好的意外》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7008/[陽(yáng)光電影www.ygdy8.com].美好的意外.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170716/54526.html 2017年愛(ài)情喜劇《“吃吃”的愛(ài)》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8023/[陽(yáng)光電影www.ygdy8.com].“吃吃”的愛(ài).HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170711/54490.html 2017年喜劇《最后的武林》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg37.dydytt.net:8046/[陽(yáng)光電影www.ygdy8.com].最后的武林.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170711/54489.html 林子祥張曼玉張學(xué)友喜劇《富貴吉祥》HD粵語(yǔ)中字
ftp://ygdy8:ygdy8@yg37.dydytt.net:7046/[陽(yáng)光電影www.ygdy8.com].富貴吉祥.HD.720p.粵語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170708/54467.html 2017年周秀娜鄭欣宜《29+1》HD國(guó)粵雙語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8021/[陽(yáng)光電影www.ygdy8.com].29+1.HD.720p.國(guó)粵雙語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170708/54466.html 2017年愛(ài)情喜劇《臨時(shí)演員》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:7001/[陽(yáng)光電影www.ygdy8.com].臨時(shí)演員.HD.720p.國(guó)語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/jddy/20170708/54465.html 許冠杰許冠英喜劇《水滸笑傳》HD粵語(yǔ)中字
ftp://ygdy8:ygdy8@yg45.dydytt.net:8001/[陽(yáng)光電影www.ygdy8.com].水滸笑傳.HD.720p.粵語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170707/54458.html 2017年劉青云古天樂(lè)動(dòng)作《毒。誡》BD國(guó)粵雙語(yǔ)中字
ftp://ygdy8:ygdy8@yg37.dydytt.net:8044/[陽(yáng)光電影www.ygdy8.com].毒。誡.BD.720p.國(guó)粵雙語(yǔ)中字.mkv
http://www.ygdy8.com/html/gndy/dyzz/20170703/54420.html 2017年黃磊海清喜劇《麻煩家族》HD國(guó)語(yǔ)中字
ftp://ygdy8:ygdy8@yg72.dydytt.net:8017/[陽(yáng)光電影www.ygdy8.com].麻煩家族.HD.720p.國(guó)語(yǔ)中字.mkv

Process finished with exit code 0

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容