requests是python實(shí)現(xiàn)的簡單易用的HTTP庫,使用起來比urllib簡潔很多
因?yàn)槭堑谌綆欤允褂们靶枰猚md安裝
pip install requests
如果你的網(wǎng)速不好,為了加速,可以從國內(nèi)鏡像下載。如果你用的是公司或者學(xué)校內(nèi)部的網(wǎng)絡(luò),可以設(shè)置代理
pip install requests -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com --proxy 87.254.212.121:8080
下面文章講requests的用法,非常詳細(xì),我就不再搬運(yùn)過來了。
https://www.cnblogs.com/mzc1997/p/7813801.html
下面是我用python爬取了杭州透明售房網(wǎng)的二手房掛牌數(shù)據(jù)(網(wǎng)站上首頁就有當(dāng)天的數(shù)據(jù),不知道在網(wǎng)站如何查看歷史數(shù)據(jù),知道的小伙伴們麻煩告知。)
2019-04-25:73673
代碼地址:
https://github.com/mayue615/learningPython/blob/master/catch_house_data.py