一、保持專(zhuān)注,自己動(dòng)腦,形成自己的想法 專(zhuān)注,對(duì)于我們大多數(shù)人而言幾乎有些奢侈。 當(dāng)我們想做一件事情時(shí),我們的注意力總是自覺(jué)不自覺(jué)被其他的事情所吸引。 手機(jī)屏幕亮了響了,忍不...
1. 引言 2. 分析 數(shù)據(jù)從mongodb中獲取 每頁(yè)顯示多少條數(shù)據(jù) 翻頁(yè)功能有前一頁(yè),顯示當(dāng)前頁(yè)和總頁(yè)數(shù),后一頁(yè) 3. 實(shí)現(xiàn) 3.1 在settings.py中增加mon...
1. 引言 2. 分析 利用pycharm搭建互不影響的虛擬工作空間 創(chuàng)建Django項(xiàng)目 創(chuàng)建相關(guān)目錄, 復(fù)制所需數(shù)據(jù)至指定目錄 新建修改django相關(guān)的屬性 修改htm...
1. 引言 2. 分析 定義生成日期的函數(shù) 篩選哪些帖子在指定日期內(nèi), 統(tǒng)計(jì)該日期內(nèi)指定區(qū)域的所有帖子 篩選哪些帖子在指定日期內(nèi), 統(tǒng)計(jì)該日期內(nèi)指定成色的所有帖子數(shù)量和總價(jià)格...
1. 引言 統(tǒng)計(jì)一天內(nèi)交易成功的商品中, 它們的城區(qū)分布是怎樣的, 然后繪制一天內(nèi)交易成功的商品中, 各城區(qū)交易量的餅圖. 2. 分析 查找某天發(fā)布的物品當(dāng)天就完成交易的 按...
1. 引言 統(tǒng)計(jì)某日發(fā)布的二手物品在隨后七天內(nèi), 交易完成時(shí)間是一天的類(lèi)目分布占比.也就是有哪些類(lèi)目當(dāng)天發(fā)布當(dāng)天就有人買(mǎi)了. 2. 分析 利用管道模型聚合數(shù)據(jù)collecti...
1. 引言 統(tǒng)計(jì)上圖這3個(gè)類(lèi)目在最近7日內(nèi), 發(fā)帖量隨時(shí)間的變化情況, 并用折線圖繪制出來(lái). 2. 分析 生成日期 統(tǒng)計(jì)各分類(lèi)發(fā)帖次數(shù) 生成圖表數(shù)據(jù) 3. 實(shí)現(xiàn) In [1]...
1. 引言 查找某個(gè)時(shí)間的數(shù)據(jù), 只顯示特定字段繪制七日內(nèi)上海城區(qū)二手物品走勢(shì)圖 2. 分析 mongodb查找數(shù)據(jù)的方法 mongodb顯示特定字段的方法 charts顯示...
1. 引言 統(tǒng)計(jì)趕集網(wǎng)-上海-二手市場(chǎng)16個(gè)大類(lèi)目的發(fā)帖量, 并在jupyter-notebook中繪制出各區(qū)域發(fā)帖量對(duì)比的柱狀圖 2. 分析 篩選重復(fù)的分類(lèi)使之唯一 分別統(tǒng)...
1. 引言 統(tǒng)計(jì)趕集網(wǎng)-上海-二手市場(chǎng)19個(gè)大類(lèi)目的發(fā)帖量, 并在jupyter-notebook中繪制出各區(qū)域發(fā)帖量對(duì)比的柱狀圖 2. 分析 先整理源數(shù)據(jù), 商品區(qū)域信息為...
1. 引言 2. 分析 分類(lèi)查找: 檢查元素, 輸入.fenlei > dt > a可以等到全部分類(lèi)鏈接Paste_Image.png 分類(lèi)列表:類(lèi)目中的個(gè)人列表頁(yè): htt...
1. 引言 程序會(huì)因?yàn)楦鞣N各樣的原因而中斷執(zhí)行, 所以要想辦法主程序在上次中斷的地方繼續(xù)執(zhí)行 2. 分析 隨時(shí)存儲(chǔ)程序執(zhí)行的狀態(tài)值, 例如程序執(zhí)行到的位置 程序再次執(zhí)行時(shí)先獲...
1. 引言 抓取58同城中的手機(jī)號(hào)類(lèi)目下所有帖子的標(biāo)題和鏈接, 并將結(jié)果存儲(chǔ)在mongodb中 取出存儲(chǔ)在mongodb中的鏈接, 獲取詳情頁(yè)中的信息 網(wǎng)址: http://...
1. 2. 分析 需要導(dǎo)入連接mongodb的庫(kù) 頁(yè)面隨著p后面的數(shù)字變化而變化 每個(gè)列表頁(yè)中有24條房源鏈接 詳情頁(yè)中的房東性別根據(jù)member_girl_ico, mem...
1. 引言 進(jìn)入58房屋出租頁(yè)面, 爬取列表頁(yè)中除了推廣房屋外的正常房屋信息 網(wǎng)址: http://sh.58.com/zufang/0/j2/pn1/ 2. 分析 推廣房屋...
1. 引言 爬取20頁(yè)美眉圖片 網(wǎng)址: http://weheartit.com/inspirations/taylorswift 2. 分析 頁(yè)面網(wǎng)址格式: http://...
1. 引言 爬取租房信息,具體要求如下 2. 分析 網(wǎng)頁(yè)地址: http://bj.xiaozhu.com/search-duanzufang-p2-0/, 頁(yè)數(shù)增加時(shí)p后的...