這篇主要講網(wǎng)站如何展示,以及后臺配置。所以我會主要講整個網(wǎng)站設(shè)計的思路,不會貼太多代碼,如果誰想要源碼的話,可以私信我。
后臺管理
首先我們來看后臺,整個后臺是基于 INSPINIA+前端完成的。
站點(diǎn)管理

站點(diǎn)信息編輯
主要是關(guān)注名稱以及Host,名稱是前臺顯示的名稱,而我們會根據(jù)Host來判斷當(dāng)前訪問的Url應(yīng)該顯示那個站點(diǎn)的數(shù)據(jù)。
抓取任務(wù)配置

抓取任務(wù)配置
- 來源網(wǎng)址,是指我們將要抓取的列表URL地址
- 編碼,每個網(wǎng)站的編碼可能都不一樣,所以我們通過配置來動態(tài)設(shè)置編碼,有的是UTF-8,有的是GB2312,要看具體的網(wǎng)站信息。
- XPath(列表、時間、來源、正文),這個在新聞?wù)救洪_發(fā)日志(一)—— 新聞抓取中已經(jīng)講解,這里就不復(fù)述了。
簡單的統(tǒng)計

簡單統(tǒng)計信息
這里做了每個網(wǎng)站文章總量和昨日采集量的計算,沒有做復(fù)雜的曲線圖。
前臺顯示
首頁

首頁
列表

列表頁
詳情

詳情頁