1.入門程序 爬蟲采集數(shù)據(jù),主要采集網(wǎng)站數(shù)據(jù),通常情況下操作步驟如下:1)確定目標(biāo)網(wǎng)站url地址2)對(duì)目標(biāo)url地址發(fā)送請(qǐng)求3)獲取網(wǎng)站返回的響應(yīng)數(shù)據(jù)‘4)對(duì)響應(yīng)數(shù)據(jù)進(jìn)行解析...
1.入門程序 爬蟲采集數(shù)據(jù),主要采集網(wǎng)站數(shù)據(jù),通常情況下操作步驟如下:1)確定目標(biāo)網(wǎng)站url地址2)對(duì)目標(biāo)url地址發(fā)送請(qǐng)求3)獲取網(wǎng)站返回的響應(yīng)數(shù)據(jù)‘4)對(duì)響應(yīng)數(shù)據(jù)進(jìn)行解析...
1.爬蟲概述 爬蟲又稱為網(wǎng)絡(luò)爬蟲,主要指代從互聯(lián)網(wǎng)是上進(jìn)行數(shù)據(jù)采集的腳本程序,是進(jìn)行數(shù)據(jù)分析和數(shù)據(jù)挖掘的基礎(chǔ)爬蟲首先要做的工作就是獲取網(wǎng)頁源代碼,將源代碼獲取后提取其中的信息...
1.在pycham的控制臺(tái)下載安裝Django插件:pip install django==1.11下載的是Django的1.11版本,如想安裝最新版不用在后添加版本號(hào)pip...
1.http 1)http:是互聯(lián)網(wǎng)上應(yīng)用最為廣泛的一種網(wǎng)絡(luò)協(xié)議,是一個(gè)客戶端和服務(wù)器端請(qǐng)求和應(yīng)答的標(biāo)準(zhǔn)(TCP),用于從WWW服務(wù)器傳輸超文本到本地瀏覽器的傳輸協(xié)議,它可以...
1)TCP TCP傳輸控制協(xié)議,是一種面向連接的,可靠的、基于字節(jié)流的傳輸層通信協(xié)議。 優(yōu)點(diǎn):可靠、穩(wěn)定。TCP的可靠體現(xiàn)在數(shù)據(jù)傳遞之前,會(huì)有三次握手來建立連接,在數(shù)據(jù)傳遞...
1.c/s和b/s 1)c/s c/s是client/server,即客戶端/服務(wù)端架構(gòu)優(yōu)點(diǎn): 缺點(diǎn): 2)b/s b/s是browser/server,即瀏覽器/服務(wù)器架構(gòu)...
什么是正則表達(dá)式 正則表達(dá)式,主要是通過定義正確的規(guī)則從目標(biāo)字符串中匹配符合規(guī)則的數(shù)據(jù),python語言支持正則操作,正則表達(dá)式是一種獨(dú)立的技術(shù),并不是某種編程語言所獨(dú)有的正...
Python核心開發(fā) 一.包和模塊 1. 包和模塊的定義 為了更加有好的對(duì)python代碼進(jìn)行管理,出現(xiàn)了包和模塊的概念,包和模塊的出現(xiàn)主要是為了將代碼按照不同的功能進(jìn)行整合...
1.內(nèi)存分析和處理 程序的運(yùn)行離不開對(duì)內(nèi)存的操作,一個(gè)軟件要運(yùn)行,需要將數(shù)據(jù)加載到內(nèi)存中,通過CPU進(jìn)行內(nèi)存數(shù)據(jù)的讀寫,完成數(shù)據(jù)的運(yùn)算 1.1程序內(nèi)存淺析 軟件程序在計(jì)算機(jī)中...
一.并發(fā)編程 1.并發(fā) 并發(fā):同時(shí)接到多個(gè)任務(wù),同時(shí)執(zhí)行多個(gè)任務(wù),但是具體到某一時(shí)刻,只是在執(zhí)行某一個(gè)任務(wù),只是在短時(shí)間內(nèi)在多個(gè)任務(wù)之間進(jìn)行切換,模擬形成多個(gè)任務(wù)同時(shí)執(zhí)行的現(xiàn)...
一.UDP編程 1. UDP與TCP UDP 是用戶數(shù)據(jù)報(bào)協(xié)議,是OSI/RM模型中隸屬于傳輸層的面向無連接的網(wǎng)絡(luò)數(shù)據(jù)傳輸協(xié)議。TCP傳輸控制協(xié)議,是一種面向連接的,可靠的、...
一.網(wǎng)絡(luò)編程理論基礎(chǔ) 1.網(wǎng)絡(luò) 網(wǎng)絡(luò),顧名思義就是通過點(diǎn)、線、面組成的一張連通全球的虛擬的大網(wǎng),實(shí)現(xiàn)信息資源上的共享。最早期的網(wǎng)絡(luò),是用物理線路將多臺(tái)計(jì)算機(jī)連接起來實(shí)現(xiàn)計(jì)算機(jī)...
TCP協(xié)議 協(xié)議是多方協(xié)商計(jì)議之后得出的約定、規(guī)范、準(zhǔn)則。TCP協(xié)議是一種面向連接的、可靠地、基于字節(jié)流的傳輸層通道協(xié)議,通過協(xié)議的約束,不同地域的計(jì)算機(jī)通過網(wǎng)絡(luò)完成流暢的正...
魔法方法 在python中,所有以“__"雙下劃線包起來的方法,都統(tǒng)稱為魔法方法,例如類的初始化方法init,python中所有的魔法方法均在官方文檔中有相應(yīng)描述,但是由于官...
對(duì)象:對(duì)象是人們要進(jìn)行研究的任何事物,它不僅能表示具體的事物,還能表示抽象的規(guī)則、計(jì)劃或事件。對(duì)象具有狀態(tài),一個(gè)對(duì)象用數(shù)據(jù)值來描述它的狀態(tài)。對(duì)象還有操作,用于改變對(duì)象的狀態(tài),...
python常用的組合數(shù)據(jù)類型有四種,分別是列表、元組、集合和列表,其作用是方便處理一些相似數(shù)據(jù)的處理。 列表 列表是python中提供的可以存儲(chǔ)多個(gè)數(shù)據(jù)的組合數(shù)據(jù)類型之一,...