前途未定，憂之。幾日看某牛牛好友在玩簡書，遂亦有心投入。

? ? ? ?這幾天再看利用python進行數(shù)據(jù)分析。雖然python我也才學(xué)習(xí)了一個月，但是一直苦于沒有一個實戰(zhàn)去做一個項目?，F(xiàn)在有了這個機會，肯定好好把握下。

? ? ? ?下面應(yīng)該貼比較多大神的筆記，以記錄自己的學(xué)習(xí)過程，給自己鼓舞，同時，也供其他學(xué)習(xí)的同學(xué)一起學(xué)習(xí)。

使用pandas進行數(shù)據(jù)清洗

目錄：

數(shù)據(jù)表中的重復(fù)值

duplicated() ：找出重復(fù)數(shù)據(jù)

drop_duplicated()：刪除重復(fù)數(shù)據(jù)

數(shù)據(jù)表中的空值/缺失值

isnull()、notnull() ：都為找到空值，前一個有就是True，后一個沒有為True

dropna() ? ? ：將每列中的空格直接除去

fillna() ? ? ? ? ：將指定列的空格補上你想要的數(shù)

數(shù)據(jù)間的空格

查看數(shù)據(jù)中的空格：value_counts()

去除數(shù)據(jù)中的空格:map(str.strip)

大小寫轉(zhuǎn)換:map(str.upper):轉(zhuǎn)成大寫

? ? ? ? ? ? ? ? ? ?map(str.lower)：轉(zhuǎn)成小寫

? ? ? ? ? ? ? ? ? ?map(str.title)：首字母大寫

數(shù)據(jù)中的異常和極端值

replace()：異常值替換

更改數(shù)據(jù)格式

astype()：更改數(shù)據(jù)格式

to_datetime()：日期格式的數(shù)據(jù)更改

數(shù)據(jù)分組

cut()：對數(shù)據(jù)進行分組并將分組后的名稱添加到數(shù)據(jù)表

數(shù)據(jù)分列

split()數(shù)據(jù)分列操作

數(shù)據(jù)為何要清洗：因為得到的數(shù)據(jù)大都有重復(fù)，缺損等狀況，所以我們想從這堆數(shù)據(jù)里面找到有用信息就必須要對數(shù)據(jù)進行相關(guān)處理，這就是清洗。