決策樹算法簡(jiǎn)介 決策樹屬于經(jīng)典的十大數(shù)據(jù)挖掘算法之一，是一種類似于流程圖的樹結(jié)構(gòu)，其規(guī)則就是IF...THEN...的思想，可以用于數(shù)值型因變量的預(yù)測(cè)和離散型因變量的分類。 ...
發(fā)簡(jiǎn)信
IP屬地：吉林
-
決策樹-1
-
邏輯回歸-1-邏輯回歸簡(jiǎn)介
Logistic回歸模型 一、Logistic回歸模型構(gòu)建以及求解參數(shù) 1.1、背景知識(shí) 在實(shí)際的數(shù)據(jù)挖掘中，站在預(yù)測(cè)類問(wèn)題的角度來(lái)看，除了需要預(yù)測(cè)連續(xù)型的因變量，還需要預(yù)判...
-
梯度下降-1-梯度下降簡(jiǎn)介梯度下降簡(jiǎn)介 [toc] 1、機(jī)器學(xué)習(xí)方法論 通過(guò)一段時(shí)間的學(xué)習(xí)，可以做一個(gè)大體的概括，即： 機(jī)器學(xué)習(xí)就是需找一種函數(shù)f(x)并進(jìn)行優(yōu)化， 且這種函數(shù)能夠做預(yù)測(cè)、分類、生成等...
-
線性回歸-2-簡(jiǎn)單線性回歸的代碼實(shí)現(xiàn)上篇文章簡(jiǎn)單介紹了簡(jiǎn)單線性回歸，并從數(shù)學(xué)角度加以理解，本篇文章使用python實(shí)現(xiàn)一個(gè)簡(jiǎn)單的線性回歸小例子。 1、簡(jiǎn)單線性回歸算法的實(shí)現(xiàn) 1.1、數(shù)據(jù)源引入 首先引入一個(gè)數(shù)據(jù)...
-
自建博客系列之前言本文是我注冊(cè)簡(jiǎn)書后的第一篇文章，具有其自身的特殊性和重要性，但是我還是準(zhǔn)備以碎碎念的形式來(lái)記錄。 最早使用的博客是新浪博客，可內(nèi)容大多是轉(zhuǎn)帖，偶爾發(fā)一兩篇，更多有知識(shí)中轉(zhuǎn)站的...
-
線性回歸-1-線性回歸入門一、線性回歸概述 I‘m Linear Regression, One of the most important mathematical models and Mothe...
-
特征工程-1-數(shù)據(jù)預(yù)處理0、前言 數(shù)據(jù)和特征決定了機(jī)器學(xué)習(xí)的上限，而模型和算法只是逼近這個(gè)上限而已。 由此可見，特征工程在機(jī)器學(xué)習(xí)中占有相當(dāng)重要的地位。在實(shí)際應(yīng)用當(dāng)中，可以說(shuō)特征工程是機(jī)器學(xué)習(xí)成功的...
-
KNN算法-5-KNN算法總結(jié)
KNN的優(yōu)點(diǎn) 1、KNN算法是一個(gè)非常簡(jiǎn)單的算法，理論成熟，思想簡(jiǎn)單，既可以用來(lái)做分類也可以用來(lái)做回歸 2、天然解決多分類問(wèn)題，也可用于回歸問(wèn)題 3、和樸素貝葉斯之類的算法比...
-
KNN算法-4-算法優(yōu)化-KD樹KD樹 KNN算法的重要步驟是對(duì)所有的實(shí)例點(diǎn)進(jìn)行快速k近鄰搜索。如果采用線性掃描（linear scan），要計(jì)算輸入點(diǎn)與每一個(gè)點(diǎn)的距離，時(shí)間復(fù)雜度非常高。因此在查詢操作時(shí)，...
-
機(jī)器學(xué)習(xí)基礎(chǔ)-如何評(píng)價(jià)分類結(jié)果的優(yōu)劣？
How to measure the quality of classification results？ 在剛接觸機(jī)器學(xué)習(xí)的時(shí)候，我們可以自己動(dòng)手完成一個(gè)簡(jiǎn)單的KNN算法，...
-
自給自足，完全手寫一個(gè)樸素貝葉斯分類器，完成文本分類
Part 1: 本文解決的問(wèn)題: 我在有這樣的一個(gè)數(shù)據(jù)集，里面存放了人們對(duì)近期播放電影的評(píng)價(jià)，當(dāng)然評(píng)價(jià)也就分成兩部分，好評(píng)和差評(píng)。我們想利用這些數(shù)據(jù)訓(xùn)練一個(gè)模型，然后可以自動(dòng)...
-
-
KNN算法-2-使用Python實(shí)現(xiàn)KNN算法
使用Python完成一個(gè)簡(jiǎn)單的KNN算法 1、數(shù)據(jù)準(zhǔn)備 推薦大家關(guān)注一位大佬的公眾號(hào)：木東居士 本篇文章來(lái)自：https://mp.weixin.qq.com/s?__biz...
-
KNN算法-1-KNN簡(jiǎn)介KNN入門 1、KNN簡(jiǎn)介 kNN(k-NearestNeighbor)，也就是k最近鄰算法，這是一種有監(jiān)督的學(xué)習(xí)算法，該算法既可以針對(duì)離散因變量做分類，又可以對(duì)連續(xù)因變量做...