[機(jī)器學(xué)習(xí)入門] 李宏毅機(jī)器學(xué)習(xí)筆記-25(Sturctured Linear Model;結(jié)構(gòu)化預(yù)測-線性模型)

[機(jī)器學(xué)習(xí)入門] 李宏毅機(jī)器學(xué)習(xí)筆記-25(Sturctured Linear Model;結(jié)構(gòu)化預(yù)測-線性模型)

PDF VIDEO

Structured Linear Model

這里寫圖片描述

Problem 1

$\phi_1(x,y)$$\phi_2(x,y)$ $\phi_3(x,y)$ 代表一個(gè)value. 也就是說 x,y在具有特征一時(shí)的強(qiáng)度是$\phi_1(x,y)$,同理特征二、特征三。 將這組值,乘上從training data中得到的weight w1.w2,w3.

這里寫圖片描述

加入F(x,y)寫成這樣子,那么problem3就不是問題了。

這里寫圖片描述

每一個(gè)維度都是一個(gè)feature,
那么這些feature該怎么尋找呢?
train 一個(gè)CNN,把image丟進(jìn)CNN中,output一個(gè)vector就可以很好地代表里面的東西,所以可以用deep learning來抽feature。

這里寫圖片描述

example:summarization

這里寫圖片描述

example:Retrieval

這里寫圖片描述

Problem 2

Inference: How to solve the “arg max” problem
窮舉所有的y,尋找max,但我們先假裝這個(gè)問題已經(jīng)被解決了。

這里寫圖片描述

然后就有了第三個(gè)問題,希望找到一個(gè)F(x,y)

這里寫圖片描述

舉個(gè)例子來說

這里寫圖片描述

紅色的只有一個(gè),是正確的,而藍(lán)色的有千千萬萬個(gè)。

這里寫圖片描述
這里寫圖片描述

我們希望找到一個(gè)W,做到上面的每一個(gè)點(diǎn)通通與w做inner product,使所有紅星得到的值大于藍(lán)星的值,所有紅點(diǎn)得到的值,大于藍(lán)點(diǎn)的值。

這里寫圖片描述

Solution of Problem 3

并不像想象中的那么難。

Algorithm

這里寫圖片描述

example

這里寫圖片描述
這里寫圖片描述
這里寫圖片描述

得到一個(gè)新的w
還要繼續(xù)算,檢查一遍

這里寫圖片描述
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容