一、典型的學(xué)習(xí)任務(wù)包括：

分類（classification）

回歸（regression）

聚類（clustering）

排序（ranking）

密度估計(jì)（density estimation）

特征降維（dimensionality reduction）

… …

1.1分類（classification）

基于已知類別標(biāo)簽的樣本構(gòu)成的訓(xùn)練集，學(xué)習(xí)預(yù)測(cè)模型；最終預(yù)測(cè)模型，對(duì)新的觀測(cè)樣本，預(yù)測(cè)相應(yīng)的輸出；預(yù)測(cè)結(jié)果為事先指定的兩個(gè)或多個(gè)類別中的某一個(gè)，或預(yù)測(cè)結(jié)果來自數(shù)目有限的離散值之一。

兩類別 vs.多類別

類別數(shù)C=2， 兩類別分類（binary classification）

類別數(shù)C》2， 多類別分類（multiclass classification）

3.2回歸（regression）

回歸分析基于已知答案的樣本構(gòu)成的訓(xùn)練集，估計(jì)自變量與因變量之間關(guān)系的統(tǒng)計(jì)過程，進(jìn)而基于該關(guān)系對(duì)新的觀測(cè)產(chǎn)生的輸出進(jìn)行預(yù)測(cè)，預(yù)測(cè)輸出為連續(xù)的實(shí)數(shù)值

3.3 聚類（clustering）

對(duì)給定的數(shù)據(jù)集進(jìn)行劃分，得到若干“簇”；使得“簇內(nèi)”樣本之間較“簇間”樣本之間更為相似。通過聚類得到的可能各簇對(duì)應(yīng)一些潛在的概念結(jié)構(gòu)，聚類是自動(dòng)為給定的樣本賦予標(biāo)記的過程。

聚類舉例

1.4特征降維

將初始的數(shù)據(jù)高維表示轉(zhuǎn)化為關(guān)于樣本的低維表示，借助由高維輸入空間向低維空間的映射，來簡化輸入。

– 特征提取，如PCA–高維數(shù)據(jù)的低維可視化