語(yǔ)義分割概述語(yǔ)義分割概述01任務(wù)語(yǔ)義分割特征和應(yīng)用場(chǎng)景02任務(wù)常用語(yǔ)義分割方法03任務(wù)學(xué)習(xí)目標(biāo)認(rèn)識(shí)什么是圖像語(yǔ)義分割掌握常見(jiàn)的語(yǔ)義分割方法

了解圖像語(yǔ)義分割的類型以及應(yīng)用場(chǎng)景掌握語(yǔ)義分割的評(píng)價(jià)準(zhǔn)則1語(yǔ)義分割概述1語(yǔ)義分割概述在圖像領(lǐng)域，語(yǔ)義指的是對(duì)圖像意思的理解。語(yǔ)義分割就是按照“語(yǔ)義”給圖像上目標(biāo)類別中的每一點(diǎn)打上一個(gè)標(biāo)簽，使得不同種類的東西在圖像上被區(qū)分開(kāi)來(lái)，可以理解成像素級(jí)別的分類任務(wù)。語(yǔ)義分割是一種典型的計(jì)算機(jī)視覺(jué)問(wèn)題，其涉及將一些原始數(shù)據(jù)（例如，平面圖像）作為輸入并將它們轉(zhuǎn)換為具有突出顯示的感興趣區(qū)域的掩模。1圖像語(yǔ)義分割概述類型語(yǔ)義分割大致可分為兩類，標(biāo)準(zhǔn)語(yǔ)義分割和實(shí)例感知語(yǔ)義分割：標(biāo)準(zhǔn)語(yǔ)義分割（standardsemanticsegmentation）也稱為全像素語(yǔ)義分割，它是將每個(gè)像素分類為屬于對(duì)象類的過(guò)程；實(shí)例感知語(yǔ)義分割（instanceawaresemanticsegmentation）是標(biāo)準(zhǔn)語(yǔ)義分割或全像素語(yǔ)義分割的子類型，它將每個(gè)像素分類為屬于對(duì)象類以及該類的實(shí)體ID。2語(yǔ)義分割特征和應(yīng)用場(chǎng)景2語(yǔ)義分割特征和應(yīng)用場(chǎng)景為了理解語(yǔ)義分割的特征，還要與其他常見(jiàn)的圖像分類技術(shù)相比較。1.圖像分類這類技術(shù)主要是識(shí)別圖像。2.目標(biāo)檢測(cè)這類技術(shù)主要是識(shí)別圖像中“有什么”和“它在哪里”。3.語(yǔ)義分割這類技術(shù)主要是識(shí)別圖像區(qū)域。語(yǔ)義分割標(biāo)記每個(gè)像素所指的含義，而不是檢測(cè)整個(gè)圖像或圖像的一部分。特征2語(yǔ)義分割特征和應(yīng)用場(chǎng)景應(yīng)用場(chǎng)景目前圖像語(yǔ)義分割的應(yīng)用場(chǎng)景主要有四大領(lǐng)域：地理信息，無(wú)人駕駛，醫(yī)療影像分析和機(jī)器人領(lǐng)域。地理信息無(wú)人駕駛醫(yī)療影像分析3常見(jiàn)語(yǔ)義分割方法3常見(jiàn)語(yǔ)義分割方法目前主流的語(yǔ)義分割網(wǎng)絡(luò)一般是遵循下采樣，上采樣，特征融合，然后重復(fù)該過(guò)程，最后經(jīng)過(guò)softmax像素分類。3常見(jiàn)語(yǔ)義分割方法語(yǔ)義分割的評(píng)價(jià)準(zhǔn)則為：像素精度（pixelaccuracy）：每一類像素正確分類的個(gè)數(shù)/每一類像素的實(shí)際個(gè)數(shù)。均像素精度（meanpixelaccuracy）：每一類像素的精度的平均值。評(píng)價(jià)準(zhǔn)則3常見(jiàn)語(yǔ)義分割方法3.平均交并比（MeanIntersectionoverUnion）：求出每一類的IOU取平均值。IOU指的是兩塊區(qū)域相交的部分（兩個(gè)部分的并集），如圖中綠色部分/總面積。這樣的評(píng)價(jià)指標(biāo)可以判斷目標(biāo)的捕獲程度（使預(yù)測(cè)標(biāo)簽與標(biāo)注盡可能重合），也可以判斷模型的精確程度（使并集盡可能重合）。4.權(quán)頻交并比（Frequency