最近，NEC開發(fā)出多種物體識別技術(shù)，可大幅提升超市和便利店等零售商結(jié)算時的商品識別效率，可對包括生鮮食品、日配品和包裝成品等在內(nèi)的所有零售商品進(jìn)行圖像識別。本技術(shù)將為零售店鋪實(shí)現(xiàn)無人化結(jié)算作出巨大的貢獻(xiàn)。

本技術(shù)結(jié)合不同特性的深度學(xué)習(xí)技術(shù)和特征點(diǎn)匹配技術(shù)，對各種不同的零售商品進(jìn)行高精度識別，既包括生鮮食品之類個體外觀差異大的物品，也包括包裝成品之類相似設(shè)計(jì)大量存在的流水線產(chǎn)品。而且即使這些商品混雜堆放，也能一次性精準(zhǔn)識別所有商品。

NEC商品畫像識別示意圖

近年來，隨著圖像識別技術(shù)的不斷發(fā)展，利用攝像頭識別零售商品的圖像識別方式使得零售店鋪結(jié)算在節(jié)省人力及無人化方面不斷進(jìn)步。但是，由于生鮮食品和包裝成品的特點(diǎn)不同，以往的圖像識別技術(shù)很難對各式各樣的商品統(tǒng)一進(jìn)行識別。此外，為了一次性準(zhǔn)確識別這些商品，需要將商品整齊擺放，會增加使用者的負(fù)擔(dān)。

通過此次NEC最新研發(fā)的技術(shù)，無需再逐個讀取條形碼和RFID電子標(biāo)簽，只需將商品放置到收銀臺上這一簡單的操作，即可一次性識別所有商品，大幅提升了結(jié)算時商品的讀取效率。

NEC積極致力于在全球范圍內(nèi)推進(jìn)“社會解決方案事業(yè)”，創(chuàng)造安全、安心、高效、公平的社會價值。將先進(jìn)的ICT技術(shù)與知識相融合，為實(shí)現(xiàn)更加光明、更加豐富多彩的高效社會盡一份力量。

【背景】

近年來，零售行業(yè)勞動力不足的現(xiàn)象日益嚴(yán)峻，如何在店鋪運(yùn)營中節(jié)省人力、實(shí)現(xiàn)無人化已經(jīng)成為當(dāng)下極其重要的課題。特別是對店員負(fù)擔(dān)較重的結(jié)算業(yè)務(wù)（收銀結(jié)賬），無人化需求日益迫切。

為實(shí)現(xiàn)結(jié)算業(yè)務(wù)的無人化，可以考慮使用自助結(jié)賬的方式。而自助結(jié)賬就需要顧客自己逐一將商品的條形碼放到機(jī)器上掃描。但是因?yàn)椴糠诸櫩蛯θ绾问褂脳l形碼讀取設(shè)備并不熟悉，所以需要耗費(fèi)大量的時間讀取條形碼，而對于像生鮮食品之類沒有條形碼的商品，自助結(jié)賬時的對應(yīng)就會變得更加復(fù)雜，結(jié)賬效率成為課題。此外，雖然已有企業(yè)開始以給商品添加RFID電子標(biāo)簽的方式進(jìn)行自動化結(jié)算，但給低價商品添加電子標(biāo)簽的方式非常不劃算，所以要實(shí)現(xiàn)真正意義上的普及還非常遙遠(yuǎn)。

此次開發(fā)的圖像識別技術(shù)是一種多種物體識別技術(shù)，無需條形碼和RFID電子標(biāo)簽，即使是在零售店這樣將生鮮食品、日配品和包裝成品等各種商品混雜放置的復(fù)雜環(huán)境中，也能進(jìn)行精準(zhǔn)識別。通過這項(xiàng)技術(shù)，顧客只需將購買的多種商品放到收銀臺上，即可一次性準(zhǔn)確讀取商品。

【新技術(shù)的特征】

1.可對包括天然物品和流水線產(chǎn)品等在內(nèi)的各種不同特點(diǎn)的零售商品進(jìn)行高精度識別

本次開發(fā)的圖像識別技術(shù)，融合了深度學(xué)習(xí)技術(shù)和特征點(diǎn)匹配技術(shù)中的不同特性。首先對將深度學(xué)習(xí)技術(shù)和特征匹配技術(shù)分別使用到每個商品時的識別精度進(jìn)行推測，調(diào)整各技術(shù)的使用比例以實(shí)現(xiàn)識別精度的最大化。然后再根據(jù)每個商品調(diào)整后得到的配比，對各技術(shù)的識別結(jié)果進(jìn)行整合。對于像蔬菜水果等生鮮食品之類不同個體外觀差異巨大的天然物品，將使用可以吸收不同個體差異來進(jìn)行判別的深度學(xué)習(xí)技術(shù)，而對于像飲料、點(diǎn)心、盒裝方便面、雜貨等包裝成品之類設(shè)計(jì)相似的工業(yè)產(chǎn)品，則使用可以詳細(xì)判別設(shè)計(jì)配置差異的特征點(diǎn)匹配技術(shù)。

而對于便當(dāng)、熟食等日配品之類同時具備天然物品（食材）和工業(yè)產(chǎn)品（商品標(biāo)簽）特點(diǎn)的商品，則同時使用兩種技術(shù)，在對其結(jié)果進(jìn)行整合后再進(jìn)行識別。結(jié)合商品特性，融合兩項(xiàng)技術(shù)的識別方式，較之于只使用單項(xiàng)技術(shù)的情況，有效地提升了對于多種不同零售商品的識別精度。

2.即使是在多種商品混雜放置的復(fù)雜環(huán)境中也能精準(zhǔn)識別

拍攝每個商品個體，即可自動生成大量的多種商品混雜放置的復(fù)雜環(huán)境的圖片。本次開發(fā)的多種物體識別技術(shù)，只需提前對這些圖片進(jìn)行機(jī)械學(xué)習(xí)，即可有效提升復(fù)雜環(huán)境中的識別精度。這樣就解決了機(jī)械學(xué)習(xí)時需要拍攝并準(zhǔn)備大量學(xué)習(xí)圖像數(shù)據(jù)的課題，即使只有少量的拍攝圖像數(shù)據(jù)，也可有效提升多種商品混雜放置的復(fù)雜環(huán)境中的商品識別精度。

在2018年3月于東京國際展覽中心舉辦的“RetailTech JAPAN2018”流通技術(shù)展上， NEC展出了使用本技術(shù)的圖像識別POS結(jié)算演示系統(tǒng)。同時，計(jì)劃從3月開始將使用本技術(shù)在NEC總部內(nèi)的便利店進(jìn)行結(jié)算業(yè)務(wù)無人化的驗(yàn)證實(shí)驗(yàn)。