最近，NEC開(kāi)發(fā)出多種物體識(shí)別技術(shù)，可大幅提升超市和便利店等零售商結(jié)算時(shí)的商品識(shí)別效率，可對(duì)包括生鮮食品、日配品和包裝成品等在內(nèi)的所有零售商品進(jìn)行圖像識(shí)別。本技術(shù)將為零售店鋪實(shí)現(xiàn)無(wú)人化結(jié)算作出巨大的貢獻(xiàn)。

本技術(shù)結(jié)合不同特性的深度學(xué)習(xí)技術(shù)和特征點(diǎn)匹配技術(shù)，對(duì)各種不同的零售商品進(jìn)行高精度識(shí)別，既包括生鮮食品之類(lèi)個(gè)體外觀差異大的物品，也包括包裝成品之類(lèi)相似設(shè)計(jì)大量存在的流水線(xiàn)產(chǎn)品。而且即使這些商品混雜堆放，也能一次性精準(zhǔn)識(shí)別所有商品。

NEC商品畫(huà)像識(shí)別示意圖

近年來(lái)，隨著圖像識(shí)別技術(shù)的不斷發(fā)展，利用攝像頭識(shí)別零售商品的圖像識(shí)別方式使得零售店鋪結(jié)算在節(jié)省人力及無(wú)人化方面不斷進(jìn)步。但是，由于生鮮食品和包裝成品的特點(diǎn)不同，以往的圖像識(shí)別技術(shù)很難對(duì)各式各樣的商品統(tǒng)一進(jìn)行識(shí)別。此外，為了一次性準(zhǔn)確識(shí)別這些商品，需要將商品整齊擺放，會(huì)增加使用者的負(fù)擔(dān)。

通過(guò)此次NEC最新研發(fā)的技術(shù)，無(wú)需再逐個(gè)讀取條形碼和RFID電子標(biāo)簽，只需將商品放置到收銀臺(tái)上這一簡(jiǎn)單的操作，即可一次性識(shí)別所有商品，大幅提升了結(jié)算時(shí)商品的讀取效率。

NEC積極致力于在全球范圍內(nèi)推進(jìn)“社會(huì)解決方案事業(yè)”，創(chuàng)造安全、安心、高效、公平的社會(huì)價(jià)值。將先進(jìn)的ICT技術(shù)與知識(shí)相融合，為實(shí)現(xiàn)更加光明、更加豐富多彩的高效社會(huì)盡一份力量。

【背景】

近年來(lái)，零售行業(yè)勞動(dòng)力不足的現(xiàn)象日益嚴(yán)峻，如何在店鋪運(yùn)營(yíng)中節(jié)省人力、實(shí)現(xiàn)無(wú)人化已經(jīng)成為當(dāng)下極其重要的課題。特別是對(duì)店員負(fù)擔(dān)較重的結(jié)算業(yè)務(wù)（收銀結(jié)賬），無(wú)人化需求日益迫切。

為實(shí)現(xiàn)結(jié)算業(yè)務(wù)的無(wú)人化，可以考慮使用自助結(jié)賬的方式。而自助結(jié)賬就需要顧客自己逐一將商品的條形碼放到機(jī)器上掃描。但是因?yàn)椴糠诸櫩蛯?duì)如何使用條形碼讀取設(shè)備并不熟悉，所以需要耗費(fèi)大量的時(shí)間讀取條形碼，而對(duì)于像生鮮食品之類(lèi)沒(méi)有條形碼的商品，自助結(jié)賬時(shí)的對(duì)應(yīng)就會(huì)變得更加復(fù)雜，結(jié)賬效率成為課題。此外，雖然已有企業(yè)開(kāi)始以給商品添加RFID電子標(biāo)簽的方式進(jìn)行自動(dòng)化結(jié)算，但給低價(jià)商品添加電子標(biāo)簽的方式非常不劃算，所以要實(shí)現(xiàn)真正意義上的普及還非常遙遠(yuǎn)。

此次開(kāi)發(fā)的圖像識(shí)別技術(shù)是一種多種物體識(shí)別技術(shù)，無(wú)需條形碼和RFID電子標(biāo)簽，即使是在零售店這樣將生鮮食品、日配品和包裝成品等各種商品混雜放置的復(fù)雜環(huán)境中，也能進(jìn)行精準(zhǔn)識(shí)別。通過(guò)這項(xiàng)技術(shù)，顧客只需將購(gòu)買(mǎi)的多種商品放到收銀臺(tái)上，即可一次性準(zhǔn)確讀取商品。

【新技術(shù)的特征】

1.可對(duì)包括天然物品和流水線(xiàn)產(chǎn)品等在內(nèi)的各種不同特點(diǎn)的零售商品進(jìn)行高精度識(shí)別

本次開(kāi)發(fā)的圖像識(shí)別技術(shù)，融合了深度學(xué)習(xí)技術(shù)和特征點(diǎn)匹配技術(shù)中的不同特性。首先對(duì)將深度學(xué)習(xí)技術(shù)和特征匹配技術(shù)分別使用到每個(gè)商品時(shí)的識(shí)別精度進(jìn)行推測(cè)，調(diào)整各技術(shù)的使用比例以實(shí)現(xiàn)識(shí)別精度的最大化。然后再根據(jù)每個(gè)商品調(diào)整后得到的配比，對(duì)各技術(shù)的識(shí)別結(jié)果進(jìn)行整合。對(duì)于像蔬菜水果等生鮮食品之類(lèi)不同個(gè)體外觀差異巨大的天然物品，將使用可以吸收不同個(gè)體差異來(lái)進(jìn)行判別的深度學(xué)習(xí)技術(shù)，而對(duì)于像飲料、點(diǎn)心、盒裝方便面、雜貨等包裝成品之類(lèi)設(shè)計(jì)相似的工業(yè)產(chǎn)品，則使用可以詳細(xì)判別設(shè)計(jì)配置差異的特征點(diǎn)匹配技術(shù)。

而對(duì)于便當(dāng)、熟食等日配品之類(lèi)同時(shí)具備天然物品（食材）和工業(yè)產(chǎn)品（商品標(biāo)簽）特點(diǎn)的商品，則同時(shí)使用兩種技術(shù)，在對(duì)其結(jié)果進(jìn)行整合后再進(jìn)行識(shí)別。結(jié)合商品特性，融合兩項(xiàng)技術(shù)的識(shí)別方式，較之于只使用單項(xiàng)技術(shù)的情況，有效地提升了對(duì)于多種不同零售商品的識(shí)別精度。

2.即使是在多種商品混雜放置的復(fù)雜環(huán)境中也能精準(zhǔn)識(shí)別

拍攝每個(gè)商品個(gè)體，即可自動(dòng)生成大量的多種商品混雜放置的復(fù)雜環(huán)境的圖片。本次開(kāi)發(fā)的多種物體識(shí)別技術(shù)，只需提前對(duì)這些圖片進(jìn)行機(jī)械學(xué)習(xí)，即可有效提升復(fù)雜環(huán)境中的識(shí)別精度。這樣就解決了機(jī)械學(xué)習(xí)時(shí)需要拍攝并準(zhǔn)備大量學(xué)習(xí)圖像數(shù)據(jù)的課題，即使只有少量的拍攝圖像數(shù)據(jù)，也可有效提升多種商品混雜放置的復(fù)雜環(huán)境中的商品識(shí)別精度。

在2018年3月于東京國(guó)際展覽中心舉辦的“RetailTech JAPAN2018”流通技術(shù)展上， NEC展出了使用本技術(shù)的圖像識(shí)別POS結(jié)算演示系統(tǒng)。同時(shí)，計(jì)劃從3月開(kāi)始將使用本技術(shù)在NEC總部?jī)?nèi)的便利店進(jìn)行結(jié)算業(yè)務(wù)無(wú)人化的驗(yàn)證實(shí)驗(yàn)。