對移動設備捕獲的數字圖像中的對象進行分類的系統和方法技術方案

在一個實施例中，方法包括接收移動設備捕獲的數字圖像；并且利用移動設備的處理器：生成數字圖像的第一表現，第一表現的特點是分辨率降低；基于第一表現生成第一特征矢量；將第一特征矢量與多個參考特征矩陣進行比較；并且至少部分基于比較，將數字圖像中描繪的對象分類為特定對象類別中的成員。

【技術實現步驟摘要】
【國外來華專利技術】
本專利技術涉及移動圖像捕獲以及圖像處理，并且具體地，涉及利用移動設備捕獲并 處理數字圖像以及對此數字圖像中檢測到的對象進行分類。
技術介紹
其中描繪了包括例如信件、支票、鈔票、賬單等文檔的數字圖像的對象慣常由掃描 儀或耦合至計算機工作站（例如筆記本電腦或臺式電腦）的多功能外圍設備捕獲并處理。 本領域中能夠執行這種捕獲和處理的方法和系統是公知的，并且很好地適于它們用來做的 工作。 然而，在日常的活動、計算以及商業越來越多地使用移動設備的年代，提供類似的 文檔捕獲和處理系統以及方法以用于部署并使用在移動平臺（例如智能手機、數碼相機、 平板計算機等）上是非常有益的。 對傳統的文檔捕獲和處理技術進行變革的主要挑戰是有限的處理功率和移動設 備中現今可用的硬件能夠實現的圖像分辨率。這些限制呈現了巨大的挑戰，因為處理遠低 于通常的掃描儀能夠達到的分辨率下捕獲的圖像是不可能或不切實際的。結果是，傳統的 基于掃描儀的處理算法通常對移動設備捕獲的數字圖像表現不佳。 除此以外，移動設備可用的有限的處理和存儲使得掃描儀用的傳統的圖像處理算 法在計算費用方面極其昂貴。將傳統的基于掃描儀的圖像處理算法嘗試處理成實際應用在 現在的移動平臺上會花費太多的時間。 進一步的挑戰來自移動捕獲組件（例如，移動電話的照相機、平板等）的性質。傳 統的掃描儀能夠如實地表現數字圖像中的物理文檔，嚴格維持縱橫比、尺寸以及數字圖像 中物理文檔的形狀，而移動捕獲組件往往不能產生這樣的結果。 特別地，由攝像機捕獲的文檔圖像呈現了一些在處理掃描儀捕獲的圖像時沒有遇 到過的新的處理問題。這一部分是由于捕獲文檔圖像的方法本身的不同，以及設備的構成 方式不同。一些掃描儀的工作方式是利用運輸機制，使紙張和傳感器的線性陣列間產生相 對運動。這些傳感器在移動時生成文檔的像素值，然后捕獲的這些像素值以形成圖像。傳 感器本身的噪音一般有一個水平或垂直的一致性，并且在行間由相同的傳感器提供所有像 素。 相反地，攝像機具有許多成非線性陣列的傳感器，例如典型地布置成矩形。因此， 所有的這些單個傳感器都是獨立的，并且渲染不典型具有水平或垂直一致性的圖像數據。 此外，攝像機引入了投影效果，這是拍攝圖片的角度的函數。例如，通過就像掃描儀中的線 性陣列，即使紙張的運輸沒有相對傳感器的準線完美地正交并且引入了一些歪斜，也沒有 像攝像機內的投影效果。此外，用攝像機捕獲圖像，由于攝像機光學可能引入非線性變形。設計為檢測由傳統的平板（flat-bed)和/或進紙掃描儀捕獲的圖像中的文檔的 傳統圖像處理算法也可以利用由頁面檢測所導出的信息，來嘗試把檢測到的文檔進行分 類，作為特別文檔類別的成員。然而，由于利用移動設備的照相機捕獲數字圖像引入了獨 特的挑戰，這些傳統的分類算法不足以完成并且不能魯棒地對這種數字圖像的文檔進行分 類。 而且，即使當文檔能被適當地分類時，現今移動設備的硬件局限使得從計算效率 觀點來看，利用移動設備完成分類非常昂貴。 鑒于上面呈現的挑戰，提供如下這種圖像捕獲和處理算法與應用是有益的：其補 償和/或校正與利用移動設備進行圖像捕獲、處理以及分類相關聯的問題，同時經由有效 的處理方法維持低計算成本。 而且，提供如下這種對象分類系統、方法以及計算機程序產品將是本領域中的進 一步改進：其能夠魯棒地將對象分配到特定的對象，并且利用已知的類別成員信息進一步 致力于并且克服獨特的處理利用移動設備的照相機捕獲的圖像所固有的挑戰照相機。
技術實現思路
在一個實施例中，方法包括：接收移動設備捕獲的數字圖像；并且利用移動設備 的處理器：生成數字圖像的第一表現，第一表現的特點是分辨率降低；基于第一表現生成 第一特征矢量；將第一特征矢量與多個參考特征矩陣進行比較；并且至少部分基于比較， 將數字圖像中描繪的對象分類為特定對象類別中的成員。 在另一個實施例中，方法包括：基于移動設備捕獲的數字圖像生成第一特征矢量； 將第一特征矢量與多個參考特征矩陣進行比較；并且至少部分基于比較，將對數字圖像中 描繪的對象分類為特定對象類別中的成員；并且至少部分基于特別對象類別，確定一個或 多個對象的對象特征；并且利用移動設備的處理器執行至少一個處理操作，該至少一個處 理操作從由下列組成的組中選擇：至少部分基于一個或多個對象特征，檢測數字圖像中描 繪的對象；至少部分基于一個或多個對象特征，矩形化數字圖像中描繪的對象；至少部分 基于一個或多個對象特征，裁剪數字圖像；并且至少部分基于一個或多個對象特征，二值化 數字圖像。 仍然在另一個實施例中，系統包括處理器；以及處理器內的邏輯和/或處理器可 執行邏輯，使得處理器可以：生成由移動設備捕獲的數字圖像的第一表現；基于第一表現 生成第一特征矢量；將第一特征矢量與多個參考特征矩陣進行比較；并且至少部分基于比 較，將數字圖像中描繪的對象分類為特定對象類別中的成員。 仍然還在另一個實施例中，計算機程序產品包括嵌入了程序代碼的計算機可讀存 儲介質，程序代碼可由處理器讀取和/或執行，從而：生成由移動設備捕獲的數字圖像的 第一表現；基于第一表現生成第一特征矢量；將第一特征矢量與多個參考特征矩陣進行比 較；并且至少部分基于比較，將數字圖像中描繪的對象分類為特定對象類別中的成員。【附圖說明】 圖1闡釋了根據一個實施例的網絡體系架構。 圖2示出了根據一個實施例的可與圖1中的服務器和/或客戶端相關聯的典型的 硬件環境。 圖3A描繪了根據一個實施例的對象的數字圖像。 圖3B描繪了根據一個實施例的圖3A中示出的為了生成數字圖像的第一表現而被 分成多個截面的數字圖像的圖示。 圖3C描繪了圖3A中示出的數字圖像的第一表現，第一表現的特點是相對于數字 圖像其分辨率降低了。 圖4A是根據一個實施例的文檔的數字圖像中描繪的多個子分區的圖示。 圖4B是根據一個實施例的圖4A中示出的數字圖像的掩膜表現。 圖4C是根據一個實施例的圖4A中示出的數字圖像的掩膜表現。 圖4D是根據一個實施例的圖4A中示出的數字圖像的掩膜表現。 圖5是根據一個實施例的方法的流程圖。 圖6是根據一個實施例的方法的流程圖。【具體實施方式】 進行下面的描述是出于闡釋本專利技術的總則的目的，并且并不意味著限定其中要求 保護的創造性概念。進一步地，在各種可能的組合和排列的每一個中，此處描述的特定特征 可以和描述的其他特征組合使用。 除非其中進行了特別限定，否則給予所有術語它們最寬的可能解釋，包括說明書 中隱含的意思以及本領域技術人員能夠理解和/或字典、論文等限定的意思。 也必須注意到，除非另有說明，如在說明書和所附權利要求書中使用的，單數形式 的"一"、"一個"和"所述一個"包括復數指示物。 本申請涉及由照相機，尤其是移動設備的照相機，捕獲的圖像（圖片，圖解，圖形 示意圖，電影、視頻、影片、剪輯等的一幀）的圖像處理。如此處所理解的，移動設備是指 能夠不需要通過物理連接（如，導線、電線、電纜等）供應能量而能接收數據或不需要物理 數據連接（如，導線、電線、電纜等）而能接收數據的任何設備。本公開范圍內的移動設 備包括示例性的設備，例如移動電話、智能手機、平板、個人數字助理、iPod_?,iPad⑧， 黑莓⑧設備等。 然而，由于對各種功能的描本文檔來自技高網...

【技術保護點】
一種方法，包括：接收移動設備捕獲的數字圖像；并且利用所述移動設備的處理器：生成所述數字圖像的第一表現，所述第一表現的特點是分辨率降低；基于所述第一表現生成第一特征矢量；將所述第一特征矢量與多個參考特征矩陣進行比較；并且至少部分基于所述比較，將所述數字圖像中描繪的對象分類為特定對象類別的成員。

【技術特征摘要】
【國外來華專利技術】...

【專利技術屬性】
技術研發人員：簡·維勒斯·阿姆特魯普，安東尼·馬喬拉，斯蒂芬·邁克爾·湯普森，馬繼勇，亞歷山大·舒斯特洛維奇，克里斯多夫·W·斯拉舍，
申請(專利權)人：柯法克斯公司，
類型：發明
國別省市：美國;US