基于云計算分布式網絡視頻數據挖掘采集系統技術方案

本發明專利技術涉及一種用于基于云計算分布式網絡視頻數據挖掘采集方法的挖掘采集系統，基于云計算分布式網絡視頻數據挖掘采集方法依次通過網絡視頻數據初采集和雙核云計算平臺多節點分配、分布式目標視頻數據分類存儲、視頻數據認證識別挖掘采集處理方法步驟的特殊設計和相關步驟的特殊優化，克服了現有技術中視頻數據采集范圍窄、可靠性差、可擴展度低等的長期技術難題，實現了通過特殊設計的拓撲節點結構，有效利用了必要節點間的數據傳輸，同時獲得了有效并高速地處理視頻信息數據、精確有效提取的清晰視頻數據內容的有益效果。

Distributed video data mining and collection system based on Cloud Computing

The invention relates to a method for mining acquisition system of cloud computing distributed network video acquisition method based on data mining, cloud computing and distributed network video data mining through the network video data acquisition method in the initial acquisition and dual core cloud computing platform of multi node distribution, distributed target video data classification storage, video data acquisition optimization identification special special design processing method steps and the related procedures of mining based on long-term, to overcome technical problems in the prior art video data acquisition range is narrow, poor reliability, low degree of scalability, realized by topology node structure with special design, effective use of the necessary data transmission between the nodes, at the same time to obtain a clear beneficial effect of video data content effective and high speed video information data processing, accurate and efficient extraction of.

【技術實現步驟摘要】
基于云計算分布式網絡視頻數據挖掘采集系統
本專利技術涉及視頻數據挖掘采集
，尤其涉及一種網絡視頻數據挖掘采集系統，更具體的說涉及一種基于云計算分布式網絡視頻數據挖掘采集方法及其用于該方法的基于云計算分布式網絡視頻數據挖掘采集系統。
技術介紹
最近二十年來，當今生活中，各種場合都會有視頻系統的應用，例如用攝像頭進行視頻監控的公共安全系統、衛星成像系統、醫學成像系統等。在這些應用中，有可能會因攝像頭質量差、CCD(電荷耦合器件)和CMOS傳感器分辨率不高、鏡頭運動、光線變化等原因，造成采集的圖像模糊，難以辨認。目前，視頻序列的超分辨率恢復/重建技術是解決上述問題的熱門技術，它是指從一系列模糊的低分辨率觀測圖像中構造出一幅或多幅清晰的高分辨率圖像的分辨率增強技術。云計算作為未來發展的方向，已得到了各企業的重視，在云計算中，數據安全問題作為其一重要方面，是制約其發展的重要因素，現有云計算的儲存模式常為三種形式：即一為獨立數據庫，二為共享數據庫、隔離數據架構，三為共享數據庫、共享數據架構；三種形式各有利弊，主要體現在成本和安全性能上的矛盾，現在的租戶常只能單一的使用其中一種形式，但一租戶其上傳的數據情況不一樣，對其安全性能的要求不一樣，如單一的使用一種形式，如選用安全級別較高的形式，會造成一些對安全級別要求不高的數據也占用獨立數據庫，造成資源的浪費；如選用安全級別較低的形式，則會造成對安全級別要求高的數據安全性能得不到有效保證，容易給客戶造成損失。使用互聯網通信方法的內容管理系統已經廣為運用。在這種內容管理系統中，用戶經由互聯網從客戶計算機訪問由服務器計算機提供的Web頁(網頁)。另外，用戶在該Web頁上選擇要查看的內容。內容管理系統將所選內容發送給服務器計算機。服務器計算機執行控制，以在由用戶操作的客戶計算機的畫面上顯示所接收到的內容。日本專利特開2002-304271號公報論述了一種通過使用打印機來打印用戶經由客戶計算機的畫面讀取的內容的方法。在該傳統方法中，服務器計算機將用戶查看的內容轉換成能夠被打印機打印的數據。此外，服務器計算機將轉換后的數據發送給打印機。打印機打印所接收到的數據。同時，近些年來，已經利用了諸如云計算系統或軟件即服務(SoftwareasaService，SaaS)的各種方法，在所述方法中，服務器計算機執行各種處理。在云計算系統中，利用大量的計算資源來分散地轉換并處理數據。在像這種云計算系統中，從多個不同客戶端輸入的多個請求能夠相互并行地進行處理。另外，應近來日益增長的對開放系統的需求，已經使用了作為平臺開發的并且執行或協作操作其上的多個服務應用的系統。目前，視頻監控應用非常廣泛。家庭、辦公樓、社區等等，通過視頻自動監控，大量的節省了人力物力。但是，不足是現在的大部分視頻監控只能對監控區域內的環境進行錄像監控，而無法對區域內的人進行實時自動識別，無法自動識別陌生人，然后采取相應的安防措施。另外，大部分的視頻監控都是在局域網絡進行，無法為用戶提供遠程的實時的自動監控。下面的專利申請，如中國專利“網絡智能視頻監控方法及系統200910250223.2”提出一種網絡智能視頻監控方法，包括：監控前端監測到報警事件時，根據預先配置的彩信策略形成報警彩信內容，并將該報警彩信內容上報到中央管理服務器；中央管理服務器向彩信服務器發送彩信請求，該彩信請求中包括報警彩信內容；彩信服務器根據彩信請求構造通知彩信，并將通知彩信發送給監控終端，通知彩信包括報警彩信內容。中國專利“一種網絡視頻監控系統的視頻查看方法，包括：網絡視頻監控系統中的視頻監控管理平臺預先向各前端設備發送流轉發指令，通知所述前端設備開始向流媒體服務器發送視頻流；視頻查看客戶端在需要查看指定前端設備的視頻時，向視頻監控管理平臺發送對應所述指定前端設備的查看請求；視頻監控管理平臺根據所述查看請求，通知流媒體服務器將接收的所述指定前端設備的視頻流向分發給所述視頻查看客戶端200810247375.2”等也提出了通過網絡進行視頻監控的方法，但是遺憾的是同樣沒有解決通過網絡進行視頻監控過程中，如何發揮網絡優勢進行自動的準確識別的問題。云計算是一種新興的共享基礎架構的網絡服務方式，其通過大規模虛擬化資源池為使用者提供服務。使用者將本地所需處理的數據通過網絡上傳并保存到網絡數據中心，提供云計算服務的企業負責管理和維護該網絡數據中心的正常運行，以保證有足夠強的計算能力和足夠大的存儲空間供用戶使用。對于移動設備，如手提電腦、手機等移動通信終端等，其可在無線方式下獲取數據及信息并進行相應的計算，方便了用戶的使用，但對獲取的數據的存儲和計算能力受制于移動設備內部的硬件性能，而將云計算結合到移動設備中則可解決該問題。目前市場主流的信息顯示系統均采用集中控制運算方式對顯示單元進行信號顯示控制，隨著科技的不斷發展和用戶對產品性能和顯示效果的要求不斷提高。現有的信息顯示系統采用集中控制運算方式對顯示單元進行信號顯示控制。即所有的輸入圖像都必須接入視頻控制器中，所有的輸出圖像由視頻控制器輸出。該種處理方式的核心部件為圖像拼接器，該種設備多為純硬件結構設計，無操作系統。整個大屏顯示圖像的解碼、渲染工作均集中在圖像拼接器中完成，系統可擴展性差，可靠性不高。現有技術存在以下問題和缺陷：(1)無法處理并展示用戶的大數據量信息，同時，無法兼容市場上新型圖像輸入方式；(2)系統功能組合、顯示、分區、圖像交換能力比較差，同一臺視頻控制器之間的輸入和輸出圖像矩陣交換能力比較好，在屏數量比較多配置了多臺視頻控制器時，兩臺不同視頻控制器的輸入和輸出圖像之間矩陣交換功能比較弱；一般功能分區以視頻控制器為核心，不同控制器之間基本上不支持輸入和輸出圖像的任意組合、任意分區；(3)系統的穩定性和可靠性不高，目前主流廠家的視頻控制器仍是基于工業計算機，因此對系統的穩定性和可靠性是一個嚴峻的考驗，尤其對于大規模顯示系統，一臺視頻控制器(例如輸出32路)出現故障就可能導致32塊屏不能正常顯示，維護保養非常麻煩，需要將該視頻控制器中的所有圖像輸入卡和圖像輸出卡取出來；另一個方面，系統不能實現在線的實時冗余；(4)擴展性差，無法滿足用戶升級改造顯示系統的要求，當用戶提出在原有基礎上擴展的要求時，現有技術只能拆掉重建；(5)系統不易維護和升級。由于傳統的視頻控制器圖像的放大、縮小，圖像格式的轉換，圖像處理的方式基本上是由圖像輸入、輸出卡完成的，因此其軟件是固化在圖像輸入、輸出卡中，不能經過純軟件的更新實現系統的升級。市場上現在有一些超分辨率模糊圖像處理系統。例如，荷蘭的“影博士”以及美國的“識慧”模糊圖像處理系統。這些系統不僅造價昂貴，并且還有很多缺陷。例如，由于這些系統為單板機，做視頻文件分析容易，但很難進行視頻文件的實時處理。另外，當對采集來的模糊視頻進行處理時，需要將采集的模擬視頻數據轉換成數字信號，運算量大，在單片機的情況下，不容易實現實時高速系統的要求。并且，當采集來的模糊視頻重建計算量很大時，如果按常規的軟件架構在單機上運算會造成運算時間過長甚至導致死機。再者，如果是基于服務器器處理的視頻分析系統存在大量原始采集的數據源，如何把這么龐大的數據傳到服務器不至于導致網絡堵塞也是一個新本文檔來自技高網...

【技術保護點】
一種基于云計算分布式網絡視頻數據挖掘采集方法，其特征在于，該基于云計算分布式網絡視頻數據挖掘采集系統依次包括：網絡視頻數據初采集和雙核云計算平臺多節點分配、分布式目標視頻數據分類存儲和視頻數據認證識別挖掘采集處理，所述分布式目標視頻數據分類存儲：通過目標視頻數據無線終端控制裝置對分布式目標視頻數據分離后的圖像數據和音頻數據進行實時采集分類存儲；所述目標視頻數據無線終端控制裝置包括圖像數據無線通信接收終端和音頻數據無線通信接收終端、多個串聯的圖像數據和音頻數據集成分類設備、多個圖像數據和音頻數據集成存儲模塊和目標圖像數據和音頻數據集成提取裝置；所述目標圖像數據和音頻數據集成提取裝置內置有多個判定裝置和對應的同樣個數的糾正裝置；通過所述圖像數據無線通信接收終端和音頻數據無線通信接收終端分別提供R個物理對象和S個邏輯對象的源信息數據，所述圖像數據無線通信接收終端和音頻數據無線通信接收終端經由信號分配控制器后，通過單向通訊與所述多個串聯的圖像數據和音頻數據集成分類設備進行數據傳輸；其中，所述信號分配控制器，用以將所述R個物理對象和S個邏輯對象的源信息數據作業等量執行結果分配并執行給每個串聯的圖像數據和音頻數據集成分類設備，所述多個串聯的圖像數據和音頻數據集成分類設備對應多個圖像數據和音頻數據集成存儲模塊，每個圖像數據和音頻數據集成存儲模塊依次存儲對應的每個串聯的圖像數據和音頻數據集成分類設備剔除的圖像數據和音頻數據，所述目標圖像數據和音頻數據集成提取裝置與所述多個圖像數據和音頻數據集成存儲模塊雙向通訊相連；其中，所述目標圖像數據和音頻數據集成提取裝置內置有記憶模塊、請求模塊、搜索模塊、調取模塊和分發模塊。...

【技術特征摘要】
1.一種基于云計算分布式網絡視頻數據挖掘采集方法，其特征在于，該基于云計算分布式網絡視頻數據挖掘采集系統依次包括：網絡視頻數據初采集和雙核云計算平臺多節點分配、分布式目標視頻數據分類存儲和視頻數據認證識別挖掘采集處理，所述分布式目標視頻數據分類存儲：通過目標視頻數據無線終端控制裝置對分布式目標視頻數據分離后的圖像數據和音頻數據進行實時采集分類存儲；所述目標視頻數據無線終端控制裝置包括圖像數據無線通信接收終端和音頻數據無線通信接收終端、多個串聯的圖像數據和音頻數據集成分類設備、多個圖像數據和音頻數據集成存儲模塊和目標圖像數據和音頻數據集成提取裝置；所述目標圖像數據和音頻數據集成提取裝置內置有多個判定裝置和對應的同樣個數的糾正裝置；通過所述圖像數據無線通信接收終端和音頻數據無線通信接收終端分別提供R個物理對象和S個邏輯對象的源信息數據，所述圖像數據無線通信接收終端和音頻數據無線通信接收終端經由信號分配控制器后，通過單向通訊與所述多個串聯的圖像數據和音頻數據集成分類設備進行數據傳輸；其中，所述信號分配控制器，用以將所述R個物理對象和S個邏輯對象的源信息數據作業等量執行結果分配并執行給每個串聯的圖像數據和音頻數據集成分類設備，所述多個串聯的圖像數據和音頻數據集成分類設備對應多個圖像數據和音頻數據集成存儲模塊，每個圖像數據和音頻數據集成存儲模塊依次存儲對應的每個串聯的圖像數據和音頻數據集成分類設備剔除的圖像數據和音頻數據，所述目標圖像數據和音頻數據集成提取裝置與所述多個圖像數據和音頻數據集成存儲模塊雙向通訊相連；其中，所述目標圖像數據和音頻數據集成提取裝置內置有記憶模塊、請求模塊、搜索模塊、調取模塊和分發模塊。2.根據權利要求1所述的基于云計算分布式網絡視頻數據挖掘采集方法，其特征在于：所述網絡視頻數據初采集和雙核云計算平臺多節點分配：先通過網絡時間協議對同步服務器和所有視頻采集機的系統時間進行同步，采用攝像機陣列采集裝置進行采集多個目標視頻信息數據，所述攝像機陣列采集裝置設置多個視頻采集程序分別進行實時啟動采集對應的多個目標視頻信息數據，然后根據網絡傳輸協議，將視頻數據以數據流的形式通過封閉的內部網絡發往位于接收端的攝像機陣列采集裝置；對采集的上述數據流分別進行音頻數據采集和圖像數據采集，然后通過視頻數據采集卡進行檢測和采集對應的音頻數據和圖像數據，所述視頻數據采集卡的上表面上均勻設置多個壓縮與傳輸單元和多個搜索單元，該壓縮與傳輸單元對上述音頻數據和圖像數據分別進行壓縮并傳輸至對應的搜索單元，所述視頻數據采集卡的上表面上多個壓縮與傳輸單元和多個...

【專利技術屬性】
技術研發人員：汪達欽，張麗華，殷澤，秦濤，俞武權，姜曉林，
申請(專利權)人：上海易鈞信息技術有限公司，
類型：發明
國別省市：上海,31