分布式數據處理系統及方法技術方案

本發明專利技術提供了一種分布式數據處理系統及方法，該系統包括應用設備，至少一個控制節點和多個計算節點，每個計算節點對應系統數據庫中的部分存儲空間；應用設備，用于向對應的控制節點發送請求信息；控制節點，用于接收應用設備發送的請求信息，并根據請求信息生成執行信息，并將執行信息發送給與該控制節點相對應的多個計算節點；每個計算節點，用于接收該計算節點對應的控制節點發送的執行信息，并根據執行信息對該計算節點對應的存儲單元進行相應操作。本發明專利技術提供的分布式數據系統及方法，有效的保證了數據處理的效率，并可以實現對大量數據進行同時處理，進而提高了該系統和方法使用的可靠性，有利于市場的推廣與應用。

Distributed data processing system and method

The present invention provides a distributed data processing system and method, the system includes the application of equipment, at least one control node and multiple nodes, each node corresponds to computing part of the storage space in the database system; application of equipment, used to control the corresponding node sends request information; the control node, request for information receiving application the device sends, and according to the request information generating execution information and the implementation of multiple computing node information sent to the corresponding control node; each compute node for transmitting a control node receives the computing node corresponding to the execution information, and performing the corresponding operation according to the information of the storage unit executes the corresponding computing node. Distributed data system and method provided by the invention, effectively ensure the efficiency of data processing, and can achieve a large amount of data processing at the same time, thus improving the reliability of using the system and method, is conducive to the promotion and application of market.

【技術實現步驟摘要】
分布式數據處理系統及方法
本專利技術涉及數據處理
，具體涉及一種分布式數據處理系統及方法。
技術介紹
XML數據庫是一種支持對XML(標準通用標記語言下的一個應用)格式文檔進行存儲和查詢等操作的數據管理系統，在系統中，開發人員可以對數據庫中的XML文檔進行查詢、導出和指定格式的序列化。現有技術中，XML數據庫通常為線性表結構，線性表結構中的數據元素之間的關系是一對一的關系，即一個應用節點只對應一個計算節點。然而，在專利技術人實施本技術方案的過程中，發現現有技術中存在以下問題：隨著數據處理數量的增大，處理效率往往不高，并不能夠及時有效對大量數據進行處理。
技術實現思路
本專利技術提供一種分布式數據處理系統及方法，可以有效的克服現有技術中存在的隨著數據處理數量的增大，處理效率往往不高，并不能夠及時有效對大量數據進行處理的問題。本專利技術的一方面是為了提供一種分布式數據處理系統，包括：應用設備，至少一個控制節點和多個計算節點，每個所述計算節點對應系統數據庫中的部分存儲空間；應用設備，用于向對應的控制節點發送請求信息；所述控制節點，用于接收所述應用設備發送的請求信息，并根據所述請求信息生成執行信息，并將所述執行信息發送給與該控制節點相對應的多個計算節點；每個所述計算節點，用于接收該計算節點對應的控制節點發送的執行信息，并根據所述執行信息對該計算節點對應的存儲單元進行相應操作。如上所述的分布式數據處理系統，還包括：每個所述計算節點，還用于在根據所述執行信息對該計算節點對應的存儲單元進行相應操作之后，將執行操作結果信息發送至與該計算節點相對應的控制節點；所述控制節點，還用于接收每個計算節點發送的執行操作結果信息，合成所接收到多個執行操作結果信息，并將合成后的執行操作結果信息發送給應用設備。如上所述的分布式數據處理系統，所述系統包括多個控制節點，每個所述控制節點對應不同的業務請求；所述應用設備，還用于將不同業務請求發送給對應的控制節點。如上所述的分布式數據處理系統，所述多個控制節點中包括一主控制節點和多個從控制節點；所述主控制節點，用于與數據增刪改業務請求相對應；每個從控制節點，用于與數據查詢業務請求相對應。如上所述的分布式數據處理系統，所述系統包括一存儲介質，所述存儲介質對應系統數據庫中的全部存儲空間；所述存儲介質集成在所述多個計算節點中的一個計算節點上。如上所述的分布式數據處理系統，所述系統包括多個存儲介質，每個所述存儲介質對應系統數據庫中的部分存儲空間，多個所述存儲介質集成在一個所述多個計算節點上。本專利技術的另一方面是為了提供一種分布式數據處理方法，包括：通過應用設備向對應的至少一個控制節點發送請求信息；通過所述控制節點接收所述應用設備發送的請求信息，并根據所述請求信息生成執行信息，并將所述執行信息發送給與該控制節點相對應的多個計算節點；通過所述計算節點接收該計算節點對應的控制節點發送的執行信息，并根據所述執行信息對該計算節點對應的存儲單元進行相應操作，其中，每個計算節點對應系統數據庫中的部分存儲空間。如上所述的分布式數據處理方法，還包括：通過每個所述計算節點在根據所述執行信息對該計算節點對應的存儲單元進行相應操作之后，將執行操作結果信息發送至與該計算節點相對應的控制節點；通過所述控制節點接收每個計算節點發送的執行操作結果信息，合成所接收到多個執行操作結果信息，并將合成后的執行操作結果信息發送給應用設備。如上所述的分布式數據處理方法，還包括：設置有多個控制節點，通過每個控制節點對應不同的業務請求；通過應用設備將不同業務請求發送給對應的控制節點。如上所述的分布式數據處理方法，所述多個控制節點中包括一主控制節點和多個從控制節點；通過所述主控制節點與數據增刪改業務請求相對應；并通過每個從控制節點與數據查詢業務請求相對應。如上所述的分布式數據處理方法，還包括：一與系統數據庫中的全部存儲空間相對應的存儲介質，所述存儲介質集成在所述多個計算節點中的一個計算節點上。如上所述的分布式數據處理方法，還包括：多個與系統數據庫中的部分存儲空間相對應的存儲介質，多個所述存儲介質集成在一個所述多個計算節點上。本專利技術提供的分布式數據系統及方法，通過應用設備向對應的控制節點發送請求信息，控制節點向對應的多個計算節點發送執行信息，每個計算節點均可根據執行信息對該計算節點對應的存儲單元進行相應操作，實現了通過多個計算節點對數據進行并行處理，克服了現有技術中存在的隨著數據處理數量的增大，處理效率往往不高，并且不能夠及時有效對大量數據進行處理的問題，通過多個計算節點同時進行并行處理，有效的保證了數據處理的效率，并且可以實現對大量數據進行同時處理，進而提高了該系統和方法使用的可靠性，有利于市場的推廣與應用。附圖說明圖1為本專利技術一實施例所給出的分布式數據處理系統的結構示意圖；圖2為本專利技術又一實施例所給出的分布式數據處理系統的結構示意圖；圖3為本專利技術另一實施例所給出的分布式數據處理系統的結構示意圖；圖4為本專利技術一實施例所給出的分布式數據處理方法的流程示意圖；圖5為本專利技術另一實施例所給出的分布式數據處理方法的流程示意圖；圖6為本專利技術再一實施例所給出的分布式數據處理方法的流程示意圖。圖中，1、應用設備；2、控制節點；21、主控制節點；22、從控制節點；3、計算節點；31、主計算節點；32、從計算節點。具體實施方式為使本專利技術的目的、技術方案和優點更加清楚，下面將結合本專利技術實施例中的附圖，對本專利技術實施例中的技術方案進行清楚、完整地描述，顯然，所描述的實施例是本專利技術一部分實施例，而不是全部的實施例。給予本專利技術的實施例，本領域普通技術人員在沒有做出創造性勞動的前提下所獲得的所有其他實施例，都屬于本專利技術保護的范圍。下面結合附圖和實施例，對本專利技術的具體實施方式作進一步詳細描述。以下實例用于說明本專利技術，但不用來限制本專利技術的范圍。圖1為所給出的分布式數據處理系統的結構示意圖；參考附圖1可知，本專利技術提供了一種分布式數據處理系統，包括：應用設備1，至少一個控制節點2和多個計算節點3，每個計算節點3對應系統數據庫中的部分存儲空間；其中，對于系統數據庫的存儲方式不做限定，本領域技術人員可以根據具體的設計需求進行設置，如可以將系統數據庫設置為存儲在一個存儲介質中，即系統數據庫在物理上和邏輯上均為整體結構；也可以將系統數據庫設置為存儲在多個存儲介質中，即系統數據庫在物理上為分體結構，但是在邏輯上未整體結構；當然的，本領域技術人員還可以采用其他的方式進行系統數據庫的存儲，只要能夠實現計算節點3對應系統數據中的部分存儲空間即可，在此不再贅述。應用設備1，用于向對應的控制節點2發送請求信息；其中，對于應用設備1的具體結構不做限定，其可以為具體的硬件設備，如CPU、控制器等等；當然的，也可以設置成虛擬的應用程序，如APP、應用客戶端等，本領域技術人員可以根據設計需求進行設置，只要能夠實現應用設備1可以向對應的控制節點2發送請求信息即可；此外，對于控制節點2的具體結構不做限定，其可以為單獨存在的結構，也可以為集成在應用設備1或者其他裝置上的結構，只要能夠實現與應用設備1進行通信連接即可，在此不再贅述；另外，對于請求信息的類型以及內容形式不做限定，如可以將請求信息設置為包括數據增刪改請求信本文檔來自技高網...

【技術保護點】
一種分布式數據處理系統，其特征在于，包括：應用設備，至少一個控制節點和多個計算節點，每個所述計算節點對應系統數據庫中的部分存儲空間；應用設備，用于向對應的控制節點發送請求信息；所述控制節點，用于接收所述應用設備發送的請求信息，并根據所述請求信息生成執行信息，并將所述執行信息發送給與該控制節點相對應的多個計算節點；每個所述計算節點，用于接收該計算節點對應的控制節點發送的執行信息，并根據所述執行信息對該計算節點對應的存儲單元進行相應操作。

【技術特征摘要】
1.一種分布式數據處理系統，其特征在于，包括：應用設備，至少一個控制節點和多個計算節點，每個所述計算節點對應系統數據庫中的部分存儲空間；應用設備，用于向對應的控制節點發送請求信息；所述控制節點，用于接收所述應用設備發送的請求信息，并根據所述請求信息生成執行信息，并將所述執行信息發送給與該控制節點相對應的多個計算節點；每個所述計算節點，用于接收該計算節點對應的控制節點發送的執行信息，并根據所述執行信息對該計算節點對應的存儲單元進行相應操作。2.根據權利要求1所述的分布式數據處理系統，其特征在于，還包括：每個所述計算節點，還用于在根據所述執行信息對該計算節點對應的存儲單元進行相應操作之后，將執行操作結果信息發送至與該計算節點相對應的控制節點；所述控制節點，還用于接收每個計算節點發送的執行操作結果信息，合成所接收到多個執行操作結果信息，并將合成后的執行操作結果信息發送給應用設備。3.根據權利要求2所述的分布式數據處理系統，其特征在于，所述系統包括多個控制節點，每個所述控制節點對應不同的業務請求；所述應用設備，還用于將不同業務請求發送給對應的控制節點。4.根據權利要求3所述的分布式數據處理系統，其特征在于，所述多個控制節點中包括一主控制節點和多個從控制節點；所述主控制節點，用于與數據增刪改業務請求相對應；每個從控制節點，用于與數據查詢業務請求相對應。5.根據權利要求4所述的分布式數據處理系統，其特征在于，所述系統包括一存儲介質，所述存儲介質對應系統數據庫中的全部存儲空間；所述存儲介質集成在所述多...

【專利技術屬性】
技術研發人員：鄭程光，
申請(專利權)人：北大方正集團有限公司，北大方正信息產業集團有限公司，上海方正數字出版技術有限公司，
類型：發明
國別省市：北京,11