基于共同序列模式的、用于智能客戶服務的分析系統和方法技術方案

本發明專利技術提供一種信息分析方法和信息分析系統。該方法從源信息集合中提取多項元數據，以生成元數據集合，所述元數據包括錯誤日志信息，所述錯誤日志信息在所述元數據集合中構成錯誤序列；以及為多個所述元數據集合生成共同錯誤序列集合。通過該方法，可以使得容易地獲得基于全局的錯誤序列模式，并在面臨新的錯誤時可以容易地與先前的錯誤序列模式相比對，以便預防、診斷及修復錯誤。

【技術實現步驟摘要】

本專利技術涉及信息分析領域，更具體地，涉及一種基于共同序列模式的分析系統和方法。
技術介紹
隨著計算機技術的不斷發展，經常存在需要在多個系統中部署產品組件的情形。一旦出現錯誤(error)，針對復雜產品組件的分析是耗時以及復雜的工作(即使對于簡單的產品部署來說也是如此)。相關信息(例如應用日志、系統日志/事件)被放置在若干主機/組件、實例中。如何分析信息并找到錯誤的根源是極富挑戰性的工作。現有的方法一般通過查看單個案例的單個日志文件來查找問題，這不能檢測事件序列并獲得有用信息。在復雜的多生產環境中，找到問題根源非常困難，尤其是在存在多個噪聲信息時尤其如此。歷史性日志不能用于未來的診斷和對嚴重問題的預防。之前的信息在分析之后不能以適當形式保存。可以看到，要從復雜的事件中獲得問題的根源而不比較不同的日志信息是非常困難的。
技術實現思路
為了解決現有技術中存在的上述問題，本專利技術提出如下方案。根據本專利技術的第一方面，提供一種信息分析方法，包括：基于源信息集合生成元數據集合，所述元數據包括錯誤日志信息，所述錯誤日志信息在所述元數據集合中構成錯誤序列；以及為多個所述元數據集合生成共同錯誤序列集合。根據本專利技術的第二方面，提供一種信息分析系統，包括：預處理裝置，用于基于源信息集合生成元數據集合，所述元數據包括錯誤日志信息，所述錯誤日志信息在所述元數據集合中構成錯誤序列；以及<br>共同序列生成裝置，用于為多個所述元數據集合生成共同錯誤序列集合。附圖說明圖1是示出了根據本專利技術的、用于信息分析的方法100的流程圖。圖2是示出了根據本專利技術實施方式的、用于生成元數據集合的示例圖。圖3是示出了根據本專利技術實施方式的、用于生成共同錯誤序列集合的示例圖。圖4是示出了根據本專利技術的、用于信息分析的系統400的框圖。圖5是示出了適于用來實踐本專利技術實施方式的計算機系統500的示意性框圖應當注意，附圖中的流程圖和框圖，圖示了按照本專利技術各種實施例的裝置、方法和計算機程序產品的可能實現的體系架構、功能和操作。在這點上，流程圖或框圖中的每個方框可以代表一個模塊、程序段、或代碼的一部分，所述模塊、程序段、或代碼的一部分包含一個或多個用于實現規定的邏輯功能的可執行指令。也應當注意，在有些作為替換的實現中，方框中所標注的功能也可以以不同于附圖中所標注的順序發生。例如，兩個接連地表示的方框實際上可以基本并行地執行，它們有時也可以按相反的順序執行，這依所涉及的功能而定。也要注意的是，框圖和/或流程圖中的每個方框、以及框圖和/或流程圖中的方框的組合，可以用執行規定的功能或操作的專用的基于硬件的系統來實現，或者可以用專用硬件與計算機指令的組合來實現。具體實施方式下面將參考若干示例性實施方式來描述本專利技術的原理和精神。應當理解，給出這些實施方式僅僅是為了使本領域技術人員能夠更好地理解進而實現本專利技術，而并非以任何方式限制本專利技術的范圍。為了對信息進行分析，首先應當采集作為分析基礎的信息。針對分析所采集的信息包括例如來自不同的客戶環境的不同的源的應用程序日志、系統事件/日志、流程/線程堆棧、用戶/應用記錄等。術語“日志”用來表示所有這類信息，大多數“日志”為非結構化數據。而“錯誤日志信息”用于表示“日志”中與錯誤有關的信息。要注意的是，這里所稱的術語“錯誤(error)”是廣義的，其可以包括運行時錯誤(runtime?error)、警告(warn)、調試信息(DEBUG)以及I?NFO等等各種級別的與出錯或潛在的危險有關的信息，并且其還可以隨時由用戶來調整其所覆蓋的范圍。在日志中存在的錯誤日志信息的特點可以歸納如下：1.重復性：如果錯誤是由軟件問題所引起的，則它們會在客戶的環境中發生，并且該問題會被報告多次。2.因果關系：如果在特定序列中若干錯誤頻繁發生，則它們在很大程度上具有因果關系；3.分布性：日志分布在若干主機/組件/實例中，一些由生產、中間件所產生，另一些由操作系統OS(如Windows事件)或CPU/存儲器/網絡的系統日志所產生。4.前兆性：許多錯誤不會突然地發生，它們具有一些前兆性的錯誤或者警告事件。5.滯后性：許多錯誤不會立即停止，而是會引起后續的錯誤。6.嚴重性：通常較早期的錯誤具有較小的破壞性，而較后期的錯誤則具有較大的破壞性。由于上述特點，對于長期存在的生產/方案系統而言，存在許多來自客戶案例用于數據挖掘的歷史日志。在本公開中，引入了基于日志中的共同序列模式的、用于智能客戶服務的分析系統，共同序列也是生產中的共同問題。這些模式將用于對不同的問題進行分類，找到不同的癥狀的根源，在發生嚴重問題之前設計“預激活”的解決方案等等。圖1是示出了根據本專利技術的、用于信息分析的方法100的流程圖。應理解的是，方法100中記載的各個步驟可以按照不同的順序執行，和/或并行執行。方法100還可以包括附加的步驟和/或省略執行示出的步驟。本專利技術的范圍在此方面不受限制。為更好地描述本專利技術，以下結合附圖2和附圖3來詳細描述方法100。圖2是示出了根據本發明實施方式的、用于生成元數據集合的示例圖。圖3是示出了根據本專利技術實施方式的、用于生成共同錯誤序列集合的示例圖。本領域技術人員應理解，附圖2和附圖3僅為示例，而非對本專利技術的限制。方法100開始之后，首先進到步驟S102，基于源信息集合生成元數據集合。要注意的是，這里所稱的源信息包括各種信息，例如如前文所述的來自客戶環境的不同的源(source)的諸如應用程序日志、系統事件、系統日志、流程堆棧、線程堆棧、用戶記錄、應用程序記錄之類的信息。這些源信息作為分析的依據。并且，步驟S102中的元數據(metedata)包括錯誤日志信息，該錯誤日志信息在所述元數據集合中構成錯誤序列(error?sequence)。除了錯誤日志信息之外，元數據還可以包括時間信息。由于來自不同源數據的時間信息的格式往往不同，因此為便于比較，還需要歸一化(normalize)時間信息的格式(即調整時間差異)，從而將日志合并為單個列表以用于單個視圖。除此之外，元數據還可以包括日志等級和/或所述錯誤日志信息的出處，例如錯誤日志信息所述的日志文件來自于哪個線程或哪個組件等。在提取元數據時，有時可以僅選擇錯誤日志等級在錯誤/警告以上的日志本文檔來自技高網...

【技術保護點】
一種信息分析方法，包括：基于源信息集合生成元數據集合，所述元數據包括錯誤日志信息，所述錯誤日志信息在所述元數據集合中構成錯誤序列；以及為多個所述元數據集合生成共同錯誤序列集合。

【技術特征摘要】
1.一種信息分析方法，包括：
基于源信息集合生成元數據集合，所述元數據包括錯誤日志信
息，所述錯誤日志信息在所述元數據集合中構成錯誤序列；以及
為多個所述元數據集合生成共同錯誤序列集合。
2.根據權利要求1所述的方法，其中所述元數據還包括時間信
息，并且所述方法進一步包括：
在所述第一集合中歸一化所述時間信息。
3.根據權利要求1所述的方法，進一步包括：
在所述元數據集合中去除重復的錯誤日志信息。
4.根據權利要求3所述的方法，其中所述去除重復的錯誤日志
信息進一步包括去除以下中的一個或多個類型的消息：
完全相同的錯誤日志、僅非關鍵部分不同而其它部分完全相同的
錯誤日志、關鍵部分相同的錯誤日志、用戶認定為重復的錯誤日志。
5.根據權利要求3所述的方法，其中所述去除重復的錯誤日志
信息進一步包括通過機器學習進行和/或由用戶進行。
6.根據權利要求1-5之任一所述的方法，其中所提取的元數據
為設定時間段內的元數據和/或來自設定的源。
7.根據權利要求1-5之任一所述的方法，其中為多個所述元數
據集合生成共同錯誤序列集合進一步包括：
為多個所述元數據集合中的每兩個所述元數據集合生成共同錯
誤序列集合；以及
將所生成的每兩個所述元數據集合的共同錯誤序列集合合并為
所述多個元數據集合的共同錯誤序列集合。
8.根據權利要求7所述的方法，其中為多個所述元數據集合中
的每兩個所述元數據集合生成共同錯誤序列集合為并行進行。
9.根據權利要求7所述的方法，其中將所生成的每兩個所述元
數據集合的共同錯誤序列集合合并為所述多個元數據集合的共同錯
誤序列集合進一步包括：
統計每個共同錯誤序列出現的次數。
10.根據權利要求1-5之任一所述的方法，其中所述錯誤序列標
識所述錯誤日志信息之間的聯系。
11.根據權利要求1-5之任一所述的方法，其中所述源信息包括
與以下中的一個或多個相關的信息：應用程序日志、系統事件、系統
日志、流程堆棧、線程堆棧、用戶記錄、應用程序記錄；和/或
所述錯誤日志信息包括與以下中的一個或多個相關的信息：運行
時錯誤、警告、調試。
12.根據權利要求1-5之任一所述的方法，其中所述元數據進一
步包括日志等級和/或所述錯誤日志信息的出處。
13.根據權利要求1-5之任一所述的方法，其中所述共同錯誤序
列集合包括多個所述元數據集合中相同的錯誤日志信息構成的錯誤
序列的集合。
14.根據權利要求13所述的方法，其中相同的錯誤日志信息構
成的錯誤序列的長度大于設定閾值。
15.根據權利要求13所述的方法，其中所述相同的判斷標準由
用戶設定。
16.一種信息分析系統，包括：
預處理...

【專利技術屬性】
技術研發人員：陳超，付宇，鐘錢杰，劉晶晶，陳齊彥，
申請(專利權)人：伊姆西公司，
類型：發明
國別省市：美國;US