本發(fā)明專(zhuān)利技術(shù)公開(kāi)了一種移動(dòng)終端的學(xué)習(xí)方法及學(xué)習(xí)系統(tǒng)，所述方法包括以下步驟：步驟1.通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器；步驟2.服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息；步驟3.根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信息；步驟4.將學(xué)習(xí)資料信息發(fā)送至移動(dòng)終端，并將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。本發(fā)明專(zhuān)利技術(shù)通過(guò)建立服務(wù)器與移動(dòng)終端的連接，獲取互聯(lián)網(wǎng)的信息給用戶(hù)，為用戶(hù)提供簡(jiǎn)單實(shí)用、內(nèi)容豐富形象的學(xué)習(xí)方式，且能實(shí)時(shí)進(jìn)行更新。
【技術(shù)實(shí)現(xiàn)步驟摘要】
本專(zhuān)利技術(shù)涉及一種移動(dòng)終端的學(xué)習(xí)方法及其學(xué)習(xí)系統(tǒng)，特別是涉及一種基于圖像識(shí)別和增強(qiáng)現(xiàn)實(shí)技術(shù)的移動(dòng)終端的學(xué)習(xí)方法及其學(xué)習(xí)系統(tǒng)。
技術(shù)介紹
現(xiàn)有的輔助學(xué)習(xí)電子產(chǎn)品有點(diǎn)讀機(jī)和學(xué)習(xí)電腦。點(diǎn)讀機(jī)需要使用專(zhuān)門(mén)的點(diǎn)讀機(jī)設(shè)備，下載與教材相關(guān)的固件，只能實(shí)現(xiàn)簡(jiǎn)單的語(yǔ)音朗讀和復(fù)讀功能。學(xué)習(xí)電腦提供了豐富的多媒體功能，但在操作上，需要手動(dòng)尋找與教材配置的資料，更換教材時(shí)，需要手動(dòng)下載新的資料。而且，它們作為一個(gè)獨(dú)立的設(shè)備，攜帶起來(lái)也不方便。也有在移動(dòng)終端(如手機(jī)和平板電腦)上實(shí)現(xiàn)的學(xué)習(xí)類(lèi)應(yīng)用，可以提供用戶(hù)文字和多媒體學(xué)習(xí)資料。但這些應(yīng)用，仍然是需要用戶(hù)根據(jù)具體的教材或文字，手動(dòng)搜索和查找匹配的資料，使用起來(lái)不夠簡(jiǎn)單方便。
技術(shù)實(shí)現(xiàn)思路
本專(zhuān)利技術(shù)的目的在于克服現(xiàn)有技術(shù)的不足，提供一種移動(dòng)終端的學(xué)習(xí)方法及其學(xué)習(xí)系統(tǒng)，為用戶(hù)提供簡(jiǎn)單實(shí)用、內(nèi)容豐富形象的學(xué)習(xí)方式，且能實(shí)時(shí)進(jìn)行更新。為了達(dá)到上述目的，本專(zhuān)利技術(shù)采用的技術(shù)方案是，一種移動(dòng)終端的學(xué)習(xí)方法，包括以下步驟步驟1.通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器；步驟2.服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息；步驟3.根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信步驟4.將學(xué)習(xí)資料信息發(fā)送至移動(dòng)終端，并將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。進(jìn)一步的，步驟I所述的圖像上的信息類(lèi)型進(jìn)行識(shí)別具體包括步驟S101.在移動(dòng)終端建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)；步驟S102.獲取圖像上的信息；步驟S103.將圖像信息與圖像信息類(lèi)型數(shù)據(jù)庫(kù)內(nèi)的信息進(jìn)行比較，得到圖像信息類(lèi)型。進(jìn)一步的，步驟SlOl所述的建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)通過(guò)嵌入文字模板與圖片模板實(shí)現(xiàn)，該文字模板與圖片模板為多幅。進(jìn)一步的，步驟I所述的移動(dòng)終端將該圖像傳送給服務(wù)器通過(guò)WIF1、3G、LTE建立移動(dòng)終端與服務(wù)器的連接實(shí)現(xiàn)。進(jìn)一步的，步驟2具體包括步驟S201.服務(wù)器對(duì)圖像進(jìn)行逐幀掃描； 步驟S202.對(duì)每一幀的文字或/和圖片信息進(jìn)行提取； 步驟S203.對(duì)提取的信息進(jìn)行分析處理； 步驟S204.輸出可編輯格式的文字或/和圖片信息。進(jìn)一步的，步驟3具體包括 步驟S301.根據(jù)識(shí)別的文字或/和圖片信息對(duì)服務(wù)器數(shù)據(jù)庫(kù)進(jìn)行搜索； 步驟S302.將搜索到的相關(guān)學(xué)習(xí)資料與文字或/和圖片信息進(jìn)行匹配； 步驟S303.獲取匹配度最高的一種或幾種學(xué)習(xí)資料。進(jìn)一步的，所述的服務(wù)器數(shù)據(jù)庫(kù)為網(wǎng)絡(luò)服務(wù)器數(shù)據(jù)庫(kù)，包括能獲取的所有文字與視頻資料，并根據(jù)互聯(lián)網(wǎng)的學(xué)習(xí)資料更新進(jìn)行實(shí)時(shí)更新。進(jìn)一步的，步驟4具體包括 步驟S401.移動(dòng)終端接收到服務(wù)器發(fā)送的學(xué)習(xí)資料信息； 步驟S402.將學(xué)習(xí)資料保存為可編輯格式； 步驟S403.將學(xué)習(xí)資料與課本原始圖像的進(jìn)行疊加； 步驟S404.在移動(dòng)終端觸摸屏上顯示課本原始圖像，并將學(xué)習(xí)資料顯示在相關(guān)文字或圖片的一側(cè)。進(jìn)一步的，步驟S403所述的疊加通過(guò)增強(qiáng)現(xiàn)實(shí)方法實(shí)現(xiàn)。一種根據(jù)所述的移動(dòng)終端的學(xué)習(xí)方法的學(xué)習(xí)系統(tǒng)，包括 圖像信息類(lèi)型分析模塊，設(shè)置于移動(dòng)終端，用于通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器； 圖像信息識(shí)別模塊，設(shè)置于服務(wù)器內(nèi)，用于服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息； 調(diào)出學(xué)習(xí)資料信息模塊，設(shè)置于服務(wù)器內(nèi)，用于根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信息； 學(xué)習(xí)資料疊加生成模塊，設(shè)置于移動(dòng)終端，用于將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。與現(xiàn)有技術(shù)相比，本專(zhuān)利技術(shù)的有益效果是通過(guò)建立服務(wù)器與移動(dòng)終端的連接，獲取互聯(lián)網(wǎng)的信息給用戶(hù)，為用戶(hù)提供簡(jiǎn)單實(shí)用、內(nèi)容豐富形象的學(xué)習(xí)方式，且能實(shí)時(shí)進(jìn)行更新。附圖說(shuō)明圖1為本專(zhuān)利技術(shù)的方法流程圖。具體實(shí)施例方式下面結(jié)合實(shí)施例參照附圖進(jìn)行詳細(xì)說(shuō)明，以便對(duì)本專(zhuān)利技術(shù)的技術(shù)特征及優(yōu)點(diǎn)進(jìn)行更深入的詮釋。本專(zhuān)利技術(shù)的方法流程圖如圖1所示，一種移動(dòng)終端的學(xué)習(xí)方法，包括以下步驟 步驟1.通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器；一般在移動(dòng)終端開(kāi)機(jī)后，打開(kāi)攝像頭，通過(guò)攝像頭捕捉課本圖像，所述的課本可以是各種版本教程和課外的輔導(dǎo)材料等，只要是具有文字或圖片信息的書(shū)本或紙張即可。步驟I所述的圖像上的信息類(lèi)型進(jìn)行識(shí)別具體包括步驟S101.在移動(dòng)終端建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)，步驟SlOl所述的建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)通過(guò)嵌入文字模板與圖片模板實(shí)現(xiàn)，該文字模板與圖片模板為多幅，例如可以是通過(guò)采集100幅圖片生成模板，或者根據(jù)文字偏旁部首生成的文字模板；步驟S102.獲取圖像上的信息；步驟S103.將圖像信息與圖像信息類(lèi)型數(shù)據(jù)庫(kù)內(nèi)的信息進(jìn)行比較，得到圖像信息類(lèi)型。步驟I所述的移動(dòng)終端將該圖像傳送給服務(wù)器通過(guò)WIF1、3G、LTE (是英文Long Term Evolution的縮寫(xiě)。LTE也被通俗地稱(chēng)為3. 9G)等建立移動(dòng)終端與服務(wù)器的連接實(shí)現(xiàn)。步驟2.服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息。步驟2具體包括步驟S201.服務(wù)器對(duì)圖像進(jìn)行逐幀掃描；步驟S202.對(duì)每一幀的文字或/和圖片信息進(jìn)行提??；步驟S203.對(duì)提取的信息進(jìn)行分析處理，根據(jù)文字庫(kù)或圖片庫(kù)進(jìn)行分析處理，得到具體的文字和較為清晰的圖片信息；步驟S204.輸出可編輯格式的文字或/和圖片信息，此舉是為了方便進(jìn)行搜索。服務(wù)器內(nèi)收集存儲(chǔ)有各種版本教材和各科課文的輔導(dǎo)資料，并且能隨時(shí)進(jìn)行更新。步驟3.根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信息。步驟3具體包括步驟S301.根據(jù)識(shí)別的文字或/和圖片信息對(duì)服務(wù)器數(shù)據(jù)庫(kù)進(jìn)行搜索；步驟S302.將搜索到的相關(guān)學(xué)習(xí)資料與文字或/和圖片信息進(jìn)行匹配；步驟S303.獲取匹配度最高的一種或幾種學(xué)習(xí)資料，例如名稱(chēng)解釋、名詞解釋、名師講解、課后輔導(dǎo)等等。所述的服務(wù)器數(shù)據(jù)庫(kù)為網(wǎng)絡(luò)服務(wù)器數(shù)據(jù)庫(kù)，包括能獲取的所有文字與視頻資料，并根據(jù)互聯(lián)網(wǎng)的學(xué)習(xí)資料更新進(jìn)行實(shí)時(shí)更新。步驟4.將學(xué)習(xí)資料信息發(fā)送至移動(dòng)終端，并將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。步驟4具體包括步驟S401.移動(dòng)終端接收到服務(wù)器發(fā)送的學(xué)習(xí)資料信息；步驟S402.將學(xué)習(xí)資料保存為可編輯格式；步驟S403.將學(xué)習(xí)資料與課本原始圖像的進(jìn)行疊加；步驟S404.在移動(dòng)終端觸摸屏上顯示課本原始圖像，并將學(xué)習(xí)資料顯示在相關(guān)文字或圖片的一側(cè)。進(jìn)一步的，步驟S403所述的疊加通過(guò)增強(qiáng)現(xiàn)實(shí)方法實(shí)現(xiàn)。本專(zhuān)利技術(shù)使用現(xiàn)在已比較成熟的圖像識(shí)別和增強(qiáng)現(xiàn)實(shí)(AR)技術(shù)，在越來(lái)越普及的移動(dòng)終端(如手機(jī)和平板電腦)上，自動(dòng)識(shí)別書(shū)本內(nèi)容，聯(lián)網(wǎng)搜索數(shù)據(jù)庫(kù)，在移動(dòng)終端的顯示界面上，通過(guò)增強(qiáng)現(xiàn)實(shí)技術(shù)疊加顯示相關(guān)的文字和多媒體內(nèi)容，并提供交互操作。增強(qiáng)現(xiàn)實(shí)技術(shù)(Augmented RealityTechnique,簡(jiǎn)稱(chēng)AR)，是在虛擬現(xiàn)實(shí)基礎(chǔ)上發(fā)展起來(lái)的新技術(shù)，是通過(guò)計(jì)算機(jī)系統(tǒng)提供的信息增加用戶(hù)對(duì)現(xiàn)本文檔來(lái)自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
一種移動(dòng)終端的學(xué)習(xí)方法，包括以下步驟：步驟1.通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器；步驟2.服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息；步驟3.根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信息；步驟4.將學(xué)習(xí)資料信息發(fā)送至移動(dòng)終端，并將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。
【技術(shù)特征摘要】
1.ー種移動(dòng)終端的學(xué)習(xí)方法，包括以下步驟 步驟1.通過(guò)移動(dòng)終端的攝像頭捕捉課本圖像，并對(duì)圖像上的信息類(lèi)型進(jìn)行識(shí)別，所述的信息類(lèi)型包括文字信息類(lèi)型和圖片信息類(lèi)型，移動(dòng)終端將該圖像傳送給服務(wù)器； 步驟2.服務(wù)器對(duì)圖像信息進(jìn)行識(shí)別，提取圖像上的文字或/和圖片信息； 步驟3.根據(jù)識(shí)別的文字或/和圖片信息調(diào)出服務(wù)器數(shù)據(jù)庫(kù)內(nèi)與之對(duì)應(yīng)的學(xué)習(xí)資料信息； 步驟4.將學(xué)習(xí)資料信息發(fā)送至移動(dòng)終端，并將學(xué)習(xí)資料信息與攝像頭捕捉的課本原始圖像進(jìn)行疊加后顯示在移動(dòng)終端顯示界面上。2.根據(jù)權(quán)利要求1所述的移動(dòng)終端的學(xué)習(xí)方法，其特征在干，步驟I所述的圖像上的信息類(lèi)型進(jìn)行識(shí)別具體包括 步驟S101.在移動(dòng)終端建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)； 步驟S102.獲取圖像上的信息； 步驟S103.將圖像信息與圖像信息類(lèi)型數(shù)據(jù)庫(kù)內(nèi)的信息進(jìn)行比較，得到圖像信息類(lèi)型。3.根據(jù)權(quán)利要求2所述的移動(dòng)終端的學(xué)習(xí)方法，其特征在于步驟SlOl所述的建立圖像信息類(lèi)型數(shù)據(jù)庫(kù)通過(guò)嵌入文字模板與圖片模板實(shí)現(xiàn)，該文字模板與圖片模板為多幅。4.根據(jù)權(quán)利要求3所述的移動(dòng)終端的學(xué)習(xí)方法，其特征在于步驟I所述的移動(dòng)終端將該圖像傳送給服務(wù)器通過(guò)WIF1、3G、LTE建立移動(dòng)終端與服務(wù)器的連接實(shí)現(xiàn)。5.根據(jù)權(quán)利要求4所述的移動(dòng)終端的學(xué)習(xí)方法，其特征在于，步驟2具體包括 步驟S201.服務(wù)器對(duì)圖像進(jìn)行逐幀掃描； 步驟S202.對(duì)每ー幀的文字或/和圖片信息進(jìn)行提取； 步驟S203.對(duì)提取的信息進(jìn)行分析處理； 步驟S204.輸出可編輯格式的文字或/和圖片信息。6.根據(jù)權(quán)利要求5所述的移動(dòng)終端的學(xué)習(xí)方法，其特征在于，步驟3具體包...
【專(zhuān)利技術(shù)屬性】
技術(shù)研發(fā)人員：林尚波，
申請(qǐng)(專(zhuān)利權(quán))人：廣東歐珀移動(dòng)通信有限公司，
類(lèi)型：發(fā)明
國(guó)別省市：
還沒(méi)有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。