TW201635171A - 圖形溝通系統與方法 - Google Patents

Abstract

一種圖形溝通系統與方法，係於行動裝置建置一圖形溝通系統，該圖形溝通系統包含一語音轉換單元、一圖形資料庫、一搜尋單元或/及一畫面擷取單元，使用者可朝向行動裝置口述一詞語或連續口述複數個詞語，則該語音轉換單元可將詞語轉換為文字，並透過該搜尋單元搜尋對應文字意涵之圖形，再顯示於該行動裝置之螢幕，該畫面擷取單元則可自動擷取螢幕之畫面儲存於行動裝置之相片庫，俾使用者可直接將該圖形給予操不同語言者觀看，或開啟該行動裝置之相片庫，連續播放各該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

Description

圖形溝通系統與方法

本發明係與不同語言使用者間溝通之裝置有關，更詳而言之是指一種可利用圖形進行溝通之圖形溝通系統與方法者。

隨著生活水準之提升，現代人日益注重休閒活動，家庭經濟較為寬裕者更常會安排出國旅遊之行程。出國旅遊不論是跟旅行團或自由行之方式，難免會有需與外國人溝通、詢問之狀況，自由行之旅遊方式更為如此。

英語可算是目前國際共通之語言，若本身的英語程度足以與外國人溝通，出遊時較不會有無法與外國人溝通之情形，惟若本身的英語程度較弱，除非有英語程度不錯之友人同行，否則多係使用語言翻譯機來進行口語或文字溝通。

雖然目前所見之語言翻譯機可針對語詞或句子進行不同語言之翻譯，以達成與操不同語言者溝通之效果，不過，一般而言，就翻譯之正確性而言，簡單句子之翻譯較無問題，而複雜之句子較易產生翻譯失真的情形，此乃涉及翻譯軟體與資料庫之開發考量，而越多國語言之翻譯軟體程 式也更複雜，開發費用則更為高昂。

其次，人類有口語、文字、圖片(圖形、圖案)或手語等多種溝通方式，前述利用語言翻譯機來進行口語或文字之溝通較花費時間，而圖片則比口語、文字更能快速提供訊息、達成溝通效果，克服語言的障礙，不過，目前為止並無可供利用圖形與操不同語言者進行溝通之裝置。

本發明之主要目的即在提供一種圖形溝通系統與方法，其可供使用者利用隨身攜帶之行動裝置，以圖形與操不同語言者進行溝通或詢問，溝通效果較習知語言或文字翻譯溝通之方式更直接、有效，甚具實用價值者。

緣是，為達成前述之目的，本發明係提供一種圖形溝通系統，包含有一語音轉換單元，內建於一行動裝置並連接行動裝置之收音裝置，用以可將使用者口述之語音轉換為文字，並顯示於該行動裝置之觸控螢幕供確認；一圖形資料庫，包含有可顯示特定文字意涵之複數圖形；一搜尋單元，內建於該行動裝置，並連接該語音轉換單元與圖形資料庫，用以可搜尋對應文字意涵之圖形，並將其顯示於該行動裝置之觸控螢幕。

進一步地，該行動裝置係可連接網路之智慧型手機。

進一步地，該語音轉換單元係行動裝置內建之 應用程式。

進一步地，該圖形資料庫係建置於網路雲端或行動裝置之一，該搜尋單元係透過網路連接圖形資料庫、搜尋圖形。

進一步地，該搜尋單元係Google圖形搜尋引擎。

進一步地，更包含有一畫面擷取單元，建置於該行動裝置並連接該搜尋單元，用以當搜尋之圖形顯示於行動裝置之螢幕時可自動擷取螢幕之畫面，並儲存於該行動裝置之相片庫供檢視。

進一步地，該語音轉換單元、搜尋單元與畫面擷取單元係運用一PHONE GAP應用程式整合、建置於行動裝置。

此外，本發明更提供一種運用前述圖形溝通系統之圖形溝通方法，係先朝向一行動裝置口述一語詞，再透過該語音轉換單元將該語詞轉換為文字，繼而透過該搜尋單元搜尋對應語詞文字意涵之圖形，最後，將圖形顯示於該行動裝置之螢幕，俾使用者可將該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

此外，本發明更提供一種運用前述圖形溝通系統之圖形溝通方法，係先朝向一行動裝置口述一詞語，再透過該語音轉換單元將該詞語轉換為文字，繼而透過該搜尋單元搜尋對應文字意涵之圖形，再將圖形顯示於該行動裝置之 螢幕，再自動擷取該螢幕之畫面儲存於行動裝置之相片庫，俾使用者可直接將該螢幕之圖形給予操不同語言者觀看，或開啟該行動裝置之相片庫尋找該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

進一步地，使用者可連續朝向該行動裝置口述複數個不同詞語，使該行動裝置可自動擷取對應不同詞語意涵之複數圖形，並儲存於行動裝置之相片庫，俾使用者可開啟該行動裝置之相片庫，連續播放各該圖形給予操不同語言者觀看，提升透過圖形溝通或詢問之效果。

1‧‧‧行動裝置

2‧‧‧觸控螢幕

3‧‧‧語言選擇區

4‧‧‧麥克風

5‧‧‧文字顯示區

6‧‧‧啟動鍵

7‧‧‧圖形顯示區

8‧‧‧相片庫

10‧‧‧圖形溝通系統

12‧‧‧語音轉換單元

14‧‧‧圖形資料庫

16‧‧‧搜尋單元

20‧‧‧圖形溝通系統

22‧‧‧畫面擷取單元

100‧‧‧圖形溝通方法

110‧‧‧朝向行動裝置口述一語詞

120‧‧‧透過語音轉換單元將語詞轉換為文字

130‧‧‧透過搜尋單元搜尋對應語詞文字意涵之圖形

140‧‧‧將圖形顯示於行動裝置之螢幕

150‧‧‧自動擷取螢幕之畫面儲存於行動裝置之相片庫

第一圖係本發明一較佳實施例之系統圖。

第二圖至第四圖係本發明一較佳實施例之使用狀態圖，顯示行動裝置供進行錄音、選擇文字與圖形之示意圖。

第五圖係本發明另一較佳實施例之系統圖。

第六圖係本發明再一較佳實施例方法之流程圖。

第七圖係本發明又一較佳實施例方法之流程圖。

為使貴 審查委員能對本發明之特徵與特點有更進一步之了解與認同，茲列舉以下數個較佳實施例並配合圖式說明如下：首先，請參閱第一圖所示，本發明一較佳實施 例之圖形溝通系統10，係建置於一行動裝置1，例如可連接網路之智慧型手機，如目前常見Android與I-OS二系統之智慧型手機，本發明以智慧型手機為實施例，但不排除其他可連接網路之行動裝置1，如平板電腦等，可設為於智慧型手機運作之App應用程式，供使用者利用圖形與操不同語言者進行溝通或詢問，包含有一語音轉換單元12、一圖形資料庫14與一搜尋單元16。

該語音轉換單元12，係儲存於行動裝置1之應用程式或行動裝置內建之韌體，如Google語音辨識引擎等，本實施例係採用Google語音辨識引擎，用以可利用行動裝置1之麥克風將使用者口述之語音收音並轉換為文字，進而顯示若干語音近似之文字於行動裝置之觸控螢幕上供使用者選擇、確認。

該圖形資料庫14，可建置於行動裝置1(自建美工圖片庫)或位於網路雲端(可透過網路搜尋而得)，包含有可顯示特定文字意涵之複數圖形，本實施例係透過網路、搜尋圖形。

該搜尋單元16，係搜尋引擎，可建置於行動裝置1或為網路搜尋引擎，如Google圖形、地圖搜尋引擎等，並連接該語音轉換單元12與圖形資料庫14，用以可搜尋對應確認後文字意涵之圖形，並將若干文字意涵類似之圖形顯示於該行動裝置之觸控螢幕供選擇，本實施例係運用Google圖 形、地圖搜尋引擎。

此外，該語音轉換單元12與搜尋單元16係運用一PHONE GAP應用程式整合、建置於行動裝置1(如整合為可驅動Google語音辨識引擎與Google圖形、地圖搜尋引擎之一APP應用程式)，該PHONE GAP應用程式係習知可供撰寫跨平台(如Android、I-OS)智慧型手機APP之應用程式，藉以可供驅動智慧型手機之相機、喇叭、麥克風、GPS定位、感測器、數位羅盤等功能，此處不予贅述其詳細技術。

藉此，本發明該圖形溝通系統10之使用方式與特色、功效如下：使用者出國遊玩欲與外國人溝通或詢問事物時，可啟動該圖形溝通系統10，如第二圖所示，先於行動裝置1之螢幕2(觸控螢幕)上之語言選擇區3選擇自己之語言，再按下螢幕2上所顯示之麥克風4圖示，則該圖形溝通系統10可促使行動裝置1開始錄音，使用者即可口述欲溝通或詢問事物之語詞，如地址、車站、地標、店名、食物等等，則行動裝置1將所錄製之語音輸送至該語音轉換單元12後，該語音轉換單元12即可將複數個與語音近似之文字顯示於螢幕2之文字顯示區5供使用者選擇、確認，如第三圖所示，再按下螢幕2上之麥克風4圖示以停止錄音。

當使用者於該螢幕2上選擇、確認正確涵意之文字後，點擊該螢幕2上之啟動鍵6，則該搜尋單元16即可開始 運作，以搜尋對應確認後文字意涵之圖形，並可將與文字意涵接近之複數個圖形顯示於螢幕1上之圖形顯示區7供選擇，如第四圖所示。如此一來，使用者即可選擇合適之圖形、並觸碰螢幕2，使該張被選擇之圖形放大顯示於螢幕2，供使用者給予他人觀看，俾可利用圖形與操不同語言者進行溝通或詢問事物，有別於習知使用語言翻譯機與外國人溝通之方式。

習知利用語言翻譯機與外國人溝通，屬於口語或文字之溝通方式，語言翻譯機翻譯之正確性，會影響溝通之效率與正確性，而本創作利用圖形溝通之方式可較語言或文字更為直接、正確，溝通效果較使用語言翻譯機溝通之方式更佳，獲致跨越語言藩籬、直接溝通之功效。

據此，本發明藉由在使用者隨身攜帶之行動裝置中建置圖形溝通系統之構成，可供使用者將欲溝通或詢問外國人之事物對行動裝置口述，則該圖形溝通系統即可透過語音轉換單元、圖形資料庫與搜尋單元之配合，將語音轉換為文字供使用者選擇、確認後，自動搜尋出與文字意涵相同或接近之圖形，供使用者利用選擇之圖形與操不同語言者進行溝通或詢問，溝通效果較習知語言或文字翻譯溝通之方式更佳，甚具實用價值者。

此外，經發明人實際測試該圖形溝通系統10之運作，該語音轉換單元12將語音轉換為文字之辨識率、正確 率甚高，因此，不需於行動裝置1之螢幕2顯示若干文字供使用者選擇、確認，而該搜尋單元16聯結圖形資料庫14搜尋出對應文字意涵圖形之正確率亦甚高，是以，亦不需於行動裝置1之螢幕2顯示若干圖形供使用者選擇，藉此，可簡化該圖形溝通系統10於行動裝置1上之顯示、操作模式，提高使用者操作之便利性，亦即，當使用者按下該螢幕2上所顯示之麥克風4圖示進行錄音後，該語音轉換單元12可直接將語音轉換為文字，供該搜尋單元16進行搜尋對應文字意涵之圖形，並可將與文字意涵接近之一個圖形顯示於螢幕1上，供使用者利用選擇之圖形與操不同語言者進行溝通或詢問，而前述該圖形溝通系統10於行動裝置1上顯示、操作模式之簡化，係透過前述PHONE GAP應用程式進行調整即可完成，而此等技術乃屬習知，此處不予贅述。

如第五圖所示，係本發明另一較佳實施例之圖形溝通系統20，其構成大體上與該圖形溝通系統10略同，除了包含前述語音轉換單元12、圖形資料庫14與搜尋單元16外，不同處在於更包含有一畫面擷取單元22，亦可透過前述PHONE GAP應用程式整合、建置於行動裝置1並連接搜尋單元16。藉此，該圖形溝通系統20之運作模式亦概與圖形溝通系統10略同，特別的是，當使用者透過圖形溝通系統20之運作，而使圖形顯示於行動裝置1之螢幕2時，該畫面擷取單元22可自動擷取螢幕2上之圖形畫面，並儲存於該行動裝置1之 相片庫8(智慧型手機與平板電腦均有之相片集)供檢視，用以供使用者可直接將該螢幕1之圖形給予操不同語言者觀看，或開啟該行動裝置1之相片庫8尋找該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

由上可知，如第六圖所示，本發明更提供一種運用該圖形溝通系統10之圖形溝通方法100，係包含先朝向該行動裝置1口述一語詞之步驟110，再透過該語音轉換單元12將語詞轉換為文字之步驟120，繼而透過該搜尋單元16搜尋對應語詞文字意涵圖形之步驟130，最後，可將圖形顯示於該行動裝置1之螢幕2之步驟140，俾使用者可將該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

此外，如第七圖所示，本發明更提供一種運用該圖形溝通系統20之圖形溝通方法200，除了包含前述該圖形溝通方法100之步驟110-140外，更包含自動擷取該螢幕2之畫面儲存於行動裝置1相片庫之步驟150，俾使用者除了可直接將該螢幕2之圖形給予操不同語言者觀看，亦可開啟該行動裝置1之相片庫尋找該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。

再者，本發明更提供一種運用該圖形溝通系統20之圖形溝通方法，係使用者可連續朝向該行動裝置1口述複數個詞語，如依序口述”火車站”、”路”與”方向”，使該行動裝置1可自動擷取對應不同詞語意涵之複數圖形，並儲存 於行動裝置1之相片庫8(即重複實施該圖形溝通方法200之步驟110-150)，例如可自動擷取依序顯示”火車站”、”路”與”方向”圖形之三個螢幕2畫面，俾使用者可開啟該行動裝置1之相片庫，連續播放(手指連續撥動行動裝置1之螢幕2所顯示之圖形)”火車站”、”路”與”方向”三個圖形給予操不同語言者觀看，使操不同語言者可透過各該圖形，了解使用者想要詢問的事項是”火車站是在哪條路以及朝哪個方向走”，提升透過圖形溝通或詢問之效果。

惟，以上所述僅為本發明之若干較佳實施例，當不能以此限定本發明之申請專利保護範圍，舉凡依本發明之申請專利範圍及說明書內容所作之簡單的等效變化與替換，皆應仍屬於本發明申請專利範圍所涵蓋保護之範圍內。

10‧‧‧圖形溝通系統

12‧‧‧語音轉換單元

14‧‧‧圖形資料庫

16‧‧‧搜尋單元

1‧‧‧行動裝置

Claims (10)

1. 一種圖形溝通系統，係建置於一行動裝置，可供使用者利用圖形與操不同語言者進行溝通或詢問，包含有：一語音轉換單元，內建於該行動裝置並連接行動裝置之收音裝置，用以可將使用者口述之語音轉換為文字；一圖形資料庫，包含有可顯示特定文字意涵之複數圖形；及一搜尋單元，建置於該行動裝置，並連接該語音轉換單元與圖形資料庫，用以可搜尋對應文字意涵之圖形，並將其顯示於該行動裝置之螢幕。
2. 如申請專利範圍第1項所述之圖形溝通系統，其中，該行動裝置係可連接網路之智慧型手機。
3. 如申請專利範圍第2項所述之圖形溝通系統，其中，該語音轉換單元係行動裝置內建之應用程式。
4. 如申請專利範圍第2項所述之圖形溝通系統，其中，該圖形資料庫係建置於網路雲端或行動裝置之一，該搜尋單元係透過網路連接圖形資料庫、搜尋圖形。
5. 如申請專利範圍第4項所述之圖形溝通系統，其中，該搜尋單元係Google圖形搜尋引擎。
6. 如申請專利範圍第4項所述之圖形溝通系統，其中，更包含有一畫面擷取單元，建置於該行動裝置並連接該搜尋單元，用以當搜尋之圖形顯示於行動裝置之螢幕時可自動擷取螢幕之畫面，並儲存於該行動裝置之相片庫供檢視。
7. 如申請專利範圍第6項所述之圖形溝通系統，其中，該語 音轉換單元、搜尋單元與畫面擷取單元係運用一PHONE GAP應用程式整合、建置於行動裝置。
8. 一種運用如申請專利範圍第1項所述圖形溝通系統之圖形溝通方法，係先朝向一行動裝置口述一語詞，再透過該語音轉換單元將該語詞轉換為文字，繼而透過該搜尋單元搜尋對應語詞文字意涵之圖形，最後，將圖形顯示於該行動裝置之螢幕，俾使用者可將該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。
9. 一種運用如申請專利範圍第6項所述圖形溝通系統之圖形溝通方法，係先朝向一行動裝置口述一詞語，再透過該語音轉換單元可將該詞語轉換為文字，繼而透過該搜尋單元搜尋對應文字意涵之圖形，再將圖形顯示於該行動裝置之螢幕，再自動擷取該螢幕之畫面儲存於行動裝置之相片庫，俾使用者可直接將該螢幕之圖形給予操不同語言者觀看，或開啟該行動裝置之相片庫尋找該圖形給予操不同語言者觀看，獲致透過圖形溝通或詢問之效果。
10. 如申請專利範圍第9項所述之圖形溝通方法，其中，使用者可連續朝向該行動裝置口述複數個詞語，使該行動裝置可自動擷取對應不同詞語意涵之複數圖形，並儲存於行動裝置之相片庫，俾使用者可開啟該行動裝置之相片庫，連續播放各該圖形給予操不同語言者觀看，提升透過圖形溝通或詢問之效果。