[go: up one dir, main page]

CN104599670A - 点读笔的语音识别方法 - Google Patents

点读笔的语音识别方法 Download PDF

Info

Publication number
CN104599670A
CN104599670A CN201510050221.4A CN201510050221A CN104599670A CN 104599670 A CN104599670 A CN 104599670A CN 201510050221 A CN201510050221 A CN 201510050221A CN 104599670 A CN104599670 A CN 104599670A
Authority
CN
China
Prior art keywords
individual character
pronunciation
recognition method
talking pen
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510050221.4A
Other languages
English (en)
Other versions
CN104599670B (zh
Inventor
张鑫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Boao Zongheng Network Technology Co ltd
Guangzhou Zib Artificial Intelligence Technology Co ltd
Original Assignee
CHENGDU XINGXUAN TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHENGDU XINGXUAN TECHNOLOGY Co Ltd filed Critical CHENGDU XINGXUAN TECHNOLOGY Co Ltd
Priority to CN201510050221.4A priority Critical patent/CN104599670B/zh
Publication of CN104599670A publication Critical patent/CN104599670A/zh
Application granted granted Critical
Publication of CN104599670B publication Critical patent/CN104599670B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明为了提高点读笔对于多音字的特殊发音的准确性，提供了一种点读笔的语音识别方法，包括：点读笔获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第一单字图像；对所述第一单字图像进行文字识别，得到第一单字；从词典中查找所述第一单字的发音；点读笔继续获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第二单字图像；对所述第二单字图像进行文字识别，得到第二单字；从词典中查找所述第一单字和第二单字是否构成特殊词组，所述特殊词组表示前两个字为所述第一单字和第二单字，且第二单字的发音非正常发音的词组。本方法能够对多音字在其所在的词语中自动发出具有正确的读音。

Description

点读笔的语音识别方法
技术领域
本发明涉及语音信号处理方法，更具体地，涉及一种点读笔的语音识别方法。
背景技术
目前市场上已有各种各样的点读笔，为人们的学习带来了极大的便利，辅助家长对孩子进行图书的点读、学习，但现有的点读笔其功能单调，不可实现语音识别的功能，本点读笔针对现有点读笔的不足，设计了一种可实现语音识别的点读笔，小朋友可以与点读笔进行语音对话和鹦鹉学舌，提高小朋友的语言表达能力和沟通能力。
然而，由于汉字是具有多音字的文字，现有的点读笔只能按照每个被识别出来的文字的标准发音(通常是字典或词典中，该字的第一个发音)而发音。这不利于使用者准确理解其含义，也不利于普通话的普及和儿童等使用者对文字发音的正确学习和掌握。
发明内容
本发明为了提高点读笔对于多音字的特殊发音(即除了词典或字典中的第一个被标出的读音之外的其他读音)的准确性，提供了一种点读笔的语音识别方法，包括：
(1)点读笔获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第一单字图像；
(2)对所述第一单字图像进行文字识别，得到第一单字；
(3)从词典中查找所述第一单字的发音；
(4)点读笔继续获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第二单字图像；
(5)对所述第二单字图像进行文字识别，得到第二单字；
(6)从词典中查找所述第一单字和第二单字是否构成特殊词组，所述特殊词组表示前两个字为所述第一单字和第二单字，且第二单字的发音非正常发音的词组。
进一步地，所述步骤(1)之前还包括步骤：根据词典训练单字与其读音之间的映射，并将这种映射中具有多个发音的单字进行标记。
进一步地，所述步骤(1)之前还包括根据所述标记生成正常发音规则和特殊发音规则。
进一步地，在步骤(3)和步骤(4)之间还包括：判断第一单字是否具有标记。
进一步地，如果所述第一单字具有标记，则在词典中查询以第一单字为首字的所有特殊词组。
进一步地，所述步骤(6)中，从词典中查找所述第一单字和第二单字是否构成特殊词组包括：判断第二单字是否为所述特殊词组的第二个字。
进一步地，所述步骤(6)还包括：如果不构成特殊词组，则根据正常发音规则发出第一单字和第二单字的语音，否则根据正常发音规则发出第一单字的语音，并根据特殊发音规则发出第二单字的语音。
进一步地，所述语音识别方法在步骤(6)之后，还包括：若第二单字的发音不正确，则重复步骤(4)到步骤(6)5次，则在最后一次重复步骤(6)时，强行根据正常发音规则发出第二单字的语音。
本发明的有益效果为：能够对多音字在其所在的词语中自动发出具有正确的读音，从而帮助点读笔的使用者正确理解待读取文字的含义，还有助于少年儿童纠正错误的发音习惯，更好地学习普通话。
附图说明
图1示出了根据本发明的优选实施例的方法流程框图。
具体实施方式
如图1所示，点读笔的语音识别方法包括如下步骤：
(1)根据词典训练单字与其读音之间的映射，并将这种映射中具有多个发音的单字进行标记，之后，根据所述标记生成正常发音规则和特殊发音规则。
所述映射建立在多音字词典上，包括三个步骤。首先是标注各个单字的发音。在该单字对应的发音中，如果该单字具有多种发音，则为该单字建立特殊发音规则并将该单字标记为特殊单字，否则为该单字建立正常发音规则且不把该单字标记为特殊单字。
正常发音规则中，对于各个单字，每个单字对应地只有一个读音。特殊发音规则中，每个单字对应地映射多个读音，且读音的次序按照字典中各个读音的排列顺序，并将位于第一位的记作第一发音，位于后面的其他发音记作非第一发音。
第二个步骤是根据各个单字与其发音的映射关系，在字典中进一步查找包括特殊单字的词语。这个或这些词语中，所述的特殊单字具有非第一发音。
第三个步骤是在第一步的映射中，为每个单字补充第二部中查找到的包括特殊单字的词语，并为该单字与这些词语以及这些词语中的各个单字的特殊读音(所述各个单字构成的该词语中，至少一个单字为特殊发音)之间也建立映射。
特殊在建立该特殊发音规则时，要对应地查找变音、变调是指在语声流中，按发音规则发生的声音的变化，这种变化有以下几种：
变调：每个单独的音节有确定的音调，但在词组中，由于相邻音节发音的影响，音调发生变化。如上声相连时，前面的上声近似阳平，三个上声相连时，前两个上声近似阳平。
弱化：弱化就是把语流中的某些音节读成轻声，如“你的”中的“的”，“杯子”中的“子”，“爸爸”中的第二个“爸”。
强化：强化就是把语流中的某些音节加强，读成重音。如“努力学习”中的“努力”。
儿化：汉语中的音节带有儿化韵尾，产生了儿化韵，如“花儿”。
(2)点读笔获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第一单字图像。图像的获得可以依靠点读笔自身的连拍等方案来采集包括文字的图像。采集到的图像经过图像预处理单元去除图像中的干扰，以提高文字识别的准确度。例如，增强图像的对比度和/或亮度、弯曲或拉伸图像以调整图像的角度等。
(3)对所述第一单字图像进行文字识别，得到第一单字。该步骤采用现有的图像-文字识别器，通过硬件和/或软件的方式将图像中的文字识别到处理器的缓存中。
(4)从词典中查找所述第一单字的发音；具体来讲，将字典的至少一部分读取到处理单元中，将步骤(3)识别出来的文字与该部分字典作比较：如果没有找到，则继续将字典的其他部分中的至少一部分读入到处理单元的缓存中并再次作比较，直到在字典中找到该单字为止。若此时该单字为点读笔读取的第一个单字，则继续下面步骤，否则将该单字作为下面的“第二单字”加以对待。
重复上述步骤(2)到步骤(4)，读取上述单字后续的一个第二单字，并判断该第二单字是否为具有特殊标记的特殊单字。如果是，则在该特殊单字的映射中查找所有包括该特殊单字的词语是否包括上述第一单字。如果包括，则该第一单字和第二单字分别按照映射中的各个单字的读音发出声音。否则，该第一单字和第二单字均按照各自映射中的第一发音而发出声音。
作为本发明的另一种可替换方案，在识别出第一单字和第二单字以后，如果它们不构成特殊词组，则根据正常发音规则发出第一单字和第二单字的语音，否则根据正常发音规则发出第一单字的语音，并根据特殊发音规则发出第二单字的语音。
优选地，对于某些由于发音变更的规定而改变了原有读音的单字，本发明也提供了更改字典的一种方案：若第二单字的发音不正确，则重复步骤(4)到步骤(6)5次，则在最后一次重复步骤(6)时，强行根据正常发音规则发出第二单字的语音，同时在与该第二单字映射的词语中查找包括该第一单字和第二单字的词语，并将第二单字在这些特殊发音词语中的非第一发音修改为第一发音。
本发明说明书中未作详细描述的内容属于本领域专业技术人员公知技术。
以上所述，仅是本发明的较佳实施例，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属本发明技术方案的保护范围。

Claims (8)

1.一种点读笔的语音识别方法，包括：
(1)点读笔获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第一单字图像；
(2)对所述第一单字图像进行文字识别，得到第一单字；
(3)从词典中查找所述第一单字的发音；
(4)点读笔继续获取包括待读文字的图像，同时对包括待读文字的图像进行预处理，得到完整的第二单字图像；
(5)对所述第二单字图像进行文字识别，得到第二单字；
(6)从词典中查找所述第一单字和第二单字是否构成特殊词组，所述特殊词组表示前两个字为所述第一单字和第二单字，且第二单字的发音非正常发音的词组。
2.根据权利要求1的点读笔的语音识别方法，其特征在于，所述步骤(1)之前还包括步骤：
根据词典训练单字与其读音之间的映射，并将这种映射中具有多个发音的单字进行标记。
3.根据权利要求2的点读笔的语音识别方法，其特征在于，所述步骤(1)之前还包括根据所述标记生成正常发音规则和特殊发音规则。
4.根据权利要求2或3的点读笔的语音识别方法，其特征在于，在步骤(3)和步骤(4)之间还包括：判断第一单字是否具有标记。
5.根据权利要求4的点读笔的语音识别方法，其特征在于，如果所述第一单字具有标记，则在词典中查询以第一单字为首字的所有特殊词组。
6.根据权利要求5的点读笔的语音识别方法，其特征在于，所述步骤(6)中，从词典中查找所述第一单字和第二单字是否构成特殊词组包括：判断第二单字是否为所述特殊词组的第二个字。
7.根据权利要求1的点读笔的语音识别方法，其特征在于，所述步骤(6)还包括：如果不构成特殊词组，则根据正常发音规则发出第一单字和第二单字的语音，否则根据正常发音规则发出第一单字的语音，并根据特殊发音规则发出第二单字的语音。
8.根据权利要求1的点读笔的语音识别方法，其特征在于，所述语音识别方法在步骤(6)之后，还包括：若第二单字的发音不正确，则重复步骤(4)到步骤(6)5次，则在最后一次重复步骤(6)时，强行根据正常发音规则发出第二单字的语音。
CN201510050221.4A 2015-01-30 2015-01-30 点读笔的语音识别方法 Active CN104599670B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510050221.4A CN104599670B (zh) 2015-01-30 2015-01-30 点读笔的语音识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510050221.4A CN104599670B (zh) 2015-01-30 2015-01-30 点读笔的语音识别方法

Publications (2)

Publication Number Publication Date
CN104599670A true CN104599670A (zh) 2015-05-06
CN104599670B CN104599670B (zh) 2017-12-26

Family

ID=53125404

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510050221.4A Active CN104599670B (zh) 2015-01-30 2015-01-30 点读笔的语音识别方法

Country Status (1)

Country Link
CN (1) CN104599670B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106023683A (zh) * 2016-07-29 2016-10-12 北京志光伯元科技有限公司 一种点读笔及点读系统

Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1172997A (zh) * 1997-07-31 1998-02-11 张博 印刷体文字阅读机
TW338813B (en) * 1997-07-15 1998-08-21 Inventec Corp Automatic analysis and handling method for mandarin vocabulary with multiple pronunciation
CN1208901A (zh) * 1997-08-15 1999-02-24 英业达股份有限公司 汉语多音字的自动分析及处理的方法
US6542867B1 (en) * 2000-03-28 2003-04-01 Matsushita Electric Industrial Co., Ltd. Speech duration processing method and apparatus for Chinese text-to-speech system
CN1591413A (zh) * 2003-09-04 2005-03-09 摩托罗拉公司 用于文本语音转换处理的变换表和词典
CN1697019A (zh) * 2004-05-13 2005-11-16 深圳市移动核软件有限公司 使汉字自动发音的方法及使手机朗读短消息的方法
CN1703923A (zh) * 2002-10-18 2005-11-30 中国科学院声学研究所 一种便携式数字移动通讯设备及其语音控制方法和系统
CN1993692A (zh) * 2004-05-24 2007-07-04 紫熊猫有限公司 字符显示系统
CN101009095A (zh) * 2007-01-24 2007-08-01 蒋清晓 全自动智能盲用阅读器
CN101271449A (zh) * 2007-03-19 2008-09-24 株式会社东芝 裁减词表和为汉字串注音的方法及装置
CN101324884A (zh) * 2008-07-29 2008-12-17 无敌科技(西安)有限公司 一种多音字发音方法
CN101401059A (zh) * 2006-03-10 2009-04-01 吉田健治 信息处理装置的输入处理系统
CN102033859A (zh) * 2009-09-28 2011-04-27 佳能株式会社 词典压缩和词处理方法及系统、文语转换系统、电子设备
CN201927201U (zh) * 2011-01-27 2011-08-10 安徽科大讯飞信息科技股份有限公司 一种识别笔
CN202058319U (zh) * 2011-04-28 2011-11-30 北京银盘电子技术有限公司 一种带语音识别功能的点读笔
CN202078739U (zh) * 2011-03-25 2011-12-21 李军英 一种具有点读功能的智能玩具
CN102651217A (zh) * 2011-02-25 2012-08-29 株式会社东芝 用于合成语音的方法、设备以及用于语音合成的声学模型训练方法
CN203311662U (zh) * 2012-12-05 2013-11-27 方翔 识字朗读笔
CN103761892A (zh) * 2014-01-20 2014-04-30 广东小天才科技有限公司 一种语音播放纸质书籍内容的方法及装置
CN103838866A (zh) * 2014-03-20 2014-06-04 广东小天才科技有限公司 一种文本转换方法及装置
CN104050838A (zh) * 2014-07-15 2014-09-17 北京网梯科技发展有限公司 一种能够识别与点读普通印刷物的点读系统、设备及方法
CN104157171A (zh) * 2014-08-13 2014-11-19 三星电子（中国）研发中心 一种点读系统及其方法
CN104281847A (zh) * 2013-07-12 2015-01-14 步步高教育电子有限公司 一种点读方法、装置及设备

Patent Citations (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW338813B (en) * 1997-07-15 1998-08-21 Inventec Corp Automatic analysis and handling method for mandarin vocabulary with multiple pronunciation
CN1172997A (zh) * 1997-07-31 1998-02-11 张博 印刷体文字阅读机
CN1208901A (zh) * 1997-08-15 1999-02-24 英业达股份有限公司 汉语多音字的自动分析及处理的方法
US6542867B1 (en) * 2000-03-28 2003-04-01 Matsushita Electric Industrial Co., Ltd. Speech duration processing method and apparatus for Chinese text-to-speech system
CN1703923A (zh) * 2002-10-18 2005-11-30 中国科学院声学研究所 一种便携式数字移动通讯设备及其语音控制方法和系统
CN1591413A (zh) * 2003-09-04 2005-03-09 摩托罗拉公司 用于文本语音转换处理的变换表和词典
CN1697019A (zh) * 2004-05-13 2005-11-16 深圳市移动核软件有限公司 使汉字自动发音的方法及使手机朗读短消息的方法
CN1993692A (zh) * 2004-05-24 2007-07-04 紫熊猫有限公司 字符显示系统
CN101401059A (zh) * 2006-03-10 2009-04-01 吉田健治 信息处理装置的输入处理系统
CN101009095A (zh) * 2007-01-24 2007-08-01 蒋清晓 全自动智能盲用阅读器
CN101271449A (zh) * 2007-03-19 2008-09-24 株式会社东芝 裁减词表和为汉字串注音的方法及装置
CN101324884A (zh) * 2008-07-29 2008-12-17 无敌科技(西安)有限公司 一种多音字发音方法
CN102033859A (zh) * 2009-09-28 2011-04-27 佳能株式会社 词典压缩和词处理方法及系统、文语转换系统、电子设备
CN201927201U (zh) * 2011-01-27 2011-08-10 安徽科大讯飞信息科技股份有限公司 一种识别笔
CN102651217A (zh) * 2011-02-25 2012-08-29 株式会社东芝 用于合成语音的方法、设备以及用于语音合成的声学模型训练方法
CN202078739U (zh) * 2011-03-25 2011-12-21 李军英 一种具有点读功能的智能玩具
CN202058319U (zh) * 2011-04-28 2011-11-30 北京银盘电子技术有限公司 一种带语音识别功能的点读笔
CN203311662U (zh) * 2012-12-05 2013-11-27 方翔 识字朗读笔
CN104281847A (zh) * 2013-07-12 2015-01-14 步步高教育电子有限公司 一种点读方法、装置及设备
CN103761892A (zh) * 2014-01-20 2014-04-30 广东小天才科技有限公司 一种语音播放纸质书籍内容的方法及装置
CN103838866A (zh) * 2014-03-20 2014-06-04 广东小天才科技有限公司 一种文本转换方法及装置
CN104050838A (zh) * 2014-07-15 2014-09-17 北京网梯科技发展有限公司 一种能够识别与点读普通印刷物的点读系统、设备及方法
CN104157171A (zh) * 2014-08-13 2014-11-19 三星电子（中国）研发中心 一种点读系统及其方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106023683A (zh) * 2016-07-29 2016-10-12 北京志光伯元科技有限公司 一种点读笔及点读系统

Also Published As

Publication number Publication date
CN104599670B (zh) 2017-12-26

Similar Documents

Publication Publication Date Title
Krauss Athabaskan tone (1979)
CN105957518B (zh) 一种蒙古语大词汇量连续语音识别的方法
CN106782603B (zh) 智能语音评测方法及系统
CN107301860A (zh) 基于中英文混合词典的语音识别方法及装置
JP2001296880A5 (zh)
CN103971686A (zh) 自动语音识别方法和系统
CN109213856A (zh) 一种语义识别方法及系统
CN110767213A (zh) 一种韵律预测方法及装置
CN112466316A (zh) 一种基于生成对抗网络的零样本语音转换系统
CN102439660A (zh) 基于置信度得分的语音标签方法和装置
CN106297764A (zh) 一种多语种混语文本处理方法及系统
CN104239579A (zh) 构建多语言音标数据库的方法、多语言注音的方法及装置
CN105931641A (zh) 字幕数据生成方法和装置
CN103810993B (zh) 一种文本注音方法及装置
CN109448458A (zh) 一种英语口语训练装置、数据处理方法及存储介质
CN104599670A (zh) 点读笔的语音识别方法
US11341961B2 (en) Multi-lingual speech recognition and theme-semanteme analysis method and device
Duponceau English Phonology; Or, an Essay towards an Analysis and Description of the component sounds of the English Language
CN1949148A (zh) 一种汉字输入方法及装置
CN112951208B (zh) 语音识别的方法和装置
CN113744718A (zh) 语音文本的输出方法及装置、存储介质、电子装置
CN109377788A (zh) 基于语言学习系统的符号生成方法
Loots et al. Comparing manually-developed and data-driven rules for P2P learning
CN114495939B (zh) 一种基于区别性特征的神经语音音译方法
KR101668554B1 (ko) 외국어발성 학습방법 및 그 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20171108

Address after: Changle City Fuxing Village Tantou Town, Fujian city of Fuzhou province No. 176 350200

Applicant after: Wu Sijing

Address before: 610041 No. two, No. 1, Keyuan garden, hi tech Zone, Sichuan, Chengdu

Applicant before: CHENGDU XINGXUAN TECHNOLOGY Co.,Ltd.

CB03 Change of inventor or designer information

Inventor after: Gao Xiaoqing

Inventor before: Zhang Xin

CB03 Change of inventor or designer information
TA01 Transfer of patent application right

Effective date of registration: 20171122

Address after: 325000 Taishun County, Wenzhou City, Zhejiang Province, Luoyang Jiao Yang Industrial Park D-3

Applicant after: Taishun Futian horticultural toy factory

Address before: Changle City Fuxing Village Tantou Town, Fujian city of Fuzhou province No. 176 350200

Applicant before: Wu Sijing

TA01 Transfer of patent application right
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20180503

Address after: 510030 Guangzhou, Guangdong, Yuexiu District Beijing Road No. 374, two 1101, 1102 rooms (for office use only).

Patentee after: GUANGZHOU ZIB ARTIFICIAL INTELLIGENCE TECHNOLOGY CO.,LTD.

Address before: 510000 B1B2, one, two, three and four floors of the podium building 231 and 233, science Avenue, Guangzhou, Guangdong.

Patentee before: BOAO ZONGHENG NETWORK TECHNOLOGY Co.,Ltd.

Effective date of registration: 20180503

Address after: 510000 B1B2, one, two, three and four floors of the podium building 231 and 233, science Avenue, Guangzhou, Guangdong.

Patentee after: BOAO ZONGHENG NETWORK TECHNOLOGY Co.,Ltd.

Address before: 325000 D-3, Luoyang Jiao Yang Industrial Park, Taishun, Wenzhou, Zhejiang

Patentee before: Taishun Futian horticultural toy factory