盲文处理方法、装置、存储介质及电子装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114115542A(43)申请公布日2022.03.01(21)申请号202111439352.3(22)申请日2021.11.29(71)申请人云知声智能科技股份有限公司地址100096北京市海淀区西三旗建材城内1幢一层101号(72)发明人赵东阳李霄寒(51)Int.Cl.G06F3/01(2006.01)G06F3/04883(2022.01)G06F3/0483(2013.01)G06F3/16(2006.01)G06V30/414(2022.01)G09B21/00(2006.01)G10L13/02(2013.01)权利要求书3页说明书10页附图4页(54)发明名称盲文处理方法、装置、存储介质及电子装置(57)摘要本发明公开了一种盲文处理方法、装置、存储介质及电子装置。其中，该盲文处理方法包括：获取用户的手势信息；在确定手势信息触发拍照指令的情况下，获取盲文书籍中一页盲文对应的盲文图像，以及一页盲文中盲文在盲文图像中的位置信息；翻译盲文图像对应的阅读文本，其中，阅读文本与位置信息具有映射关系。即将盲文转化为语音，结合手势操控，辅助盲人进行阅读，实现盲文的精读与泛读，提升盲文阅读的速度和效率。进而解决了现有技术中，盲文处理效率低的技术问题。CN114115542ACN114115542A权利要求书1/3页1.一种盲文处理方法，其特征在于，包括：获取用户的手势信息；在确定所述手势信息触发拍照指令的情况下，获取盲文书籍中一页盲文对应的盲文图像，以及所述一页盲文中盲文在所述盲文图像中的位置信息；翻译所述盲文图像对应的阅读文本，其中，所述阅读文本与所述位置信息具有映射关系。2.根据权利要求1所述的方法，其特征在于，所述翻译所述盲文图像对应的阅读文本，包括：提取所述盲文图像的凸点和空白信息，形成二进制的盲文凸点矩阵，其中，所述盲文凸点矩阵中1表示凸点，0表示空白信息；将所述盲文凸点矩阵翻译成拼音和标点符号，并根据所述拼音和所述标点符号翻译成汉字文本和标点符号，形成阅读文本。3.根据权利要求1所述的方法，其特征在于，所述提取所述盲文图像的凸点和空白信息之前，所述方法还包括：对所述盲文图像进行预处理，得到处理后的盲文图像，其中，所述预处理包括以下之一：降噪处理、滤波处理、旋转处理。4.根据权利要求1所述的方法，其特征在于，所述提取所述盲文图像的凸点和空白信息，包括：通过光学字符识别OCR技术提取所述盲文图像中的凸点和空白信息。5.根据权利要求1所述的方法，其特征在于，所述将所述盲文凸点矩阵翻译成拼音和标点符号，并根据所述拼音和所述标点符号翻译成汉字文本和标点符号，形成阅读文本之后，所述方法还包括：发出提示信息，其中，所述提示信息用于指示所述一页盲文已完成阅读文本。6.根据权利要求1至5任一项所述的方法，其特征在于，所述方法还包括：获取用户的触摸操作，其中，所述触摸操作停留在所述盲文上的时间满足第一阈值；响应所述触摸操作，按照预设语速播报所述阅读文本。7.根据权利要求6所述的方法，其特征在于，所述方法还包括：在播报所述阅读文本的过程中，所述触摸操作在第一个盲文停留的时间超过第二阈值、且沿着盲文行按照预设速度滑动选中多个盲文并停留在第二个盲文的情况下，响应所述触控操作，播报选中的盲文对应的阅读文本。8.根据权利要求6所述的方法，其特征在于，所述方法还包括：在播报所述阅读文本的过程中，所述触摸操作在第三个盲文停留的时间超过第三阈值、且照预设速度滑动选中多行停留在第四个盲文的情况下，响应所述触控操作，播报选中的多行盲文对应的阅读文本。9.根据权利要求1至5任一项所述的方法，其特征在于，所述方法还包括：获取用户对盲文的双击操作；根据所述双击操作在盲文页面上的位置，计算所述盲文在位置信息矩阵中对应的阅读文本；响应所述双击操作，播报所述阅读文本。2CN114115542A权利要求书2/3页10.一种盲文处理装置，其特征在于，包括：第一获取单元，用于获取用户的手势信息；第二获取单元，用于在确定所述手势信息触发拍照指令的情况下，获取盲文书籍中一页盲文对应的盲文图像，以及所述一页盲文中盲文在所述盲文图像中的位置信息；翻译单元，用于翻译所述盲文图像对应的阅读文本，其中，所述阅读文本与所述位置信息具有映射关系。11.根据权利要求10所述的装置，其特征在于，所述翻译单元，包括：提取模块，用于提取所述盲文图像的凸点和空白信息，形成二进制的盲文凸点矩阵，其中，所述盲文凸点矩阵中1表示凸点，0表示空白信息；翻译模块，用于将所述盲文凸点矩阵翻译成拼音和标点符号，并根据所述拼音和所述标点符号翻译成汉字文本和标点符号，形成阅读文本。12.根据权利要求10所述的装置，其特征在于，所述装置还包