用于图像数据增强的方法、装置和图像处理系统.pdf

(19)国家知识产权局(12)发明专利申请(10)申请公布号CN115660999A(43)申请公布日2023.01.31(21)申请号202211407930.X(22)申请日2022.11.10(71)申请人支付宝（杭州）信息技术有限公司地址310000浙江省杭州市西湖区西溪路556号8层B段801-11(72)发明人蒋超刘永超杨成平张祝平贾贝(74)专利代理机构北京永新同创知识产权代理有限公司11376专利代理师林锦辉刘景峰(51)Int.Cl.G06T5/00(2006.01)G06T11/40(2006.01)权利要求书4页说明书13页附图11页(54)发明名称用于图像数据增强的方法、装置和图像处理系统(57)摘要本说明书的实施例提供了一种用于图像数据增强的方法、装置和图像处理系统。在该用于图像数据增强的方法中，获取来自非安全计算环境的待填充图像数据增强指令序列，其中，待填充图像数据增强指令包括图像数据增强操作的类型和用于指示待处理图像的尺寸的待填充字段；针对各个待填充图像数据增强指令，在安全计算环境中根据对应的图像描述信息对该待填充图像数据增强指令的待填充字段进行填充，得到填充完整的图像数据增强指令，其中，图像描述信息根据对来自非安全计算环境的密文图像进行解密后的结果而得到，图像描述信息包括尺寸信息；根据所得到的各个图像数据增强指令对相应的待处理图像进行数据增强处理，得到处理后图像集。CN115660999ACN115660999A权利要求书1/4页1.一种用于图像数据增强的方法，包括：获取来自非安全计算环境的待填充图像数据增强指令序列，其中，各个待填充图像数据增强指令包括图像数据增强操作的类型和待填充字段，所述待填充字段包括用于指示所述待处理图像的尺寸的字段；在安全计算环境中执行以下图像数据增强操作：针对各个待填充图像数据增强指令，根据所获取到的与该待填充图像数据增强指令对应的待处理图像的图像描述信息对该待填充图像数据增强指令的待填充字段进行填充，得到填充完整的图像数据增强指令，其中，所述待处理图像的图像描述信息根据对来自非安全计算环境的密文图像进行解密后的结果而得到，所述图像描述信息包括尺寸信息；根据所得到的各个图像数据增强指令对相应的待处理图像进行数据增强处理，得到处理后图像集。2.如权利要求1所述的方法，其中，所述根据所得到的各个图像数据增强指令对相应的待处理图像进行数据增强处理，得到处理后图像由芯片执行，所述芯片包括指令解析器、数据增强算子模块、多路选择器和图像数据缓存器，所述根据所得到的各个图像数据增强指令对相应的待处理图像进行数据增强处理，得到处理后图像集包括：针对各个图像数据增强指令，经由所述指令解析器对所获取到的该图像数据增强指令进行解析，以得到解析结果；分别向所述数据增强算子模块和所述多路选择器发送与该图像数据增强指令对应的启动控制信息和通道选择控制信息，其中，所述解析结果包括所述启动控制信息和所述通道选择控制信息；针对各个图像数据增强指令，经由所述多路选择器根据该通道选择控制信息开启同与该图像数据增强操作的类型相匹配的数据增强算子模块相连接的数据传输通道；以及针对各个图像数据增强指令，经由与该图像数据增强操作的类型相匹配的数据增强算子模块响应于该启动控制信息对从所述图像数据缓存器获取的与该待填充图像数据增强指令对应的待处理图像进行数据增强处理，生成处理后图像集。3.如权利要求2所述的方法，其中，所述图像数据缓存器包括源图像数据缓存器和结果图像数据缓存器，所述根据所得到的各个图像数据增强指令对相应的待处理图像进行数据增强处理，得到处理后图像集还包括：针对各个图像数据增强指令，经由所述多路选择器根据该通道选择控制信息开启同所述源图像数据缓存器或所述结果图像数据缓存器相连接的数据传输通道；经由所述多路选择器所开启的数据传输通道将各个处理后图像存入所述结果图像数据缓存器。4.如权利要求3所述的方法，其中，所述结果图像数据缓存器包括中间结果图像数据缓存器和最终结果图像数据缓存器，待填充图像数据增强指令还包括用于指示待处理图像位于所述源图像数据缓存器或所述中间结果图像数据缓存器的源图像数据缓存器指示信息，所述图像数据增强指令还包括用于指示处理后图像位于所述中间结果图像数据缓存器或位于所述最终结果图像数据缓存器的结果图像数据缓存器指示信息。5.如权利要求4所述的方法，其中，所述结果图像数据缓存器指示信息用于指示处理后2CN115660999A权利要求书2/4页图像位于所述最终结果图像数据缓存器，所述芯片还包括结果描述信息缓存器，所述解析结果还包括所述处理后图像的结果描述信息，所述结果描述信息包括所述处理后图像的保存地址和所述处理后图像的尺寸信息，所述经由所述多路选择器所开启的数据传输通道将所述处理后图像存入