一种生成数据模型的方法和装置.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN113760240A(43)申请公布日2021.12.07(21)申请号202010910061.7(22)申请日2020.09.02(71)申请人北京沃东天骏信息技术有限公司地址100176北京市北京经济技术开发区科创十一街18号院2号楼4层A402室申请人北京京东世纪贸易有限公司(72)发明人蒲海洋(74)专利代理机构中原信达知识产权代理有限责任公司11219代理人张一军王安娜(51)Int.Cl.G06F8/30(2018.01)G06F16/28(2019.01)G06F16/21(2019.01)权利要求书2页说明书9页附图8页(54)发明名称一种生成数据模型的方法和装置(57)摘要本发明公开了一种生成数据模型的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑；其中，所述指标配置库中存储有多个处理逻辑，每个所述处理逻辑定义了数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本；执行所述可执行数据开发脚本，从而生成数据模型。该实施方式能够解决脚本开发工作量大和可复用性差的技术问题。CN113760240ACN113760240A权利要求书1/2页1.一种生成数据模型的方法，其特征在于，包括：根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑；其中，所述指标配置库中存储有多个处理逻辑，每个所述处理逻辑定义了数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本；执行所述可执行数据开发脚本，从而生成数据模型。2.根据权利要求1所述的方法，其特征在于，在根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑之前，还包括：根据用户预先配置的配置信息，生成处理逻辑，将所述处理逻辑存储到指标配置库中；其中，所述配置信息包括数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系。3.根据权利要求1所述的方法，其特征在于，对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本，包括：读取所述处理逻辑，以获取所述处理逻辑中定义的数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；将所述数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件实例化生成原子表；根据所述算子和所述数据源之间的关联关系对所述原子表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本。4.根据权利要求3所述的方法，其特征在于，根据所述算子和所述数据源之间的关联关系对所述原子表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本，包括：根据所述算子和所述数据源之间的关联关系，对所述原子表进行处理，以生成表派生表；对所述派生表的内在计算逻辑进行优化和拼接，以生成可执行数据开发脚本。5.根据权利要求4所述的方法，其特征在于，所述原子表为AtomicTable对象，所述派生表为DerivedTable对象。6.根据权利要求1所述的方法，其特征在于，将数值的大小有意义的字段作为指标字段，将数值大小无意义的字段作为维度字段。7.根据权利要求1所述的方法，其特征在于，所述算子包括关联算子、聚合算子、合并算子、去重算子、选择算子和过滤算子中的至少一种。8.一种生成数据模型的装置，其特征在于，包括：匹配模块，用于根据用户输入的指标信息和维度信息，从指标配置库中匹配出对应的处理逻辑；其中，所述指标配置库中存储有多个处理逻辑，每个所述处理逻辑定义了数据源、指标字段、维度字段、指标字段和/或维度字段的过滤条件、算子和数据源之间的关联关系；脚本模块，用于对所述处理逻辑进行优化和拼接，以生成可执行数据开发脚本；执行模块，用于执行所述可执行数据开发脚本，从而生成数据模型。9.一种电子设备，其特征在于，包括：一个或多个处理器；2CN113760240A权利要求书2/2页存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，所述一个或多个处理器实现如权利要求1-7中任一所述的方法。10.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。3CN113760240A说明书1/9页一种生成数据模型的方法和装置技术领域[0001]本发明涉及计算机技术领域，尤其涉及一种生成数据模型的方法和装置。背景技术[0002]目前，数据仓库的数据模型大部分均由业务分析人员或者数据开