当前, 数据要素是新型的生产要素, 对数据进行有效治理和管控将成为企业发展的关键. 作为国民经济生产的重要组成部分, 化工材料行业需要根据自身建设的需求对数据信息化系统进行升级. 因此, 针对化工材料行业中如何治理实验配方数据提出了一套量身定制的数据治理模块. 首先, 该数据治理模块根据企业当前业务场景提出相应的数据标准和规范, 系统从前端获取数据, 经过质量提升并存储到数据库; 然后, 又从后端进行数据价值评估返回前端到展示, 形成了一个闭环负反馈的系统.
材料研发行业在生产过程中产生的数据类型多样, 数据来源于不同系统, 涉及流程多, 面临数据孤岛等问题, 需要一个集数据收集、管理与应用于一体的数据应用系统推动其数字化转型, 发挥数据价值, 驱动行业创新变革. 本文针对以上问题, 设计了面向材料研发领域的数据应用系统, 覆盖了材料研发领域中从数据采集到数据存储的完整数据管理流程, 并且能够有效支撑“专题数据库”“配方性能预测”及“配方相关性分析”等材料研发数据应用, 推动材料研发行业以数据驱动创新发展.
混合事务分析处理 (Hybrid Transaction Analytical Processing, HTAP) 系统需要同时支持事务处理和查询分析两种工作负载. 为了消除这两种负载之间的干扰, HTAP系统会为这两种负载指定不同的数据副本, 分别处理OLTP (Online Transaction Processing) 和OLAP (Online Analytical Processing) 请求, 并基于日志回放进行副本之间的数据同步. HTAP系统致力于同步OLTP数据到OLAP端以提供更新鲜的数据查询服务, 日志的发送与回放速度是影响数据新鲜度的关键因素. 本文在基于表分组的日志并行回放方法的基础上, 针对HTAP负载特点, 提出基于OLAP端查询频率的日志发送与回放方法. 在保障数据一致性的前提下, 本文所提出的方法提升了高频查询表日志的处理优先级, 最终实现高效的日志发送、日志回放以及针对性的高频查询表数据优先展示, 保证了HTAP系统数据的新鲜度.
利用联盟区块链对接钢厂的智慧制造系统, 基于钢厂提供的第一手、真实、不可篡改的质保书数据, 实现钢材产成品质保书在线生成和分拆, 可向下游多级经销商和终端用户提供区块链质保书, 满足钢材交易多级流转的实际情况. 基于智能合约实现质保书数据存证、质保书权限转让、质保书履历记录等功能, 解决传统纸质钢材质保书的篡改伪造问题, 实现钢材质保书电子化, 可扫码在链上核查质保书真伪, 节省各方打印、邮寄、保存的成本. 实验证明了系统的高效性和高可用性.
连接顺序选择问题, 即从连接顺序搜索空间中选出性能最优的连接顺序, 是关键的查询优化问题. 然而, 连接顺序的选择存在庞大的搜索空间, 导致其成为难点问题, 优化器往往无法确保找到最佳的连接顺序. 虽然目前存在许多连接顺序选择策略, 但是, 现有的评测基准不适用于评估各种连接顺序选择策略的优劣. 为了有效地评估优化器在连接顺序选择方面的优化效果, 本文基于确定性数据生成方法, 采用适用于不同连接形状的连接模板生成算法和基于结果导向的参数实例化方法, 生成评测场景的数据与负载, 实现了通用的优化器连接顺序选择评估工具. 通过对OceanBase和PostgreSQL进行评测, 表明本文所提出的工具能够全面且有效地评估查询优化器的连接顺序选择功能的性能.
针对教育应用升级受限问题, 本文提出了高效的完全解耦合的智能合约架构. 将合约解耦合为代理逻辑合约、代理数据合约、逻辑合约和数据合约, 支持任意子合约的灵活升级, 升级成本与传统合约升级相比平均下降28.2%; 结合链上链下协作优化了解耦合合约架构下的交易执行性能, 结合区块链底层存储树减少了合约升级时数据的迁移量, 优化后降低约一半的延时. 针对教育数据隐私安全问题, 本文提出了基于权限管理和LDP (Local Differential Privacy)的隐私数据保护方案, 提高了数据隐私的安全性, 同时对区块链的性能几乎无影响. 最后将上述方案集成落地, 实现了一个由可信知识交流社区与学生成长系统构成的教育类平台.
中国综合性科技类核心期刊(北大核心)
