随着金税三期工程的不断深入,以及国税地税征管体制改革信息系统整合优化的逐步推进,苏州市涉税数据量和数据增量都较大,税收征管业务对信息化的要求越来越高,核心征管、增值税发票新系统、电子税务局系统等核心业务7*24小时不间断的为纳税人提供涉税服务。为了满足税务系统大规模并行处理数据能力需求,提供PB级数据量的处理能力,项日采购大数据融合数仓、Hadoop大数据平台系统、数据复制同步加载系统、数据展示软件、以及数据实施服务。
为配合国家税务总局苏州市税务局大数据融合项目建设,需要数据复制同步加载系统,主要满足苏州国税局各业务域系统数据的全量、增量采集,实时同步加载到MPP数仓及大数据平台,从而集中存储数据资源,进行数据处理及分析展现。具体方案场景实现:
技术上要求TurboDX实现实时数据同步和快速加载到MPP数仓及大数据平台,支持异构数据源同步、大事务批量加载及中文字符集的转换。
1. 采用TurboDX新一代微服务及实时数据流处理的技术架构
版权所有©️2016 北京数贝软件科技有限公司 京ICP备14032596号-1