6.3.1 基于DANA 4.0的大数据开发流程
进出口管理风险评估大数据平台是借助于DANA 4.0大数据开发平台开发的上层应用系统,实现了对进出口商品的风险防控和进出口管理部门通关流程的科学再造。
如图6⁃1所示,基于DANA 4.0的进出口管理风险评估大数据平台总体开发流程可分为以下几步。

图6⁃1 基于DANA 4.0大数据平台开发流程图
(1)数据源分析
分析数据的来源、数据结构和数据种类。
(2)数据融合
基于数据来源和数据特性,分类建立数据模型。
(3)数据存储(https://www.daowen.com)
基于数据源分布特点和来源方式,采用合理的数据存储方式。由于数据来源的分步性和非集中性,因此一般情况下采用分布式的存储系统。由于数据的混合性(包含结构化数据、半结构化数据和非结构化数据),不仅采用单一的关系型数据库作为数据存储系统,还采用能对混合型数据进行高效处理的NoSQL数据库(例如Cayman)。
(4)数据分析
基于项目需求,建立数据分析关键技术模型和算法模型。应用DANA 4.0开放的RESTFulAPI接口,开发数据分析层源程序。
(5)数据应用及其可视化
基于项目需求和用户体验,构建数据交互和可视化终端。

图6⁃2 进出口管理风险
评估大数据平台系统架构图