项目背景及目标

随着各级法人行社对数据价值认识的提升，以数据为基础，业务人员在客户分析、经营状况分析、营销活动支持等方面提出的个性化数据应用需求急剧增加。然而，根据农信级别的数据量级与多法人体制特点，亟需考虑如下几个问题：

（1）如何解决多法人体系数据共享、下发以及个性化数据需求问题。

（2）如何提供安全灵活的数据应用服务让法人机构业务人员可自助式获取数据、使用数据、分析数据。

（3）如何解决历年来留存的海量数据的高效使用和数据多维度使用问题。

（4）如何将数据分析与数据可视化有效的结合在一起，让各法人业务人员相对低成本、高效率的使用和分析数据。

为解决上述问题，拟构建法人自助数据应用平台，通过平台的建设对全行各个系统进行统一数据梳理与整合，提供自助式分析工具，缩短从业务需求到提供可视化结果的过程。大幅提高业务人员查询数据、分析数据的时效，增强全行业务人员数据资产价值挖掘、辅助经营决策的意识，配套建设数据安全相关管理制度和流程，提供安全与灵活兼顾的数据应用服务。在做好平台建设的同时，树立数字化理念，提升数据应用能力，全面提高了辽宁农信数据管理水平，深入推进业务与技术的融合，实现数据创造价值、科技引领发展。

项目方案

（1）数据的整合与切分：在辽宁农信现有数据的基础上，深入梳理各系统数据结构及数据之间的关系，根据业务主题和分析需要，在大数据平台中规划出适应多法人模式的数据集市方案；按法人完成数据切分及存储，确保各法人行社独立使用本机构数据。

（2）合理的模型设计：结合实际业务整合现有各类数据，构建基于大数据模式的模型设计，在用户使用数据的过程中尽量减少各系统和表之间的关联层级，降低用户使用数据、分析数据的门槛。

（3）灵活多维的指标设计：通过调研各下游系统集市及报表，整和并归并500余类数据指标，同时设计雪花型多维度指标存储及管理体系，既节省空间，又提高指标加工处理效率。

（4）丰富的数据挖掘模型：通过内置丰富的数理统计模型，用户可轻松使用各类模型开展数据挖掘分析，大大降低数据挖掘技术门槛。同时支持自定义函数，模型可扩展性强，维护便捷。

（5）智能化数据应用，提供问答式数据检索:在全文检索和语义识别的基础上增加智能化元素，通过元数据、人工智能、统计学等理论和技术的综合运用，为用户智能推荐图表呈现，根据用户的搜索记录优化关联模型并将更多的数据生成分析结果。

(6)搭建全行一站式数据应用平台:借助数据分析和数据挖掘等技术手段，实时、动态、多维度的分离、利用和展示数据，为管理人员的统计、决策提供信息支撑。提供数据查询、数据分析、统计报表、预警监控、分析报告等功能，搭建供省联社业务部门和法人使用的数据查询、分析、下载平台；供基层各网点、法人业务部门、省联社业务部门使用的数据采集、流程处理平台。

(7)支持数据采集和汇总:提供数据采集和审核汇总功能，能够快速定制出报表表样及检核规则并将其分发给各填报单位业务人员，由业务人员进行填报。

创新点

（1）创新数据服务模式。采用大数据、数据可视化等前沿应用技术的新成果，借助于图形化手段，从不同的维度观察数据，从而对数据进行更深入的分析和挖掘。通过智能化检索，更快的响应业务要求，提高数据的使用价值。并针对农信社多级法人机构特点，提供个性化数据展现。

（2）支持多法人架构。通过灵活的组织架构设置，针对辽宁农信多法人组织架构的特点，形成多机构树的架构体系，系统内置四级权限控制体系，从门户、功能、操作、数据四个权限维度实现严禁控制。 

（3）灵活自助式的报表制作。“即席分析”功能提供了拖拽式报表的开发方式，缩短了报表开发周期，降低了报表开发难度。

技术实现特点

（1）系统平台符合J2EE/Java标准、MVC架构、B/S模式框架的技术规范，技术架构采用分层式设计从而达至分散关注、松散耦合、逻辑复用、标准定义的目的。

（2）根据辽宁农信现有数据架构及大数据平台硬件架构，从批量运行性能、查询性能、高可用、灾备等多方面考虑，设计数据集市的硬件部署方案，充分满足各法人行社对历史数据使用的需要，提供秒级查询各法人行社灵活、快捷的查询、分析数据的效率解决方案。

（3）通过建设即席查询、数据分析、数据采集与补录、自定义报表、数据下载等五个方面内容，提升及改善数据分析应用及数据管理。

项目过程管理

2018年8月  平台基础环境搭建，接入财管、管会、信贷等明细数据；

2018年9月  平台即席分析功能开发，接入网银、手机银行、ECIF、CRM等明细数据；

2018年10月 平台数据填报功能开发，接入风险系统明细数据；

2018年11月 平台数据采集功能开发，接入核心系统全部数据，设计并核对电金主题数据模型；

2018年12月 平台领导驾驶舱功能开发，接入支付、农信银、卡等明细数据，设计并核对信贷主题数据模型；

2019年1月 平台领导驾驶舱及导航页面优化，设计并核对核心数据模型；

2019年2月 平台申请解密功能开发，系统UAT测试，完成三大主题模型数据核对，实现核心、信贷、电金主题码值统一管理；

2019年3月 完善平台数据分析功能并测试；

2019年4月 完成平台主体建设；

2019年5月 平台上线试运行，同时开展*****批推广培训。

运营情况

（1）系统通过集群方式部署5个节点，单个节点可保证100户并发量，上线的5个月时间以来，功能及性能上都可以满足全省业务人员的使用需要。

（2）于2019年5月进行全省分级推广，先后进行了三次全省范围的系统功能讲解，于2019年6月和9月分别进行了两次共计四批次的全省上机操作培训，参训人员达400余人。

（3）截至9月末，已有47家法人机构具备使用资格，自助查询数据2.5万次，法人机构业务人员自主开发并发布报表90余张。

项目成效 

（1）提升了数据提取的效率。单次数据提取平均时长从3个工作日，降低到数分钟。

（2）缩短了报表的开发周期。复杂报表开发周期由7个工作日，压缩到1个工作日；简单报表可实现随时拖拽生成。

（3）打破了数据操作的技术门槛。业务人员可直接操作数据，开发分析工作。目前，启用的47家法人机构中，可以自行开发的法人机构有24家，其中有13家法人机构由业务人员自行使用。

（4）增加了报表的易用性。阅读报表的人员可以通过数据下钻查看明细、设置预警、指标联动等功能，在看到报表汇总结果的同时，直接追溯变动因素。

经验总结

（1）充分运用Hadoop的各类组件特性，搭建了一个基于省农信级别数据量的大型数据存储、批量调度平台，同时根据数据集市规划方案及数据切分方案在大数据平台上落地搭建基础数据集市。一是充分满足各法人行社对使用的需要，对历史数据进行积累。二是满足各法人行社灵活查询、分析数据的需要。

（2）对现有数据进行了整合、统一了码值管理、机构管理，结合现有报表核对各系统间数据的一致性、准确性，创建了电金主题、存款主题、贷款主题等数据模型，为全省各级法人行社管理人员、业务人员提供了一种自助式数据应用工具，使用人员仅需经过鼠标的简单拖拽就可以制作一张数据报表，解决了现有数据报表样式固定，不能灵活查询分析的个性化需要。 

（3）平台支持明细及汇总数据分发与下载、数据采集与填报、复杂报表及领导驾驶舱的开发、工作流程的设计等，全面提升了数据化管理和服务能力，切实做到“用数据说话、用数据管理、用数据决策、用数据创新。