金融大数据平台建设方案详细

二、大数据平台建设

（一）大数据平台框架概述梯据平郁设充足整合信息化资源，打破行业、部、戈同勺1塞饕，运用楼蜩舔茹猱加建英守斤Z微据价阍物金蹄蛇中，从L而提高创新能力和产品服务能力重要包括如下三部分

1.大的居分析基解F台拂朝我吩数叫，设㈱国簿，在充力臧度跆金部据，同既有F,勺企业霆据仓商口历史物居存储系统一起，形成基础娄媚体系，B提供^掌经营管理勺各类数据应用，西掌±层掰B

2.大甥僦基于基础数据平台，持续建设各翻据应用系统，通湾攵据才希屈、计量分析器学习弱段，对丰富日勺大麴居贫鼬亍开发蛹，并锄融策出由第结岖控营磔营运等经营管理活,充足矫大数据价值

3.大的居管控上层应用，客户端web等appTImI1口型匕蹉G⑶hx||『压二”一二〜Sparksol的冽女叙国也处理一MH-1KerberosIdp13（安全加密源利认证系篇统）.MapRedu微理算■・市H8AS瞠房蹈Yarn（资源管理器）大数据平台架构图第三方调度平第三方开发平应用系统第三方管理系台台（历史数据管统理…）5北向接口集母目Loader外部数据理（数据源抽取、转换和加载工具）平台Fusion InsightHadoop大数据平台与其他有关系统接口描述图

（七）大数据平台日勺网络拓扑

（八）大数据平台承载的应用系统L客户综合服务平台依托大数据分析整合四大板块银行客户信息，建设客户综合服务平台，逐渐建立客户数据模型、数据原则以及统一日勺客户信息视图，将分散在各系统日勺客户信息数据集中整合、统一管理，支持客户分类管理和差异化需求，提高服务质量和服务效率；按照以客户为中心B勺〃流程银行〃理念，推进业务运作流程化，推进流程革新，在流程各环节强化风险控制，贯彻合规规定；实现对客户日勺价值分析与评价，以科技手段引导产品创新、产品营销和风险控制，通过差异化定价实现营销服务战略日勺转变

2.存贷产品利率定价与管理系统通过大数据分析，打造覆盖事前报价、事中执行及控制、事后监测管理日勺全流程利率定价及管理体系，使利率管理贯穿整个业务价值流程；建立适应未来变化日勺利率构成构造，支持灵活、差异化日勺产品利率，通过利息公共构件提供灵活多样日勺多种计息方式，完善利率管理系统中利率审批、利率风险管理、利率定价分析功能，以提高我行精细化利率管理及风险管控能力

3.加强线上平台整合1电商平台整合通过与电商平台日勺对接，将更多金融业务渗透到企业产业链条各环节，围绕关键企业大数据探索上下游企业自动化应收账款融资、综合授信等产业链金融服务，从而实现信息流、资金流及物流勺整合，提高金融服务勺效率和深度，为B B电商平台提供有力日勺信用增级、安全日勺资金监管、丰富日勺交易场景、便捷日勺支付体系、健全日勺账户管理、特色的会员服务、专业勺融资贸易等金融服务B2互联网平台整合用互联网改造老式金融业务流程，增进金融走向数字化，推进金融业务从以往日勺人工化融合转向数字化牵引；通过移动支付、第三方支付、大数据、众筹融资、网络银行等方面勺建设实现向〃开放、共享、去中心化、平等、普惠〃日勺B新型数字金融日勺转变

4.小微贷系统运用大数据技术，处理小微企业及农户融资难问题；加强大数据风控，更精确地评价客户信用，提高风险决策实时性，将内控规则嵌入交易流程，更迅速地识别操作风险，防止、发现并及时阻断银行内外部日勺欺诈行为，对贷前客户审查、贷后动态监测管理提供有效风险管控监测；推进信用档案电子化建设和小微企业、农户信用评级体系建设，支持小微企业融资、普惠制小额农户贷款、农村合作经济组织贷款勺发放和管理，规范信贷业B，务流程提高办理效率；通过大数据分析辅助决策，支持线上审查审批，深入提供联接供需双方信息日勺增值性延伸服务，逐渐完善新型勺小微经济〃、〃三农金融服务平台，培养客户对我B行勺忠诚度B平台所需设备报价谶磷据殿，提高甥居聘，加弓航甥居缪里能力，为U平钿设及安全提供保障

（二）大数据平台建设原则，大数据平台是大数据运用勺基础实行其设计、建设B和系统实现过程中，应遵照如下指导原则:经济性基于既有场景分析，对数据量进行合理评估,确定大数据平台规模，后续根据实际状况再逐渐优化扩容可扩展性架构设计与功能划分模块化，考虑各接口口勺开放性、可扩展性，便于系统日勺迅速扩展与维护，便于第三方系统口勺迅速接入可靠性系统采用口勺系统构造、技术措施、开发手段都应建立在已经相称成熟勺应用基础上，在技术服务和维护响应上B同顾客积极配合，保证系统口勺可靠；对数据指标要保证完整性，精确性安全性针对系统级、应用级、网络级，均提供合理口勺安，，全手段和措施为系统提供全方位勺安全实行方案保证企业B内部信息口勺安全大数据技术必须自主可控先进性涵盖构造化，半构造化和非构造化数据存储和分析日勺特点借鉴互联网大数据存储及分析日勺实践，使平台具有良好日勺先进性和弹性支撑目前及未来数据应用需求，引入对应大数据有关技术平台性归纳整顿大数据需求，形成统一日勺大数据存储服务和大数据分析服务运用多租户，实现计算负荷和数据访问负荷隔离多集群统一管理分层解耦大数据平台提供开放勺、原则日勺接口，实B现与各应用产品日勺无缝对接

（三）基础数据来源

1.银行内部大数据资源客户自身信息以及其金融交易行为，根据目前积累沉淀勺数量资源状况，将数据重要分为三大类B第一类客户基础数据客户信息数据，即客户基础数据，重要是指描述客户自身特点日勺数据个人客户信息数据包括个人姓名、性别、年龄、身份信息、联络方式、职业、生活都市、工作地点、家庭地址、所属行业、详细职业、婚姻状况、教育状况、工作经历、工作技能、账户信息、产品信息、个人爰好等等企业客户信息数据包括企业名称、关联企业、所属行业、销售金额、注册资本、账户信息、企业规模、企业地点、分企业状况、客户和供应商、信用评价、主营业务、法人信息等等将这些割裂日勺数据整合到大数据平台，形成全局数据，再按照自身需要进行归类和打标签，由于都是构造化数据因此将有助于数据分析可以将这些信息集中在大数据管理平台，对客户进行分类，根据其他日勺交易数据，进行产品开发和决策支持第二类支付信息交易信息数据，可以称之为支付信息，重要是指客户通过渠道发生的交易以及现金流信息个人客户交易信息包括工资收入、个人消费、公共品、购置保险产品、信用卡还款等事业缴费、信贷还款、转账交易、委托扣款、购置理财产企业客户交易信息包括供应链应收款项、供应链应付款项、员工工资、企业运行支出、同分企业之间交易、同总企业之间交易、税金支出、理财产品买卖、金融衍生产品购置、公共费用支出、其他转账等第三类资产信息资产信息重要是指客户在金融机构端资产和负债信息，同步也包括金融机构自身资产负债信息，其中数据大多来自银行个人客户资产负债信息包括购置勺理财产品、定期B存款、活期存款、信用贷款、抵押贷款、信用卡负债、抵押房产、企业年金等企业客户资产负债信息包括企业定期存款、活期存款、信用贷款、抵押贷款、担保额度、应收账款、应付账款、理财产品、票据、债券、固定资产等银行自身端资产负债信息包括自身资产和负债例如活期存款、定期存款、借入负债、结算负债、现金资产、定资产贷款证券投资等第四类新型业务数据此类数据包括系统的运行日志、客服语音、视频影像、网站日志等

2.外部大数据来源为了赢得差异化竞争，就必须考虑其他数据源日勺输入，这些数据是自身不具有日勺，不过对其数据分析和决策起到了很重要的作用线上交易、电商平台、社交网络等互联网数据来源，司法、工商、财税等政府部门依法公开勺信息，重要包括互联网消B费行为数据，理解客户消费能力和消费偏好等；个人严重行政惩罚记录（如行政拘留等）、刑事犯客户在其他银行或金融机规违章记录等；客户征信信息、罪记录、涉诉状况（人身关系、财产关系）、交通严重违构日勺贷款记录、信用记录等信息等；客户日勺第三方征信评级状况，客户日勺社保、纳税、公积金等信息，客户日勺社会保障状况及经济能力，工作单位性质，客户社会身份等；客户在第三方催收机构日勺催收记录、社会信息等；出入境记录，客户出入境目日勺地、出入境频率等；国内出行记录，客户出行习惯等；采用同大数据厂商合作勺方式，通过自身平台来采集数据或购B置第三方数据经营优化；管理提升；风险控制银行应用分析模型数据存储四大数据平台实现功能大数据平台功能架构图批量实现较高水准日勺个性化客户产品服务，增长客户1H精准营销多维度盈利分析领导驾驶舱中小企业贷款风险评估粘性，推进业务创新有效地将大数据分析系统够构建客户360H II市场与渠道分析产品定价绩效考核实时欺诈交易分析度全方位视图，设计更有竞争力日勺创新产品对企业型客户的用户画像E塔黯V反欺诈模型［中小企业征信模型KPI模型财务分析模型信用卡分析模型］二7，财务状况、有关产业链上下游数据分析，把握客目前日勺状况更可以通过数据勺互换、映射对其进行短期、中期预测未来发B展状况同步通过与同行业中日勺企业比较，以及运用公共平台业务系统外机器数据，搜集企业日勺上、游对其评价，获得多维度日勺评估对中小企，业风险进行有效勺识别从而缓和银行与中小企业信息不对称B问题，更好地推进中小企业市场业务创新，针对客户需求实现精确营销银行借助大数据分析平2台，通过对客户日勺浏览记录、购置途径、消费数据，进行挖掘、追踪、分析，将不一样日勺客户群体进行聚类,根据不一样的客户特性打造个性化产品营销服务，将最适合日勺产品服务推介给最需要日勺客户提高客户对银行服务勺承认程度以及客户经理B在营销过程中勺专业程度H增强风险管控能力大数据分析协助银行摒弃本来过度依3托贷款人提供财务报表获取信息日勺业务方式，转而对其资产价格、账务流水、有关业务活动等流动性数据进行动态监控，理解客户日勺自然属性和行为属性，结合客户行为分析、客户信用度分析、客户风险分析以及客户日勺资产负债状况，从而有效提高客户信息透明度，建立完善日勺风险防备体系增进银行内部管理流程化，减少管理运行成本运用大数4据可以增长银行内部勺透明度，使企业上下级之间日勺信息流B通更顺畅；同步,基于大数据优化企业内部日勺多种流程，以及通过自己和社会信息归集渠道，理解客户真实反应，积极改善和提高，大大缩短信息搜集、反馈时间，提高企业运作效率而通过大数据应用和分析，可以精确定位内部管理缺陷，制定有针对性日勺改善措施，实行符合自身特点勺管理模式，进而减少管理B运行成本

（五）平台的技术架构为实现上述功能经多方考察研讨拟采用Fusioninsight HD平台作为大数据基础平台是企业级大数据存储、Fusioninsight查询和分析口勺统一平台它以海量数据处理引擎和实时数据处理引擎为关键，并针对金融、运行商等数据密集型行业日勺运行维护、应用开发等需求，打造了敏捷、智慧、可信的平台软件、建模中间件及系统，让企业可以更快、更准、更稳口勺从各0M类繁杂无序日勺海量数据中发现全新价值点和企业商机。