近日，DataPipeline协助某头部消费金融企业搭建的实时数据融合平台正式投入使用，为其它同类型企业提供了由自研、开源工具等方式转向商业化产品服务方式的标杆参考路径。

在DataPipeline企业级实时数据融合平台v3.0里程碑版发布会上，DataPipeline创始人&CEO 陈诚谈道：

“在企业发展的过程中，数据赋能智慧营销、户服务、风险控制和经营分析管理已成为共识。因此，各种底层技术——存储和计算引擎、数据中台、数据湖、大数据平台、时序数据库、图数据库应运而生。数据流动性管理成为新挑战：越来越异构的引擎，越来越快的时效性要求，越来越复杂的数据链路，越来越高的数据质量标准。未来，谁能灵活掌控数据的流动性，谁就能在不断的技术进步中收获更大的价值。”

该客户数据团队负责人听后频频点头，这和他心中的数据管理价值观不谋而合。实时数据创新风潮扑面而来，踏准时代的节拍，大象也能翩翩起舞。

实时数据融合平台管理架构

该客户由上海银行、携程集团、博裕资本、红杉资本强强联合，跨界融合设立。公司以旅行平台场景为基础，开展旅游订单分期、现金贷等业务，广泛进行异业合作，深耕在线旅行市场。公司充分发挥四方股东在风险管理、线上营销、资本运作、消费场景等方面的资源优势，在高度灵活的产品形态、基于大数据的精准风险管理、高效的轻资产、轻成本发展方面形成自己的特色。

随着政策红利和环境助推，新消费成为促进经济复苏的重要助力。该客户坚持普惠金融、多元化布局，在深耕商旅场景基础上为大众衣食住行等日常生活提供更优质、便捷的消费金融服务。因此，客户需进一步优化数据管理和服务能力，高效支撑业务监控统计、BI商业决策等各场景需求，助力新金融模式发展。公司需要打通MySQL、PostgreSQL、Oracle、kafka、API在内的多种数据库管理技术，实现销售系统、成本系统、商票系统、消费中心系统、内部管理系统、财务系统、主数据库等近万张表的数据融合。原有的Kettle工具使用效果不佳：占用大量人力运维压力大，性能不理想且会丢失一些中间操作过程数据，任务状态监控、告警等运维功能不直观，用户权限、安全等方面的管理功能不完善。客户亟待一款专业的能够融合当前异构数据、提升数据管理效率的商业化产品。

DataPipeline打通了该客户多样的数据库管理技术，使用统一的系统平台实现并管理实时数据流转，包括用户权限、数据时效管理和安全管控等方面功能，既能实时获取源端数据变化，还能及时消费掉，保证数据实时传输，以供业务端取数需求。用户可以在链路上定义字段类型映射、限速、告警等策略，并应用到任务层面，从而实现层级化的精细管理。同时，平台具备统一的可视化管理页面，为数据工程师、运维人员提供直观的数据任务地图，随时可以洞悉数据的最新动态，极大提升运维工作效率和效益，高效释放数据价值。

该头部消费金融企业大数据负责人表示：“作为新金融模式的代表之一，公司长期立足金融科技，通过科技赋能，提供多样化的消费金融服务，通过丰富数据中台功能、探索利用人工智能技术、完善系统平台架构等方式，提升金融科技创新能力及服务水平。我们选择DataPipeline作为合作伙伴因为双方对于实时数据管理中‘分布式架构、多元异构、高度开放性、批流一体’等的理念高度重合。DataPipeline实时数据融合平台具有高效稳定、敏捷等特性，可降低数据同步成本，大大节约了‘探索每一种数据源同步方式’的时间和精力。”

消费金融的红利，从企业到消费者，如何在实时数据管理的加持下完成快速触达，真正践行普惠金融，该客户已找到最优方向。未来，双方将持续探索实时数据管理应用场景，通过DataPipeline实时数据融合平台，为业务提供360度用户画像分析、全渠道营销、个性化服务等立体化的支持，持续强化金融科技赋能企业数字化创新发展。

​