实时数据 邵逸夫医院×DataPipeline丨实时数据共享,促进医疗信息互联互通 对于无法对接ESB的系统,邵逸夫医院通过DataPipeline实时将数据同步至数据中心进行集中处理和管理,目前实现秒级同步。
实时数据 贝发集团×DataPipeline丨数据驱动传统企业数字化转型 文具行业世界前八强贝发集团,考虑到产品的易用性、稳定性、实时性及投资的实效性,决定通过DataPipeline打通信息孤岛,秒级实时传输数据支持BI分析。
数据源 「自定义」数据源,解决复杂请求逻辑外部数据获取难题 新功能支持任意的MySQL、Oracle、SQLServer、Hive、HBase等常见数据源,冷门数据库等(如腾讯云TDSQL),常用的API调用,用户自定义的SDK,或者通过Python抓取数据等。
数据整合 DataPipeline CTO陈肃:构建批流一体数据融合平台的一致性语义保证 首先,本文将从数据融合角度,谈一下DataPipeline对批流一体架构的看法,以及如何设计和使用一个基础框架。其次,数据的一致性是进行数据融合时最基础的问题。如果数据无法实现一致,即使同步再快,支持的功能再丰富,都没有意义。
DataOps系列丨DataOps理念与设计原则 数据出现问题并不仅仅是数据部门的原因,更多是组织架构及配合的问题。相较于追责某些工具,反而应该思考该用何种理念和方法来面对背后的“元问题”。基于此,我们提出应从DataOps入手。
数据融合 DataPipeline CTO 陈肃:我们花了3年时间,重新定义数据集成 DataPipeline CTO 陈肃接受了TGO鲲鹏会的专访,谈及了 DataPipeline 的发展情况、数据应用集成行业、公司管理和个人经历等,以下为采访实录