TapData - 自主可控的实时数据平台

TapData实时数据平台为实时数据业务而生大型企业业务系统数量业务系统数量数据孤岛，企业在数字化和AI历程中的最大瓶颈点大型企业业务系统数量业务系统数量企业的痛点信息不完整，缺乏洞察，决策受阻业务流程优化困难主流数据平台解决方案：定时采集+批处理AIAI定时采集到中央平台（数仓/数据湖/中台）定时脚本，批量处理，加工为BI，报表等离线业务服务传统数据平台难以解决的实时业务场景实时驾驶舱金融反欺诈生产线预警及干预客户画像实时数据业务的技术难题企业实时数据集成的主流方案点到点数据同步ESB企业总线基于消息队列优点不足点TapDataLiveDataPlatform：取其长，去取短的新一代产品lTapData是一个开源的企业级实时数据平台，具有多架构，低代码易开发，全链路实时等特点l在实时同步（点到点）模式下，可以作为一个实时数据同步工具，来进行任意数据库或者Kafka之间的实时数据复制l在实时数据服务（中央化）模式下，可以把数据实时汇总到中央分布式存储，并通过API直接发布实时数据给交互l在实时分析模式下，可以以实时数仓形式来对数据进行汇总，为实时BI和报表提供数据开发和支持能力TapDataLiveDataPlatform架构及原理可以直接将数据复制到目标数据库，或者发送到消息队列做进一步分发ApplicationAPlEventApplicationAPlEventStreams或核心技术能力无代码实时采集实时物化视图数据一致性保障特定于数据库的日志解析器监视数据库WAL日志中的更改。一旦检测到更改，更改事件将被读取并转换为标准格式，并转发到内存中的管道事件记录将通过处理器链进行任何所需的转换，包括过滤器、富集字段、合并等。然后将事件记录交给目标编写器，目标编写器将标准事件转换为特定于目标的数据库写入并应用它。在没有SQL的情况下构建复杂的物化视图◆将多个表合并为一个表◆连接/查找其他表◆直观的DAGGUI◆可视化模型构建◆物化视图始终与源同步中央化存储–基于国产信创分布式文档数据实时数据服务/实时数据中台,一种面向服务的数据架构API无代码发布反向推送权限血缘关系处理转换API无代码发布反向推送权限血缘关系处理转换◆CRMERPCRMERPMESCDC保持源库和中台库数据高度一致www.tapdata.io13自主研发信创认证全面兼容多场景应用TAP=Transactional&AnalyticalProcessingwww.tapdata.io兼容MongoDB社区版能力略TapDB增强能力华为海思、飞腾、海光、龙芯、鲲鹏华为海思、飞腾、海光、龙芯、鲲鹏国产化芯片支持国产化芯片支持麒麟、统信、欧拉、深度麒麟、统信、欧拉、深度国产化OS国产化OS支持MongoDBMongoDBv3.6/v4.0/v4.2/v4.4/v5.0/v6.0MongoDB社区版MongoDB社区版兼容各主流语言相应版本的驱动，包括C、C++、C#、兼容各主流语言相应版本的驱动，包括C、C++、C#、Go、Java、Python、Ruby、Rust、Scala、Swift等驱动程序驱动程序兼容官方的客户端，包括兼容官方的客户端，包括MongoDBShell及MongoDBCompass客户端客户端兼容主流的数据库工具，包括兼容主流的数据库工具，包括mongodump、mongorestore、mongostat、mongotop、mongofiles等数据库工具数据库工具兼容主流的第三方工具及插件，如兼容主流的第三方工具及插件，如NoSQLBooster、Navicat、PrometheusExporter等第三方工具及插件第三方工具及插件www.tapdata.io成功案例：实时数据同步，作为KafkaETL的替代成功案例：头部内容平台实时数据交换•头部的内容平台互联网公司，在快速发展过程中，不断推出新客户业务•微服务技术架构意味着独立的数据库，需要从已有的CRM业务获取实时数据•自己开发Kafka链路，研发成本高，周期长，维护较为复杂我们的解决方案我们的解决方案经过验证测试后，部署TapData实时数据平台易用的操作让开发团队很快自主上手在适当的权限安排后，开发团队可以自主进行数据的对接和同步实现的业务价值实现的业务价值一年内创建了接近200个实时数据管道更为高效支撑了业务发展为企业节省了预期的3个人力的投入成功案例：零售业统一客户数据平台价值全渠道产品和库存九套价值全渠道产品和库存九套oracleERP数据汇聚到Mongo物化视图构建易用的API模型API开发生产力拖拉拽开发API业务对接从数周耗时降为数日可共