• 文章
  • 新闻
  • 资料
  • 视频
  • 活动
  • 特别报道
  • VIP智库
  • 专家
  • 报告
e-works为您找到 10000  条结果
  • 相关性
  • 发布时间

一站式异构互通、整库迁移上云帮你应对数据采集带来的挑战

数加总体数据加工解决方案这样的:先将应用产生的所有业务数据进行汇聚、分析、然后回流到业务系统,业务数据汇聚到数仓、回流的线上的过程就是数据采集的过程;要完成数据采集,需要知道我们的数据在哪里? 在创业初期,我们应用可能就是一个只需要支持几千个用户的系统,为了节省成本,我们的数据就存储在免费的MySQL中;随着访问用户的增加,会发现单个数据库的压力越来越大,然后我们进行:读写分离、使用缓存、甚至会去购买商用的数据库 你会发现:随着应用的发的、业务场景的变化,我们数据会分散到各种数据存储中,而且不同的数据存储都有自己的数据结构。此外,如果你的业务系统已经有成千上万的表,这些表如何快速将数据采集到应有的线上系统中? 一站式实现异构数据互通首先,数据集成会做一次简单抽象,异构数据存储抽象为数据源;数据采集的抽取端抽象为Reader,数据采集的目的端抽象为writer;数据采集的架构就有网状的工具结构变成了以数据集成为中心的辐射结构 ;如果我们增加一个数据源,只需要在这个环上实现数据源和数据集成进行交互结合,比如现在有一个新出现的数据源,我只要在系统环节上实现数据集成的交互,就可以达到每增加一个数据源实现正能数据源和一流数据源之间无缝的互通
来源:云栖社区
2018-02-19
共 1000 页 总数:10000
信息搜索中,请稍候...

系列微信

数字化企业
观潮工业AI
e-works制信科技
具身智能一线
智能制造网博会
智能制造IM
ERP之家
智能工厂前线
MES百科
PLM之神
供应链指南针
© 2002-2026  武汉制信科技有限公司  版权所有  ICP经营许可证:鄂B2-20030029-1(于2003年首获许可证:鄂B2-20030029)
鄂公网安备:420100003343号 法律声明及隐私权政策     投诉举报电话:027-87592219

关于我们    |    联系我们    |    隐私条款

ICP经营许可证:鄂B2-20080078
(于2003年首获许可证:鄂B2-20030029)
鄂公网安备:420100003343号
© 2002-2026  武汉制信科技有限公司  版权所有
投诉举报电话:027-87592219

扫码查看