挑战
- 我们必须复制事务数据库信息到一个安全的和复杂的数据仓库。ManBetX万博客服
- 我们国产的ETL管道引起的头痛比的解决方案。我们需要摆脱这个系统的不稳定和探索选项将带给我们一个可靠的解决方案。
- 工程资源通过不断被燃烧殆万博手机登录平台尽的消防——是时候找一个更可靠的复制解决方案,杜绝这些关键资产的流失。
解决方案
- CommonLit实现整合。输入输出的数据复制方案,复制数百万行一个月零问题。
- 行业领先的工具复制数据快速、一致;可预测的定价很容易管理团队预算;和白色手套支持确保零停机或问题。
结果
- 700行数据复制到一个月
- 每年22天工程资源的保存万博手机登录平台
- 更多的时间专注于核心工程优先
分享这个故事
CommonLit如何保存和Integrate.io每年22天的工程资源吗万博手机登录平台
关于
CommonLit是一个非营利EdTech公司提供了一个高品质素养课程帮助学生高中毕业所需的阅读和写作技巧的成功在大学和职业生涯。
用例
CommonLit移动数据的管道从Postgres数据库亚马逊红移有很多问题。复制不断破裂,开发者不得不放弃他们的关键工作调试这些问题。此外,数据不是用于关键的商业智能和分析管道下降时需要整个公司。CommonLit需要一个更稳定的解决方案。
缓慢的,不可靠的数据复制导致工程资源浪费和不断组织破坏万博手机登录平台
CommonLit所需要的是一个简单的方法来不断从事务数据库复制数据到数据仓库。ManBetX万博客服这种变化将允许分析师和业务情报专家得到一个全面的视图所需的组织性能和收集分析更好的决策。
在他们发现之前积分。io, CommonLit使用国产ETL管道权宜之计将他们的数据。解决方案是严重依赖AWS DMS,亚马逊的数据库迁移服务。
不幸的是,这个解决方案是具有挑战性的配置和几乎不可能维持。组织与复制管道断裂频繁问题,意义没有得到数据的数据仓库和最终的人,最需要的工具。ManBetX万博客服
当复制坏了,一名工程师来自CommonLit轻实力雄厚的团队项目,不得不放弃他们的工作,和种族来调试和修复管道。
修复管道的任务是更加困难的,因为亚马逊DMS提供几乎没有什么坏了,数据。
更成问题,同步通常会以这样一种方式,工程师需要从头开始重新同步整个数据仓库。ManBetX万博客服这是一个噩梦的数据所率领的更广泛的业务。
与一个完整的同步通常需要12个小时或更多,工程师们把长期远离日常职责,失去无数个小时甚至更多的焦点切换和机会成本损失。随着数据量持续增长,这些关键业务中断只会增加。
“重新同步数据对我们的业务有很大的影响,”说CommonLit首席技术官(CTO)杰夫哈考特。“我实在不敢想的影响可能是,如果我们继续沿着轨迹。”
时期延长管道维修,所需的关键信息用户分析和商业智能是日期或完全无法访问。
“如果我们的团队需要的是旧的或不可用的数据,我们无法回答基本的、关键的问题需要完成拨款申请或进行其他研究C套件依赖,”杰夫说。
缓冲组织影响的不可靠的复制,Geoff甚至创建详细的调试系统运行手册和实施一整套工程师跳上加班修复的警报。这对工程师和添加更多的破坏为非工作时间的工作创造了额外的成本。
业务失去了总对其数据复制系统的信任。
“我们失去了数千美元的工程中断一个月的时间。一个团队只有我们,打击严重,妨碍我们做伟大的正在进行的工作的能力,”杰夫说。
重建信任与Integrate.io数据复制
CommonLit迫切需要一个更稳定的快速高效地选择复制数据。他们的谈话与一些潜在的供应商,包括集成。多河川的io, Fivetran。
CommonLit最终选定的集成。io,因为它“最佳组合的价格、可靠性、个性化服务,和功能。”
另一个区别是积分。io的可预测的价格,使它更简单的Geoff控制团队的预算。
“这是非常重要的,我们在定价可预见性和透明度,”杰夫说。“积分。io,我们支付我们的数据的行数,这使得它很容易算出成本是多少在一个正在进行的基础上。”
确保整合。io达到所需的可靠性和一致性,CommonLit踢了14天免费试用。
“审判是有价值的,因为它帮助我们理清我们的权限和管道的基本结构,以及我们想如何配置它们。它还帮助建立信任与整合。io团队,”杰夫解释道。
起床和运行与整合的过程。io是快速和disruption-free。他们提供了用户友好的文档CommonLit的具体用例以及一个高水平的“白手套”本地化的支持。
“文档集成。io提供清晰的布局遵循的步骤,再加上我们收到了一些代码来运行,得到了适当的权限设置,所以我们可以把事情移动,”杰夫说。
“他们的支持团队是超级响应。每当我发送一个消息,我听见在10分钟最大,这真的很令人印象深刻。”
与集成的支持。io的熟练数据专家,CommonLit管道有一个测试运行在同一天。他们同步数据,看看是否有任何影响CommonLit的生产系统,马上注意到一个戏剧性的改善可靠性和复制的一致性。万博max手机网页登录他们继续推行全面同步数据在一个正在进行的基础上。
很快,他们复制数百万行一个月零问题。
“我倾向于成为一个谨慎的人如何自由我给我的信任供应商,但两周后没有任何中断服务,我们知道我们做出了正确的选择,”杰夫说。
集成的一个方面。io的支持,Geoff赞赏是如何不断监控管道、意义Geoff不必担心失踪的一个小问题,螺旋成更大的东西。
“我们的管道是非常可靠和集成。io团队需要立即采取行动只要有一点问题,以确保事情总是沿着我们,”他说。
“我们没有任何故障或问题,我们在整个时间我们平台。”
Integrate.io’s ongoing support, long after the initial ‘sale’, continues to blow Geoff away.
“有一次,我们做了一个巨大的数据迁移的一个周六晚上,但它导致我们复制中断管道,”他说。
”集成。io小组立即回应在半夜和采取必要的措施来保持同步。当我们开始周一早晨,没有断了,我们整个组织是准备好了!”
可靠,disruption-free复制保存22 FTE(全职)天的工程资源,每年数以万计的美元万博手机登录平台
与集成。io, CommonLit复制多达700行数据每个月都没有问题,而且几乎同样重要的是,没有中断他们的工程团队。
”集成。io一直很转型的一部分我们之间移动数据的数据存储,如何“杰夫说。
平台的速度、可靠性和一致性意味着工程师不再需要进行调试和重新同步时间杀手。
CommonLit容易节省15小时由于Integrate.io工程师们一个月的时间。一年180小时,或超过22 FTE(全职)天,从工程师夺回和回流到核心项目。
“我们的工程师能够对项目工作和义务分配给,知道他们不会有被拖上交火ETL管道破裂,”杰夫说。
与集成。io,现在总是接近实时的数据,总是访问,支持更好的关键业务决策和组织发展。
“数据同步总是提示和商业智能用户可以将数据仓库和业务智能工具100%可靠和最新的所有的时间,“杰夫说。
”集成。io的可靠性是我们成功的关键。赠款,我们的首席执行官和首席运营官现在追求的是比以前更高的风险和更大的美元价值。这绝对是关键的决定是基于及时数据,和集成。io确保我们每次都做对了,第一次。”
Geoff建议整合。io任何数据团队想要复制数据快速、塌实,这样他们可以获取最大的商业价值。
“积分。io即插即用的解决方案。你设置它,你打开它,它运行,它是由一个团队回应任何突然出现的问题,这是无价的,”他说。
“我不知道当我们开始与整合。io多少他们的可靠性将是一个改变游戏规则。”
得到最终价值你的ManBetX万博客服数据仓库在今天!
