手机站:/m

MySQL数据库_acce高返利页游-ss数据库加密_怎么买

时间:2021-07-11 08:36编辑:淘客樊里来源:淘客樊里当前位置:主页 > CDN >

MySQL数据库_access数据库加密_怎么买

编者按:在这篇博文中,MLB数据工程副总裁Rob Goretsky对MLB的数据仓库现代化之旅进行了更深入的探讨。查看完整的下一个OnAir会话:MLB的数据仓库现代化。观看MLB如何使用BigQuery与MLB俱乐部共享球迷数据子集的现场演示。

在美国职业棒球大联盟(MLB),球迷的数字和球场内交易和互动生成的数据使我们能够快速迭代产品功能、个性化内容和优惠,并确保球迷与我们的运动有联系。MLB的fan数据工程团队负责管理350多条数据管道,从第三方和内部来源获取数据,并将其集中到企业数据仓库(EDW)中。我们的EDW是推动内部产品、营销、财务、票务、商店、分析和数据科学部门以及所有30家MLB俱乐部的数据相关计划的核心。这些举措的例子包括:

经过2018年的技术评估,我们决定将EDW从Teradata迁移到谷歌云的BigQuery。我们在2019年初成功完成了概念验证,大数据运维,并在2019年5月至2019年11月期间运行了一个从Teradata完全迁移到BigQuery的项目。(是的,我们在七个月内完成了迁移!)随着迁移的完成,MLB在迁移到一个现代的、云优先的数据仓库平台方面实现了许多好处。我们是这样做的。

MLB是如何迁移到BigQuery的

我们并行运行了几个工作流,以便从Teradata迁移到BigQuery:

迁移带来的好处MLB

定价:通过BigQuery的按需定价模型,我们能够以最小的成本和无需承诺的方式运行并行性能测试。这些测试包括复制一些最大和最多样化的数据集,并运行真实的SQL查询来比较执行时间。由于MLB经历了迁移工作,BigQuery的开销随着迁移的工作负载数量的增加而线性增加。通过使用BigQuery预订将按需定价转换为固定费率定价,淘客是什么,我们可以解决成本问题,避免意外超支(总是有一个用户意外地从最大的表中运行"SELECT*"),并与组织中的其他部门共享未使用的容量,包括我们的数据科学和分析团队。

数据民主化:由于网络连接限制和客户端软件设置问题,提供用户对Teradata的直接访问通常很麻烦,如果不是不可能的话。相比之下,BigQuery使得只需单击一个按钮就可以与任何G套件用户或组安全地共享数据集变得微不足道。用户可以访问BigQuery的web控制台,立即查看和运行与他们共享的数据上的SQL查询。他们还可以在熟悉的界面中使用连接表来分析具有透视表的大型数据集。此外,淘客是啥,他们还可以从文件和其他数据库导入数据,并将这些私有数据集与数据工程团队集中共享的数据连接起来。

MLB的中央办公室负责接收和处理来自各种数据源的数据,并在内部称为"Wheelhouse"的计划中与每个俱乐部共享俱乐部特定的数据。之前的Wheelhouse数据共享基础设施涉及每天从Teradata到S3的数据转储,一站式建站,每个俱乐部每个数据集一次,这会带来延迟和同步问题。新的驾驶室基础设施利用BigQuery的授权视图,为俱乐部提供对与其相关的特定数据行的实时访问。例如,MLB接收所有30个俱乐部的门票销售数据,并为每个俱乐部设置了授权视图,以便每个俱乐部只能查看自己球队的销售数据。由于BigQuery的无服务器基础设施,不必担心一个用户会无意中影响所有其他用户的性能。架构上的这种简化可以在下图中看到:

,关于云服务器

上一篇域名注册_云服中国移动物联网-务器日本_哪家好

下一篇网站建设_如何选购国内的云服务器-虚拟主机_高性价比

云市场知识本月排行

云市场知识精选