refinitiv使用谷歌云彻底改变巨大数据集的交付
金融数据巨头替换方法已通过在Google云上使用平台构建,删除了客户使用卡车和数千个硬盘来接收大型数据集。
本组织以前TheThomson Reuters金融和风险业务已将其刻度历史数据库移动到Google Cloud中,这将使客户能够在那里分析数据,而不是将其运送到硬盘上的数据。
刻度历史数据库包含大量的历史数据,超过500多个交易场所的交易和报价的数据约为5pb,返回1996年。它每天添加4TB-5TB数据。
雷丁迪夫的客户基础包括世界上最大的投资公司,如银行和对冲基金,它使用数据来建立和测试其投资策略。
替换数据库的客户客户希望的数据集非常大,因为在没有巨大延迟的情况下,无法通过光纤网络发送许多请求。这意味着公司通常通过卡车在硬盘上运输数据并上传到他们的服务器。
Catalina Vazquez,勾选历史数据库atrefinitiv的命题主管,表示客户正在使用数据库中的数据来设计,构建和测试新的交易策略,对他们进行深度分析。
但她说,数据集是巨大的,创造财务和后勤挑战。“传统上为客户,提取数据的挑战,运输数据,然后将其加载到他们的数据中心中的服务器上。但我们正在提供准备好查询的数据,而无需移动数据。“
Vazquez表示,数据正在谷歌云中移动到refinitiv自己的托管bigquery实例。“我们使客户能够简单查询数据集,运行所有分析和使用案例。他们还可以利用谷歌必须提供的人工智能(AI)能力。“
在过去,客户需要大量时间来获得此数据的访问,即现在可用。“它取决于数据集的类型,但有些人实际上必须在现场身体运输,”Vazquez说。“如果您想要向您提供的四个或五个Petabytes数据,您可能需要录音带。”
如果人们想要它,这种方法仍然可用,但Vazquez表示,在经济上没有明智,客户“实际上可能希望拯救管理巨大数据集的头痛”。
“由于数据集的大小,我们要么将它们运送到服务器或硬盘上,但目标是因为延迟而停止这样做,”她说。“一些这些数据可以通过光纤网络发送,但即使使用金融服务网络,可能需要数周才能移动大型数据集。”
Vazquez表示,云计算和其他数字技术进步正在改变数据在资本市场部门分析数据。“随着云提供承诺使基于AI的分析更容易获得,数据潜在能够提供答案,推动业务表现更大。”
Vazquez表示,当实际上可以远程完成时,世界已经改变了,现在没有必要分析现场数据。“数据保持与您选择的数据相同,那么为什么当您可以让别人为您做这一点时,为什么要占用所有额外费用?”她说。
Vazquez表示,安全是建造平台时的主要重点。“我们共同投入这个项目的大量时间正在确保我们建造的环境取决于我们严格的安全标准。”
她指出,虽然它是一个与谷歌的联合项目,但设计和构建最终归结为雷丁专业团队。
将刻度历史数据库移动到Google Cloud是Refinitiv通过云提供更多服务的努力的一部分。在去年6月的采访中,当时的雷丁·芬太(John Finch)告诉计算机每周,这家公司已经是一个沉重的云用户,但它希望增加通过云提供的服务的比例。
芬奇在大约15-20%的产品中通过云交付。“虽然这与许多企业相比这是大量的,但比例可以大大增加,”他补充道。
“我们的客户正在考虑越来越多的关于消费能力,如我们的云,而不是通过我们的基础设施及其自己的方式,”芬奇说。为了确保它可以满足客户需求,雷丁蒂夫与亚马逊网络服务,天蓝色和谷歌云有关系。
雷丁迪夫有三个核心业务。它以其在交易地板上的数据平台而闻名,以提供投资公司的最新信息,以帮助他们进行投资决策。它还处理大量的外汇交易,而其风险业务支持大银行的合规活动,包括反洗钱和专业客户。
业务的所有三个部分都涉及从大量来源收集,汇总,分析,策划,存储和分配大量数据。它每天收集超过1PB的数据,并处理超过一百万的非结构化文件。其数据平台每天提供400亿市场更新。
世界各地约有40万人代表40,000家金融公司使用雷丁蒂维夫的终端,其中约一百万算法消耗了没有人类参与的数据.CIO,芬太负责所有企业技术,包括产品,工程和运营。
在全球范围内,Refinitiv的内部IT团队大约是5,500强,约有4,000人通过供应商或承包工作。该组织拥有曼谷,北京,班加罗尔,纽约市和圣路易斯的主要技术中心,拥有英国技术团队编号约600。
去年8月,伦敦证券交易所同意支付22亿英镑的收购替补员,潜在地创造一个全球财务数据和交易的巨头。这笔交易尚未经历,但预计将于今年下半年关闭。