嘉宾美孚rdp研发总监董玉栋、美孚高级研发经理赵仪、美孚公司架构总监陈强
年,汤姆森路透社金融和风险商业部门独立成为refinitiv (美孚)。 美孚在汤森路透社金融数据和市场知识的积累上,利用先进的技术、新闻、分解方法继续为领域人士服务。 目前,美孚正在推出金融数据平台。 ( refinitiv Elektron Data平台,简称rdp ) )进一步发挥该领域积累的特征。 infoq记者采访了美孚rdp研发总监董玉栋、美孚高级研发经理赵仪、美孚公司架构总监陈强,揭露了rdp的设计理念和技术亮点。
从之前流传下来的金融数据管理到现代金融数据管理,金融领域迎来了巨大的转变。 为了应对数据量增长带来的压力,以及监管机构和顾客的诉求,更多的金融机构开始认识到“数据驱动”的重要性,但全面释放数据价值的过程并不顺利。
金融领域在数据管理中面临着那些痛点?
美孚公司的架构总监陈强说,在金融领域,数据源非常多,非常复杂。 面对各种数据提供制造商、数据类型和数据提供方法,企业要获取、解决和分解所需的金融数据,价格并不低。 一点点的小型金融机构即使取得了数据,也没有足够的技术力量解决。
从另一个角度看,美孚高级研发经理赵仪解释说,数据一般受到两类人的关注。 一种是数据提供者,另一种是数据客户。 对于数据提供者来说,数据的权限管理、权限的相继发布机制、数据的合规性等一直是备受打击的数据客户,如何处理数据源差异、风格不一致、不一致等问题就显得尤为紧迫。
综合来看,金融机构面临的首要痛点如下。
数据源多种多样,在部门、业务系统和行业的不同组织之间缺乏数据流动性和共享性。
数据标准化程度低。 来自不同业务、缺勤期的数据,在用途、结构、价值和质量水平等方面差异很大,数据的提取、整理、分解、采用的难度会变大。
价格问题。 随着客户数量和数据量的增加,数据访问和采用的价格也大幅上升。
目前,金融机构可用的数据大部分仍是以前流传下来的业务产生的数据,但外部数据源的扩展不足,缺乏更高层次的协调以支持全面的数据观察和采用。
正是出于这些原因,美孚推出了自己开发的金融数据平台rdp。 该平台应用统一的存储分层功能,可以从全球收集大量金融数据,经过精细的清洗、分解和增值解决流程,然后集中分发给客户。
rdp研发负责人董玉栋表示,美孚已经与全球证券交易所、期货交易所等机构建立了合作关系,从数据生产方获得了一手数据,面向全球披露了数据费用的一部分。 简单地说,就是“被世界接受,被送到世界”。
可以说,rdp是全球金融领域数据的协调中心,其目的是使金融从业者更容易获得全面领域的数据,最大限度地降低客户价格,提高数据价值。
rdp如何帮助金融人员以较低的价格访问和采用数据?
据了解,公司在数据传输过程中,除了从上游不同的业务数据库实时、定时传输到下游系统外,还需要从外部合作者、供应商获取业务数据。 rdp中有大数据级别的域数据,但如何让金融从业人员以低廉的价格轻松访问和采用数据呢?
rdp的处理构想是将其核心数据保存在aws中,并向顾客提供元数据库的统一的api接口。 rdp数据和api接口可以从主要的公共云产品、私有云设施和企业专用数据中心访问。
从顾客的角度来看,元数据库的访问大大简化了顾客的数据采用。 但是,数据访问越容易,意味着开发难度越大。 董玉栋也表示,统一api的背后,必须能够理解并有效执行顾客不同类型的要求,但云本地的api网关不能完全实现这一特点。
api网关位于客户端和各微服务之间,充当反向代理的角色,将不同的请求路由到相应的微服务。 api网关可以解决客户端诉求与个别微服务暴露出的细粒度api不匹配、部分服务采用的协议不友好网络等问题。
为了提高api的性能,满足顾客不同类型的访问要求,移动自主开发了api网关和顾客数据权限管理系统。 aws的api网关注册所有的rdp api。 这包括内部使用的api和面向客户的api。 当客户的请求到达时,api网关将自动验证客户的权限,并确保后续的合法数据请求迅速提交到相应的服务。 超出服务范围的请求将被自动拒绝。 董玉栋表示,所有rdp下的产品设计都是从api定义开始的,这有助于实现将顾客诉求放在首位的目标,避免重复实现相同的功能,从而最大化各种api和服务的可重用性。
标题:“金融领域数据多而杂 价钱高 难获取 看路孚特怎么打破困局”
地址:http://www.theproblemwithdata.com/twxw/30164.html