分布式数据库OceanBase助力企业数字化转型

分布式数据库OceanBase助力企业数字化转型

关键字: [亚马逊云科技, OceanBase (OB), 分布式数据库, 数字化转型, 海量数据, 多地部署, Ai赋能数据库, 数据架构现代化, 多模数据模型, 分布式一致性, 向量查询融合, 单机分布式一体化, 多云部署, 场景覆盖, 交易分析一体化, 多媒体数据, 向量数据库, 分布式架构, 多模一体化]

导读

欧西贝斯是一家来自蚂蚁集团的分布式数据库公司,致力于通过技术让海量数据的使用和管理更简单。他们的分布式数据库OceanBase具有单机分布式一体化、多云部署、多模数据模型等特点,能够支持企业数字化转型,实现数据架构现代化。OceanBase已在支付宝、印尼最大钱包公司、海底捞等企业落地应用,并在向量数据库、AI赋能数据库等领域进行创新探索。欧西贝斯希望携手亚马逊,通过技术普惠、生态开放、场景创新,实现全球无国界的技术性发展。

演讲精华

以下是小编为您整理的本次演讲的精华。

欧西贝斯(OceanBase)是一家来自蚂蚁集团内部孵化的公司,专注于分布式数据库技术的研发和应用。公司成立于2010年,经过15年的发展,已经在分布式数据库领域取得了卓越的成就。在2019年和2020年,欧西贝斯连续两年打破了TPC-C(Transaction Processing Performance Council)领域的世界纪录,成为第一个以分布式数据库身份创造这一纪录的公司。这个成就彰显了欧西贝斯在分布式数据库性能方面的领先地位。

除了性能上的优异表现,欧西贝斯还有另一个值得关注的数字,那就是12年。自2013年开始,欧西贝斯的数据库产品就开始为支付宝提供服务,并最终完全承载了这一中国最大的支付应用程序的全部流量。这充分证明了欧西贝斯数据库产品的稳定性和可靠性,能够应对极高的并发访问量和海量数据存储需求。

截至2024年年底,欧西贝斯预计将拥有2000位商业用户,用户分布遍及全球。这个数字印证了欧西贝斯产品的广泛应用前景。值得一提的是,欧西贝斯400万行的核心代码完全是自主研发的,并通过了国家信创认证,这使得该公司的产品在信息安全方面具有独特的优势。

欧西贝斯的产品理念可以概括为“多模数据模型”、“多负载计算”和“分布式一致性”三个关键词。多模数据模型意味着该产品不仅支持传统的关系型数据模型,还支持位置服务模型、向量模型等新兴数据模型,能够覆盖更广泛的应用场景。多负载计算则指出,欧西贝斯的产品能够同时高效处理在线事务处理(OLTP)和在线分析处理(OLAP)等不同类型的工作负载,实现TP/AP一体化。分布式一致性则是指该产品能够在分布式环境下保证数据的一致性,这是分布式系统的核心需求之一。

在部署模式上,欧西贝斯产品家族包括开源版、企业版和云版三种版本。开源版面向开源社区,企业版面向国内企业的IDC机房部署,而云版则可通过云基础设施或云市场的方式在公有云上提供服务。这种多样化的部署模式能够满足不同用户的需求。

面对当前的数字化转型浪潮,企业普遍面临数据现代化的挑战。欧西贝斯的产品和解决方案正是针对这些挑战而量身定制的。首先是如何应对日益膨胀的海量数据,这是当前最为突出的挑战之一。其次是如何解决数据孤岛问题,即企业内部使用多种异构数据库导致的数据割裂局面。第三个挑战是如何实时捕捉数据价值,传统数据库侧重于在线事务处理,而现代应用越来越需要与之并行的实时分析能力。第四个挑战来自于企业的多地部署需求,未来的企业可能需要在本地数据中心、私有云和公有云上混合部署应用。最后一个挑战是如何利用人工智能技术赋能数据库,使其能够更好地服务于人工智能应用。

针对上述挑战,欧西贝斯提出了自己的解决之道。该公司的产品通过创新的架构设计,能够同时应对海量数据、实现跨数据库的统一访问、支持实时分析、适配多地部署环境,并为人工智能应用赋能。

作为一家出海企业,欧西贝斯除了要解决上述技术挑战外,还需要应对其他方面的挑战。首先是内部竞争的压力,如何体现自身产品的价值,并帮助客户实现价值最大化,是该公司需要思考的问题。其次是政策壁垒,特别是近期中美之间在科技领域的博弈,给出海企业带来了一定风险。最后是技术差距挑战,由于不同国家和地区的信息化、智能化程度存在差异,如何通过技术赋能帮助客户实现赶超,也是欧西贝斯需要解决的课题。

面对重重挑战,欧西贝斯在产品实践和应用案例方面取得了诸多成绩。其中,支付宝的案例可以说是该公司最为典型的成功案例。根据介绍,截至目前,欧西贝斯数据库的峰值能够达到每秒6100万次的处理能力,单库存储容量高达3PB,而整体数据量更是超过100PB,每月新增3PB。这样的规模对于任何数据库系统来说都是巨大的挑战。而欧西贝斯不仅能够承载如此庞大的访问量和存储量,还能保证高可用性,这凸显了该产品的卓越性能。

为了应对支付宝这一金融级应用对数据的长期保存需求,欧西贝斯专门开发了一种双重压缩算法,能够将数据存储量降低80%,从而极大地降低了存储成本。这种创新设计有力印证了欧西贝斯对客户需求的深入理解和持续创新能力。

除了国内案例,欧西贝斯的产品和技术也在海外市场取得了广泛应用。以印度尼西亚最大的电子钱包应用GoPay为例,截至去年年底,该应用拥有1.8亿注册用户和300多万商户。面对业务的高速增长,GoPay原有的MySQL架构已经无法满足需求,存在着性能瓶颈、难以实现多活等痛点。

在与欧西贝斯团队的合作中,GoPay采用了一种混合云三机房架构,将核心业务在本地机房运行,而在业务高峰时可弹性扩展到公有云资源,实现了业务的高可用和灵活扩展。同时,欧西贝斯产品为GoPay提供了零数据丢失、零数据一致性问题的运维能力,确保了业务的稳定性。

在菲律宾,欧西贝斯的另一个客户GCash也从合作中获益匪浅。GCash原本使用240套MySQL集群,在与欧西贝斯合作后,仅需16个节点即可完成全部工作,节省了80%的节点数量。同时,欧西贝斯的压缩算法帮助GCash节省了70%的存储空间,整体使用成本降低了40%。这些硬核数据充分说明了欧西贝斯产品在提升效率、降低成本方面的卓越表现。

位于非洲的中资电子钱包公司Pampena则是欧西贝斯云服务的典型应用案例。由于非洲地区基础设施相对落后,Pampena一开始就选择了云延伸的方式部署应用,并采用了欧西贝斯的OceanBase Cloud产品。通过评估,与传统云上服务相比,欧西贝斯的解决方案能够为Pampena节省76%的成本,这无疑是后者在非洲市场的一个重要成功因素。

除了金融和电子支付领域,欧西贝斯的产品还广泛应用于零售等其他行业。以国民火锅品牌海底捞为例,该公司的会员系统和进销存系统目前都运行在欧西贝斯数据库之上,支持1.5亿会员的海量访问。

过去,海底捞在节假日营业高峰时,常常会遭遇数据库响应慢的困扰。原因在于,顾客在点餐时会产生大量SKU数据,对数据库的读写压力陡增。通过采用欧西贝斯的TP/AP一体化产品,海底捞成功解决了这一痛点。在2022年6月上线后的首个节假日高峰,新系统表现平稳,没有出现任何问题。

更重要的是,欧西贝斯产品的实时分析能力帮助海底捞实现了基于会员数据的实时推荐,进一步提升了用户体验和营收水平。这一成功案例也促使海底捞将欧西贝斯的解决方案推广到了全球其他市场。

除了应用案例,欧西贝斯在产品创新方面也取得了突破性进展,特别是在人工智能融合方面。该公司推出了向量查询能力,能够同时支持关系查询、空间查询和向量查询,有效覆盖了结构化、半结构化和非结构化数据等多种数据类型。

这一创新能力使得欧西贝斯产品可以广泛应用于图像搜索、视频分析等人工智能场景。以家居企业索维嘉为例,该公司利用欧西贝斯的向量查询能力,实现了“以图搜图”的创新应用,极大提高了SKU搜索的效率。

在视频行业,欧西贝斯的技术也为视源公司提供了“以文搜视频、以图搜视频”的能力,助力后者的智能视频分析业务。据介绍,目前欧西贝斯每周都有4-5个新的人工智能应用案例在探索和实践中。

人工智能不仅是欧西贝斯赋能的对象,也是提升自身产品能力的重要手段。该公司通过大模型技术构建了知识库问答系统,帮助产品维护人员高效获取相关知识。在智能运维方面,欧西贝斯产品内置了根因分析和优化建议功能,实现了智能化的运维管理。

此外,欧西贝斯还将自然语言处理技术融入到了产品中,实现了语音转文字、文字转SQL等创新能力,为企业决策者提供了便捷的数据访问途径。

作为一家年轻的企业,欧西贝斯的愿景是“用技术让海量数据的使用和管理更加简单”。为实现这一目标,欧西贝斯正在携手亚马逊云科技等合作伙伴,通过技术普惠、生态开放和场景创新,推动分布式数据库技术的全球化发展,最终实现无国界的技术发展格局。

总的来说,欧西贝斯作为一家专注于分布式数据库技术的创新企业,在产品性能、技术创新、应用案例等多个层面都取得了卓越成就。其自主可控的核心技术、创新的产品理念、广泛的行业应用案例,以及对人工智能融合的大胆尝试,都证明了这家公司的创新实力和发展潜力。

面向未来,欧西贝斯将继续致力于突破分布式数据库技术的瓶颈,助力企业数字化转型,并在全球范围内推广其创新成果,为更多用户提供高效、智能、可靠的数据服务。

下面是一些演讲现场的精彩瞬间:

The speaker introduces Oxbys, a company that specializes in financial technology products and services, and discusses their overseas financial cases and exploration of intelligent survival certification.

OceanBase offers a unified single-machine and distributed architecture, allowing applications to seamlessly scale from small to large enterprises without changing the underlying architecture.

A Chinese company’s electronic group in Africa, Pinpoint Pompeii, leverages OceanBase’s cloud technology to rapidly expand its business across multiple African countries while reducing costs by 76%.

海底捞火锅通过使用OceanBase数据库系统解决了大促期间高并发问题,并利用实时推荐功能提升会员体验。

未来的向量数据库需要分布式架构作为基础,并且多模一体化是其能力的顶峰,能够同时支持关系型、文档型、空间型等多种数据模型。

总结

欧西贝斯是一家来自蚂蚁集团的分布式数据库公司,致力于通过技术让海量数据的使用和管理更加简单。他们的产品OceanBase具有以下几个核心优势:

  1. 单机分布式一体化架构,能够适应企业应用的不断成长,无需更换架构。通过独特的压缩算法,大幅降低存储成本。目前已成功承载支付宝等大型金融应用。
  2. 跨云部署能力,在全球5大云上部署,帮助企业实现多云简化。同时支持混合云架构,满足不同场景需求。
  3. 多模数据库能力,支持关系、向量、空间等多种数据模型,能够覆盖企业80%的数据场景需求。通过融合查询,实现交易和分析的一体化。
  4. 与AI的深度融合,支持向量数据存储和检索,并将AI能力内置于数据库,提升智能运维和自然语言交互等能力。

欧西贝斯已在金融、零售等多个行业积累了成功案例,帮助企业实现数字化转型。他们期望通过技术普惠、生态开放和场景创新,推动全球无国界的技术性发展。

亚马逊云科技(Amazon Web Services)是全球云计算的开创者和引领者。提供200多类广泛而深入的云服务,服务全球245个国家和地区的数百万客户。做为全球生成式AI前行者,亚马逊云科技正在携手广泛的客户和合作伙伴,缔造可见的商业价值 – 汇集全球40余款大模型,亚马逊云科技为10万家全球企业提供AI及机器学习服务,守护3/4中国企业出海。

你可能感兴趣的:(AWS)