海量数据AtlasDB:把“数据库好用”这件事做到极致

导语:坚守初心、不辱使命,近期海量数据研发的企业级数据库AtlasDB获得了市场的普遍关注。这款以“好用”著称的国产数据库产品,不仅承载着海量数据公司对技术创新的坚持和投入,更凝结着一群拥有“工匠之心”的数据库人对用户的无限敬意!

当前,我国在信息技术应用、大数据分析等技术领域已跻身世界前列,但由于数据库和上下游技术构成了难以分割的兼容生态,突破它需要人才、技术、产品的不断积累和打磨,所以数据库的研发是一场持久战,更是一项立体化工程。

从12年前开始,海量数据就在积蓄各方面力量,为今天、为未来的数据库技术角逐做准备。12年坚持专注数据,不断积累实践经验,经历大量场景验证,为了交付更安全、可靠、有质量的产品,海量数据一直在追求极致,寻找最佳的用户体验。

如今,海量数据已服务超过2000家企业客户,成功在沪市主板上市,“提供好用的国产数据库”是公司一直以来的使命。近日企业级私有云数据库AtlasDB的发布,代表着海量数据的技术能力已走向规模化扩张阶段。

那么,这款好用、成熟的数据库产品是如何炼成的?不久前,海量数据的几位核心成员向笔者分享了这家公司的成长历程,介绍了AtlasDB的诞生之路,以及背后的研发故事。

01 产品打磨

在被誉为基础软件“皇冠上的明珠”的数据库领域,海量数据深耕十数年,坚持走自主研发、创新发展的道路,积累了广泛的客户基础。在服务市场的过程中,海量数据发现,用户使用数据库仍然面临着一些现实挑战:

首先,用户对数据库的配置不合理。存在商用数据库被“大材小用”的情形,也有国产数据库冒进替代的现象,还存在使用场景不对、使用数据库种类过多以及选用的数据库产品和用户自身技术能力不匹配等问题。

其次,用户的使用体验欠佳。一些国产数据库内核过于老旧,性能和功能差强人意;有的产品兼容性较差,让用户被迫改变使用习惯;一些产品稳定性不足,容易出故障,出了故障后,又很难得到及时解决,造成不可逆的损失。

其三,用户数据库的迁移风险非常高。数据库迁移是一个多方配合的过程,遍布风险点,如何选择既熟悉原有的数据库系统、又能对全过程负责的合作伙伴,同时使用有效的迁移工具和迁移方法论与数据库产品做配合,成为用户的难题。

“国产数据库要走出自己的路,就要站在用户的角度思考,围绕用户的痛点‘开药方’。” 海量数据公司总裁肖枫认为,“数据库产品‘好用’是第一位。”

为了让用户获得“好用”的体验,海量数据基于开源数据库技术,研发了云图数据库产品家族——AtlasDB,专注于打造企业级私有云数据库,主要产品包括:AtlasDB T1、AtlasDB T2、AtlasDB N1等。之所以选择开源数据库技术,是因为开源产品拥有全球广泛的用户群体,在全球用户系统的打磨下,已培养出良好的用户习惯。另外,开源社区集结了全球数据库领域的“大神”,优秀的开发者和用户的智慧源源不断地汇入其中,使产品迅速得到优化,能紧跟先进技术的步伐,实时更新。

在现阶段,把好用、稳定的数据库产品带给客户,是海量数据的第一考虑。同时,海量数据也同期研发了拥有完全自主代码的数据库产品,适用于特定用户需求。

AtlasDB T1是海量数据推出的新一代关系型数据库系统。产品稳定可靠,可提供诸多专属领域特性,目前已经在几十个用户,超过百套的系统中运行,经受了考验。

AtlasDB T1具备出色的兼容性,兼容多种操作系统、CPU、开发语言和外部数据源。最重要的是,兼容国外主流商用数据库,支持Oracle和MySQL专有特性,在语法、数据类型、系统函数、数据字典、数据库对象、编程接口等等方面均可以高度兼容。

AtlasDB T1自带一键迁移工具,能够帮助客户实现平稳迁移。一键迁移工具可以提供工作量预测报告,能自动实现数据对象移植与数据迁移,大幅减少项目周期,实现快速而平稳的数据库置换。同时,双向同步复制功能可以在切换上线后追平两套数据,实现新老系统同步并行,在试运行后,原库功成身退,免除后顾之忧。

AtlasDB T1对HTAP混合负载场景支持极佳,通过OLTP+OLAP组合,打破了大并发事务处理场景和实时分析场景之间的“墙”,支持更多“实时业务”的分析决策,例如有效帮助金融业迅速实现风控、授信等实时分析后即时交易的需求。

AtlasDB T1可以通过空间、时序、图形、流、文档等多模引擎,为特定用户提供专用领域的支持。例如航路拟合、轨迹跟踪、科研监测等功能,适用于国土、住建、交通等行业内常见的ArcGIS等系统。

AtlasDB T1具备增强型安全和智能化能力。在安全方面,补充了增强型身份鉴别、强制访问控制、数据透明加密、安全审计四大模块,为数据库的安全性保驾护航。外挂的智能运维组件可以帮助数据库自动优化参数和自动清理碎片。值得一提的是,在日益增长的人工智能应用需求下,AtlasDB T1通过将主流的人工智能算法整合到数据库内部进行贴源层的数据运算,能够大幅提高AI应用的计算性能、降低AI算法的使用门槛。

除了产品本身所具备的亮点,海量数据背后的研发体系,也同样引人关注。

02 研发投入

“打造‘好用’的数据库,离不开强大的技术实力、卓越的研发人才和大量的资金投入。在成立的十多年时间里,海量数据一直不遗余力地加大技术、人才的投入,”海量数据公司副总裁、创新实验室总经理韩涵博士表示。

对于如何让产品变得更先进、更符合客户需求、如何做新技术的探索和研发,海量数据经过长期的思考和反复实践,逐步摸索出“前台-中台-后台”联动的“三层研发”体系,让研发组织架构变得更富弹性,避免因过深地融合开源技术,出现开源技术不断迭代升级,而产品的本体却跟不上的现象。

“三层研发”模式更像是一种模块化、流程化的研发机制,环环相扣,逐层关联。第一层是前端技术人员,包括产品工程师、销售工程师、驻场工程师,负责做产品的代码维护、技术服务,并采集客户需求,同时把信息传递给第二层人员;第二层是产品研发中心,负责产品研发,再根据客户需求对产品本体功能进行丰富和增强;第三层是创新实验室,针对各产品线通用的、共性的基础问题、前沿问题,如安全、云化、AI问题等,为各条产品线做通用组件。

“三层研发”模式是在海量数据原有的两层研发结构的基础上,将做基础性技术研发的人员剥离出来最终形成的。这样,用户侧需求可以快速反馈给产品端;产品端紧跟开源技术迭代更新,不断打磨产品易用性、稳定性;而创新实验室可以联合更多优秀的科研机构,在基础技术和通用组件方面不断研发和应用更前沿的新技术。

“前台-中台-后台”联动,模块化、流程化的研发机制,能够汇聚用户-工程师-科学家的共同智慧,最高效地利用研发资源,更快速地完成产品迭代,不断紧跟前沿新技术变化。

03 资本助力

除了产品和技术实力,发力国产数据库,还有最重要的一点,那就是不能“差钱”。

海量数据创立于2007年,2017年在上海证券交易所主板上市,股票代码为603138.SH。十几年来,海量数据在数据技术洪流中不断踏浪前行,其背后的资本实力也在阶跃发展。

“海量数据库产业专项基金成立的目的,是希望通过并购、孵化、投资三种方式,助力公司数据库业务实现跨越式发展。” 海量基金创始合伙人透露,除了自研能力,并购、孵化和投资是海量数据支撑数据库业务发展的三股重要力量。

未来,海量数据会选择国内外与公司现有业务相似的数据库企业作为并购标的,在技术方向上会把PG、MySQL、NewSQL等作为重要关注对象,从项目来源上,会从全球数据库领域排名50到150名公司中筛选。

与此同时,海量数据会在数据库领域的安全、云计算、AI等基础技术层面做孵化,实现在数据库领域当前最领先的技术方向上,不断加强现有研发团队的技术能力和创新实验室的创新力度。

海量数据做数据库投资与普通的基金公司不同,投资的最终目的一是早期介入优质项目,为未来的并购做储备,二是扩大合作伙伴规模。通过在图数据库、IOT数据库、GPU数据库等方向的拓展,对数据库业务进行更广层次的探索。

04 核心领导力构建

如果说优质的产品、强大的研发实力和雄厚的资金,已经让“打造好用的国产数据库”这件事成功了一大半;还有一点特别重要,那就是核心团队的领导力。海量数据高管团队均来自国内外顶尖机构,非常多元化,核心研发成员来自Oracle、IBM,他们构成了海量数据的中坚力量。

海量数据公司总裁肖枫在大学时就与数据库结下了不解之缘。后来加入Oracle,数据库成为了他二十多年来一直在耕耘的领域。在多年从业生涯中,肖枫曾经历过“惊心动魄”的数据库故障。一次,客户的客服数据库系统宕机,在长达50多个小时的时间里,全公司的人忙成一团,一起找数据恢复点,可是故障仍在升级,每秒损失都在扩大,客户那时绝望的眼神,至今历历在目。数据库故障带来的不仅是企业的财产损失,还有致命性的商业声誉损失。加入海量数据后,肖枫认为,做数据库是艰难之旅,必须严肃对待,没有敬畏之心的企业或者个人,最好不要做数据库。

海量数据公司的副总裁、创新实验室总经理韩涵是清华大学电子工程系博士、哥伦比亚大学高级访问学者。博士毕业后,韩涵一直从事大数据领域研究工作,见证了技术的周期性变革,亲历了新技术从诞生到商业化运行的过程,她带领着创新实验室团队,为数据库技术的发展和突破创造更多的可能性。

海量数据研究院副院长黄晓涛,在数据库领域拥有18年的工作经验,曾任职于IBM。他熟悉Oracle、PostgreSQL、IBM DB2等主流数据库,AtlasDB T1的核心部件就是由他带领的团队进行研发和设计的。

作为海量数据的定海神针——海量数据公司董事长闫忠文博士,是科技领域的资深专家和高级领导,他获得过诸多荣誉,曾获得军队科技进步二等奖一项,国防科技进步三等奖一项。曾在中国空间技术研究院、中国东方红卫星股份有限公司等担任要职。

海量数据聚集了众多在IT领域工作多年的高级人才,拥有省部级企业技术中心和遍布全国的技术服务网络,在数据库整体解决方案,软、硬一体化解决方案,云化资源整合,数据库+存储等方面,均拥有经验丰富的团队。

05 用户高于一切

有了“天时、地利、人和”,还有最后一道难题,那就是如何去打动用户?对于一个国产数据库品牌,如何赢得客户信任是最大挑战。但是海量数据贵在“少说多做”,正是这样的品质,让这家企业赢得了用户的信任。

以深圳市政府为例,当前深圳政务云的建设,在PaaS层,数据库是最重要的一环。在选择数据库产品时,在安全合规的基础上,对可靠性、可用性、生态圈健全度、解决方案灵活性、技术保障能力等方面,均有严格的要求。

当前深圳市各局委办应用系统有相当一部分运行在Oracle数据库之上,要实现有计划性地逐步技术创新与云化改造,所选择的数据库产品对Oracle数据库的兼容性是最重要的考量因素之一。除此以外,政务云数据库产品在对容器环境的兼容性、对多租户模型的适配度、对各局委办多种应用开发技术与数据模型场景下的通用性、基于国家党政军信息化安全相关准则的合规性、生产商技术实力、产品研发投入的持续性等多个维度上,都需要进行仔细比较、慎重选择。

值得一提的是,深圳政务云平台在数据库产品方面的选择极其慎重,并不想要做第一个“吃螃蟹”的人。为了验证国内外各数据库产品的性能以及与深圳市政务云实际需求的匹配度,特意走访了一些用户,最后都证明海量数据是靠得住的选择。除了企业实力、服务支持能力、研发投入延续性,以及产品对Oracle兼容性、可靠性、通用性、合规性、成熟度这些基本要素,海量数据还有很多其他品牌不具备的优势。比如:有能力规划低风险、低成本、平稳迁移方案,能够提供一键式工具自动化地完成迁移评估、工作量预判、对象转化、数据校验等各个环节,能在上线试运行关键期提供可回退的保障方案等。同时,海量数据通过本地化、专业化的数据库技术专家团队提供全方位、立体化的数据库全生命周期技术服务保障,为各局委办的应用系统上云工作提供更强的信心。

所以,用户的认可,是海量数据最好的品牌宣传方式。多年来,海量数据从未把精力过多地放在市场推广上,但是在数据库领域的实际市场占有率,不仅不输于其他国产数据库品牌,还凸显出很多后发优势。

写在最后:打造国产数据库品牌之路道阻且长,而海量数据立足技术,坚持以用户利益至上,稳扎稳打地做“好用”的数据库产品,终于万丈高楼平地起。通过技术、人才、资本等优势的多力合一,海量数据励兵秣马整装待发,将在数据库领域做出更大贡献,在数据技术角逐中赢得未来。

Image placeholder
nicetyler
未设置
  70人点赞

没有讨论,发表一下自己的看法吧

推荐文章
解码GaussDB:如何成为世界级数据库?

1、开源GaussDB单机版OLTP;2、成立鲲鹏智能数据产业联盟数据库产业推进组;3、1.5亿元启动基金,发起GaussDB高校金种子发展计划;4、成立十大GaussDB高校联合创新实验室;5、现场

海量数据时代,金融行业数据库实践难题如何解决?

随着数字经济时代的到来,大数据、人工智能技术得到了快速发展与应用,可以说,各行各业都已全情投入到这一波数字化转型浪潮中,把握新的发展机遇,获取数字红利。其中,金融行业可以说是走在转型之路最前沿的行业之

亿级海量数据的实时读写和复杂查询实践

摘要:本文分享了每日亿级增量数据的实时读写、复杂查询场景实践介绍,涉及MySQL分表分库策略、数据异构、TiDB使用和优化、微服务架构等内容。  作者:黄哲铿  黄哲铿,中通商业CTO,前1号店技术总

核心业务“瘦身”进行时!手把手带你搭建海量数据实时处理架构

01背景 在线交易服务平台目的是减轻核心系统计算压力和核心性能负荷压力,通过该平台可以将核心系统的交易数据实时捕获、实时计算加工、计算结果保存于SequoiaDB中。并能实时的为用户提供在线交易查询服

面试高频:如何访问 Redis 中的海量数据?

目录前言事故产生分析原因解决方案总结前言有时候我们需要知道线上的redis的使用情况,尤其需要知道一些前缀的key值,那我们怎么去查看呢事故产生因为我们的用户token缓存是采用了【user_toke

海量数据时代,磁带存储的“涅槃重生”

   磁带作为大规模非结构化数据的战略性/低成本存储手段,已然经历了一次复兴。由于磁带在快速恢复网站和反勒索软件方面具有较高的价值,所以备份仍然是它的一个主要用例。不过,磁带的未来增长机会更在于一些新

滴滴海量离线数据的在线化 — FastLoad

桔妹导读:滴滴自成立以来,有海量的数据存储在离线平台,离线数据虽然存储便宜,压缩比高,但不适用于线上使用。为此,我们提供了一键式DTS平台——FastLoad,帮助业务往在线存储系统搬运离线数据,目前

从Oracle到MongoDB:为什么AWS不断抛弃合作伙伴?

亚马逊因不断与其商业伙伴分道扬镳而备受关注,在决定放弃Oracle数据库转而使用自己的服务之后,Amazon现在正在尝试用自己的“兼容”版本DocumentDB取代MongoDB。有趣的是,AWS宣布

互联网是如何把“原始人”逼成“机器人”

【导读】互联网快速发展的这十多年,我们见证了企业软件架构的多次迭代和演变。初期阶段都使用JSP+Servlet,工程师感觉代码直接写在jsp页面上不优雅,也不方便调试。后续发展为JSP+Javabea

AI:我们能否让“宕机”这个词消失?

今天,即便是许多非从业者也至少对人工智能(AI)有一个大致的了解。从自动驾驶汽车到个人语音助手,人工智能已成为我们日常生活的前沿和中心。但是这些直观展现在我们面前的AI应用并不是现在大多数IT专业人士

“小应用”背后的“大改变” 爱奇艺赋能流媒体播放服务

热门视频里,“弹幕盖脸”几乎是必然事件,然而有一个地方看视频,你会发现密密麻麻的弹幕都绕开主角飘过,这个地方就是爱奇艺。对于大家观看视频时喜闻乐见的弹幕,爱奇艺提供了蒙版弹幕服务,可以让用户实现“弹幕

极致产品

不断打磨极致的产品,是学习猿地发展的猿动力! 教学产品定义 教学产品和我们平时能看的到、摸的着、用的上的实体产品不一样,教育产品通常理解为是围绕学习目标设计的课程内容、教学过程、学猿服务,以及教学资源

头条数码3C好物节:一场极致种草的狂欢

2009年,淘宝推出第一届“双十一购物狂欢节”。2010年,京东首次以“京东618”开启店庆日。今年是618的第10年,同样第十一届“双十一”不断临近。谁也不曾想到,这两个由电商双巨头造出的促销节日,

灵魂三问,帆软主赛道上的极致追求

帆软软件(以下简称“帆软”),成立于2006年,是一家非常有个性的公司,让有贡献的员工买得起房,轻松搞定丈母娘,是其薪酬机制的概括。坚持不融资,2018年销售额超过4.6亿,早已达到了上市标准,却效仿

“数据+智能” 华为重新定义数据基础设施

互联网的发展,促成了网络订餐平台的崛起,数据的力量正在给传统的餐饮行业带来新的增长。业务场景不断丰富、数据规模越来越大,这对数据采集提出了非常高的要求;出行软件最核心的业务是一个实时在线服务,因此具有

分布式时序数据库QTSDB的设计与实现

现有的开源时序数据库influxdb只支持单机运行,在面临大量数据写入时,会出现查询慢,机器负载高,单机容量的限制。为了解决这一问题,360基础架构团队在单机influxdb的基础上,开发了集群版——

DTCC2019 :“数据架构设计实践专场”等您来!

  2019年5月8日~5月10日,由IT168旗下ITPUB企业社区平台主办的第十届中国数据库技术大会(DTCC2019),将在北京新云南大酒店召开。本次大会将以“数据风云,十年变迁”为主题,邀请百

实现人工智能落地 你还差一个“数据分析流水线”的距离

在智慧生产场景,生产制造商可以在生产线上利用深度学习,尤其是图像识别,将产品的质量检测自动化。比如自动检测产品表面有没有划伤、有没有零部件的缺失、有没有标签的错位。研究表明,相比人工检测,智慧检测可以

数据泄露之后,这5件事能够帮助你降低成本

防范数据泄露对组织而言日益成为一个复杂的问题,数据泄露的平均成本持续上升,根据最新的数据泄露成本报告显示,2019年被调查者的平均成本高达392万美元。尽管保护数据是网络安全的重要组成部分,但被入侵的

打造“数字化基石”,深信服在不断开疆沃土!

2019年深信服创新大会,已圆满结束,但也是一个全新的开始!深信服将以数字化转型为契机,打造更敏捷、更开放、更智能的新IT基础架构能力。为了具备这样的能力,深信服一直在研发和市场方面做大量投入。关于这

来SACC2019共论“数字转型 架构演进”之道

2019已经过半,第十一届中国系统架构师大会SACC2019的脚步也越来越近了,十年来中国系统架构师大会SACC一直紧跟系统架构关键技术热点,成为架构师、CTO、CIO以及各研发人员学习交流的前沿阵地

来福州,深入了解华为的“数字平台”

   数字化转型已成为几乎所有企业的必经之路,然而在相关战略的制定与真正落地的过程中,企业总是不可避免地会遇到一些困惑与挑战。  企业数字化转型的挑战——尤其对于许多传统行业的企业而言,主要体现在:A

新华三计算与存储为“数字大脑”担当坚实基底

在主题为“数字领航智绘未来”的2019Navigate领航者峰会上,新华三重磅推出数字大脑计划,以数字基础设施、业务能力平台、主动安全和统一运维构成的“智能数字平台”为基础,与生态合作伙伴开展智慧应用

关于工业物联网,你应该了解的3件事

世界各地的基础设施日益紧密。我们应该感谢工业物联网(IIoT)带来的这种连通性,它将交通、制造业、医疗保健等行业的机器和设备连接起来,并远远超出了预期范围。IIoT的潜力仍然很高,但风险也是如此。你需

关于网络安全防御,每个中小企业应该知道的5件事

根据美国商业促进局(BBB)的数据显示,你可能会惊讶地发现,小型企业占北美所有企业的97%以上。根据这个统计数字,我认为好消息是,在所有网络攻击中,针对小企业的攻击不到一半。坏消息是,当中小企业受到攻