中国自主的数据库评测，是如何开展的？据相关数据显示

文章图片
【中国自主的数据库评测，是如何开展的？】据相关数据显示，仅在2021第四季度，数据库初创企业就募集了超过22亿美元的资金。而像Snowflake这样的企业，整体市值已经超过千亿美金。
资本的大量涌入，反映的是整个数据库市场的产品丰富度出现了极大的提升。但在企业层面，这却为架构师们带来了另一个困扰：数据库的选型和评测问题。
此前，较受认可的评测是由TPC（TransactionProcessingPerformanceCouncil ，事务处理性能委员会）推出的TPC-C评测标准，而TPC-C也一度成为每个主流数据库都会尝试一下的评测。但TPC-C也有自身的问题，首先，它面向的是OLTP数据库，并不能满足所有场景的数据库测试。实际上， TPC只给出了标准规范，特别场景需要厂商自行处理。另外， TPC的审核人员人数很少，且全部在美国，沟通不便。从开销的角度讲， TPC-C也较为昂贵，比如Oracle从2010年开始，就基本退出了TPC-C评测。
种种问题，使数据库评测处于一个事实上的空白领域。这也促使国内许多机构开始尝试进行数据库标准评测，信通院作为我国工业和信息化部直属事业单位，有推动我国ICT领域健康、快速发展的直接责任，因此从2015年开始推出各类数据库评测，在整个行业都产生了较大的影响力。
在评测不断开展和完善的过程中， InfoQ受邀参加了2021第十三批第二场数据库评审，也和中国信通院云计算与大数据研究所高级业务主管马鹏玮聊了聊，希望能了解到更多关于信通院数据库评测设计和评审的信息。
信通院数据库评测整体概况
从统计数据来看，截至2021年11月底，信通院已经开展了13批产品能力评测，共计完成58家企业93次基础能力测试、35次性能测试和4次稳定性测试，几乎覆盖国内所有主流数据库企业和产品，企业包括云服务厂商、传统数据库企业、互联网大厂、通信企业、学术机构、电信运营商等行业头部用户方。
据InfoQ了解，目前信通院数据库评测整体涵盖几个方向，从应用类型上可分为事务数据库和分析型数据库；从数据模型上可分为图数据库、文档数据库、键值型数据库和时序数据库；从产品部署形态上，也有关系型云数据库参与评测。针对同一款产品，信通院按照产品基础能力、产品性能和产品稳定性来划分评测维度，总体形成“中国信通院可信数据库评测评估体系” 。
而每种类型数据库的测试包括功能、性能、安全性、稳定性四大项，涉及大概20-30个必选测试用例，以及10个左右的可选测试用例，整体设计参考了我国工信部发布的各类数据技术要求与测试方法标准文件。以分析型数据为例，其测试标准表如下：

文章图片

文章图片
为了保证评测过程的公正、科学，整个评测大致分为标准制定、报名审核、实地测试、专家评审4个环节。在标准制定环节，信通院会联合该领域内头部企业，共同制定测试标准；在报名审核环节，被测数据库企业提交相应信息到信通院进行审核，只有符合对应评测条件的数据库可以参与评测；在实地测试环节，信通院会根据被评测的产品类别，派出对应工程师到现场，按照前期制定的统一标准执行测试；在专家评审环节，信通院会邀请金融、电信领域的应用方专家，以及领域内头部高校专家，共同对测试结果进行评审，确保测评结果的正确性。