正在走向自律头像
数据库选型:先看自己,再看产品封面图

数据库选型:先看自己,再看产品

上周有个老同学半夜找我,说他们单位在选数据库,十几个产品摆在一起,PPT 做了几百页,会开了不下十次,谁也说服不了谁。我听完就笑了,这剧本我太熟了。数据库选型这个活儿我这两三年做得比写代码还多,Oracle 迁移干过,MySQL 替换干过,工业物联网那种一天几个亿数据点的场景也趟过一遍水。折腾下来,电科金仓的 KES 是在我短名单里出现频率最高的一个。所以这次干脆把压箱底的东西倒出来,选型怎么想、坑在哪、代码长什么样,一次说完。这篇有点长,泡杯茶慢慢看。

一、选型这事,得先看自己是谁

大多数人选型的路子是拉一张大表,产品横着排一排,功能打勾、跑分对比,然后开始吵架。吵三个月出不了结论太正常了,因为顺序就错了。

顺序应该是先看自己。我一般问四个问题。

源端是什么库?这个问题最要命。源端是 Oracle 的,兼容性要往深里验,光看 SQL 语法没用,得看 PL/SQL 的包、自治事务、游标循环这些硬骨头。包这个东西特别坑,有些数据库存储过程支持得挺好,包一来直接躺平。还有 ROWNUM、CONNECT BY、DECODE、NVL 这些写法,老系统里到处都是。源端是 MySQL 的话,看的方向就完全不一样了,重点放在协议兼容上,最好的结果是应用换个 JDBC 驱动就能跑,MyBatis 生成的 SQL 一个字不用改。

数据量多大?单表千万行以内、总量 10TB 往下,集中式老老实实就够了,别折腾。什么时候才该考虑分布式?写入 TPS 天天顶着天花板、单表破亿、备份窗口挤不进去的时候。这两年分布式数据库宣传得很凶,采用率据说过了七成,但我还是那句话,需要分布式是在写入真成为瓶颈的时候,不是在写汇报材料的时候。

信创是不是硬指标?政务、金融、能源这些行当,安全可靠测评、国密、国产芯片适配,这些不是加分项,是入场券。达不到就别聊了。金仓这块我从来不担心,鲲鹏、飞腾、海光、龙芯都适配了,麒麟和统信 UOS 也有,SM2、SM3、SM4 一样不缺,等保的资料是现成的。

最后一条,团队里有没有 DBA。这条最容易被无视,也最容易翻车。功能最全的产品不一定是好产品,团队驾驭不住的话,运维成本翻着倍地涨。

四个问题答完,候选基本从十几个掉到两三个。别急,这时候还下不了结论,得动手验。

对了,还有个坑得提醒:别拿厂商的 Demo 环境验兼容性。演示环境里跑得再漂亮,也覆盖不了你库里那些十年前老工程师留下的奇怪写法。把生产库元数据导出来喂给评估工具,报告有多难看,迁移就有多难,早知道比晚知道强。

二、金仓是个什么路数

用下来之后,我觉得金仓跟不少国产同行不太一样的地方在产品线。集中式、分布式、共享存储集群,一条产品线全包了。业务从小体量起步,过两年长大了要扩,不用换产品。共享存储集群值得多说两句,好几个节点挂同一份存储,读写都能扩,又不用碰分布式事务那摊子麻烦事,核心交易系统做高可用改造的时候,这条路比推倒重来省力太多了。

迁移成本是另一个实在的好处。KES 对 Oracle 语法适配得比较深,我经手的项目里,大半存储过程是小改甚至不改就能跑。别小看这个,替换类项目里工期就是钱。它还能切 MySQL 兼容模式,连原生协议都支持,手里存量系统五花八门的团队用起来会舒服。

动手之前有个东西必须跑一遍,就是他们家的迁移评估工具。整个源库扫完出一份报告,哪些对象能自动转、哪些得手改,白纸黑字。我的习惯是先看报告再排工期,拍脑袋估工作量这种事我年轻时候干过,亏吃够了。

还有一点是我用得久才发现的。KES 是融合多模的架构,关系、文档、图、时序、向量五种模型在一个内核里。这句话看着像宣传词,但到物联网场景里就是实打实的架构简化,后面第六节细说。

概念说完了,上手。

三、先建个库试试深浅

装完第一步,建表空间和用户。写法跟 Oracle 一个路子,老 DBA 闭着眼睛都能敲:

CREATE TABLESPACE tbs_order
  DATAFILE '/opt/kes/data/tbs_order01.dbf'
  SIZE 2G AUTOEXTEND ON NEXT 512M;

CREATE USER app_user IDENTIFIED BY "Kes#2026@Pwd"
  DEFAULT TABLESPACE tbs_order;
GRANT CONNECT, RESOURCE TO app_user;

然后建业务表。注意我用的类型,VARCHAR2、NUMBER、SYSDATE,全是 Oracle 的老伙计,源系统的建表语句基本原样搬过来就能跑:

CREATE TABLE t_order (
  order_id    NUMBER(12)      NOT NULL,
  cust_id     NUMBER(10)      NOT NULL,
  amount      NUMBER(14,2)    DEFAULT 0,
  status      VARCHAR2(20)    DEFAULT 'INIT',
  create_time DATE            DEFAULT SYSDATE,
  remark      VARCHAR2(500),
  CONSTRAINT pk_t_order PRIMARY KEY (order_id)
);

CREATE SEQUENCE seq_order START WITH 10001 INCREMENT BY 1 CACHE 100;

订单这种表涨得飞快,分区要提前想好。范围分区加自动扩展,按月切,过期数据整块归档砍掉,不用一条条 DELETE 磨洋工:

CREATE TABLE t_order_part (
  order_id    NUMBER(12)   NOT NULL,
  cust_id     NUMBER(10)   NOT NULL,
  amount      NUMBER(14,2),
  create_time DATE         NOT NULL,
  CONSTRAINT pk_order_p PRIMARY KEY (order_id, create_time)
)
PARTITION BY RANGE (create_time)
INTERVAL (NUMTOYMINTERVAL(1, 'MONTH'))
( PARTITION p_init VALUES LESS THAN (TO_DATE('2026-01-01','YYYY-MM-DD')) );

四、增删改查,见功夫的地方在 Oracle 写法

普通 SQL 没啥可讲的,哪都一样。真正验成色的是那些 Oracle 特有的东西,我挨个试过,给你看结果。

插入用序列取号,顺顺当当:

INSERT INTO t_order (order_id, cust_id, amount, status)
VALUES (seq_order.NEXTVAL, 8001, 1299.00, 'INIT');

查询这块我最关心 NVL、DECODE、ROWNUM,因为老代码里这三个出现频率高得吓人:

SELECT * FROM (
  SELECT o.order_id,
         o.amount,
         NVL(o.remark, '无备注') AS remark,
         DECODE(o.status, 'INIT', '待支付', 'PAID', '已支付', '其他') AS status_cn
    FROM t_order o
   WHERE o.create_time >= TRUNC(SYSDATE, 'MM')
   ORDER BY o.amount DESC
) WHERE ROWNUM <= 10;

直接能跑。树形查询 CONNECT BY 也在,组织机构、物料 BOM 迁过来一个字不用改,START WITH 定根、PRIOR 定方向,跟原来一模一样。新一点的代码喜欢用递归 CTE,WITH RECURSIVE 也支持,两拨人各写各的互不打架。

更新删除本来没打算讲,但有个细节我必须提一下:自治事务。就是在存储过程里嵌一个独立提交的小事务,记操作日志、兜底报错的时候特别好使,好些同类产品这块是空的。分区裁剪也做得像样,查询条件带分区键,执行计划自动裁到目标分区,删过期分区直接按分区名操作,秒级完事:

UPDATE t_order SET status = 'PAID', remark = '已对账'
 WHERE order_id = 10001 AND status = 'INIT';

DELETE FROM t_order_part PARTITION (p_init)
 WHERE create_time < TO_DATE('2025-01-01','YYYY-MM-DD');

MERGE INTO 是做数据同步的兄弟每天都要碰的,月末汇总我天天跑:

MERGE INTO t_cust_sum t
USING (SELECT cust_id, SUM(amount) amt FROM t_order GROUP BY cust_id) s
ON (t.cust_id = s.cust_id)
WHEN MATCHED THEN UPDATE SET t.total_amt = s.amt
WHEN NOT MATCHED THEN INSERT (cust_id, total_amt) VALUES (s.cust_id, s.amt);

事务底子也顺带说一句。默认读已提交,串行化也能开。行级锁、死锁检测都有,我们压测的时候故意造死锁,检测和回滚动作都对,没有出现锁堆着半天不处理的情况。

五、存储过程,迁移工作量的真正大头

前面我反复提包兼容,因为这是选型时最容易低估的一项。KES 支持 CREATE PACKAGE,DBMS_OUTPUT、DBMS_JOB 这类系统包也有对应实现,触发器、自定义类型也都不缺。贴一段结算过程给你们感受下:

CREATE OR REPLACE PACKAGE pkg_order AS
  PROCEDURE settle(p_order_id IN NUMBER, p_result OUT NUMBER);
END pkg_order;
/

CREATE OR REPLACE PACKAGE BODY pkg_order AS
  PROCEDURE settle(p_order_id IN NUMBER, p_result OUT NUMBER) IS
    v_amount NUMBER(14,2);
  BEGIN
    SELECT amount INTO v_amount
      FROM t_order WHERE order_id = p_order_id AND status = 'INIT'
       FOR UPDATE;

    UPDATE t_order SET status = 'PAID' WHERE order_id = p_order_id;
    INSERT INTO t_settle_log(order_id, op_time, operator)
      VALUES (p_order_id, SYSDATE, USER);

    COMMIT;
    p_result := 0;
  EXCEPTION
    WHEN NO_DATA_FOUND THEN
      ROLLBACK;
      p_result := -1;
  END settle;
END pkg_order;
/

FOR UPDATE 行级锁、异常分支、事务控制,全在。审计类的活儿用触发器干,订单状态一变自动写审计表,:OLD、:NEW 的用法跟原来一样。

我们评估那会儿,把生产 TOP 50 的 SQL 加上全部存储过程在 KES 上过了一遍,自动转换率九成往上,剩下的多是字段精度映射和个别包体的小修,一个星期清完了。说实话这比我预期的体面,起码项目排期没在存储过程上崩掉。

Oracle 讲完了,MySQL 那条线我也摸过。另一个项目源端是 MySQL,切到兼容模式之后,应用侧真的就是换个 JDBC 驱动,MyBatis 里的 XML 一个没动。原来靠 Binlog 做 CDC 的那套同步链路,KES 的逻辑日志也提供了对应的消费方式,下游对接没大改。唯一要留神的是分页写法,LIMIT 出来的结果和原来有细微差别,我们拿生产数据对了一遍才放心。分片中间件那条路如果原来用了 ShardingSphere,迁完之后很多场景可以把分片逻辑撤了,单库扛住反而是解脱。

运维工具链顺嘴提一下。监控面板里慢查询、连接数、复制延迟、锁等待这些常规项都齐,备份工具支持全量加 PITR,恢复到任意时间点。没有专职 DBA 的团队,这套开箱即用的东西比功能多寡重要得多,这话我说第三遍了,因为它真的重要。

六、换个战场,物联网的时序数据怎么收拾

去年有个做工业设备监控的团队找我。几千台设备,温度振动电流每秒往库里灌,他们一开始图省事全怼进了 MySQL。头两个月风平浪静,第三个月崩了,查个温度趋势要等好几秒,写入延迟从几毫秒飘到几百毫秒,磁盘一天涨十几 GB,眼看着要满。

这是标准的存不下、查不快、算不准三连。按老思路该请专用时序库出场了,可设备档案、维修工单还在关系库里,要一起分析就得跨库同步,链路一长口径必歪,运维还得多伺候一套系统。这回我直接用 KES 自己的时序能力,指标和业务数据放一个库里:

CREATE TABLE t_device_metric (
  device_id  VARCHAR2(32) NOT NULL,
  ts         TIMESTAMP    NOT NULL,
  temp       NUMERIC(6,2),
  vibration  NUMERIC(8,4),
  current_a  NUMERIC(8,3)
);

存储这块,压缩是第一道闸。金仓时序引擎做字段级压缩,传感器数值、状态枚举分开编码。工业数据重复度极高,温度在 23 到 25 度之间晃,原样存一遍又一遍纯属浪费,压完能到十比一。我那个风电场项目,上千台风机的秒级数据进库,最后磁盘只用了原来的五分之一。分区加分层保留策略也得跟上,原始数据、分钟聚合、日级聚合各留各的年限。降采样这个事我年轻时候吃过亏,忘了配,三个月后存储账翻了几倍才想起来补,你们别学我。

查询的大头是时间窗口。按五分钟算平均温度,还要关联设备档案表筛产线,一条 SQL 搞定:

SELECT m.device_id,
       TIME_BUCKET('5 minutes', m.ts) AS bucket,
       AVG(m.temp) AS avg_temp,
       MAX(m.vibration) AS max_vib
  FROM t_device_metric m
  JOIN t_device_info d ON d.device_id = m.device_id
 WHERE m.ts >= NOW() - INTERVAL '3 hours'
   AND d.line_no = 'L2'
 GROUP BY m.device_id, TIME_BUCKET('5 minutes', m.ts)
 ORDER BY bucket;

"每 5 分钟平均功率"这种固定口径的,可以做成连续聚合。预定义成聚合视图,引擎后台自己增量维护,大屏直接查预计算结果,毫秒级就回来了。设备基数上万的时候这玩意就是救命的,几亿行的原始表,谁查谁知道。

算这一层还有条底线:数据不能丢。金仓是一主多从副本加自动切换,RPO 等于 0。公开案例里有个智能电网调度系统,二十几个省、七十多万传感器,跑了十四年,可用性五个 9。我们客户的生产控制业务敢往上放,靠的就是这个。

PoC 的时候高可用一定亲手练。拔网线、杀主库进程,掐表看切换时长,完了核对有没有丢事务。文档上写秒级切换的产品多了去了,自己测出来的数才算数。备份恢复也得来一遍真的,误删一张表,用 PITR 恢复到删除前一秒,这个动作平时练熟了,出事那天才不抓瞎。

七、AI 这波,金仓怎么接的

今年他们发布会把口号改成了"AI 数据库用金仓"。我第一反应是又来一个自然语言查数的聊天框,后来发现不是。他们把边界划得挺清楚:数据库管确定性计算和权限,大模型管理解和推理,俩人各干各的,别想着谁吞了谁。

落到产品上是三件事。读懂数据,库内算,权限守住。

库内向量化最直观。文本不出库,加载库内的嵌入模型直接生成向量建索引,省掉出库转换再回写那一整套折腾:

ALTER TABLE t_knowledge ADD COLUMN vec VECTOR(768);

SELECT doc_id, title,
       VEC_DISTANCE_COSINE(vec, :query_vec) AS dist
  FROM t_knowledge
 ORDER BY dist
 LIMIT 5;

真正让我多想了会儿的是语义层。NL2SQL 为什么总差口气?不是模型不会写 SQL,是它不知道"活跃用户""有效合同"在你公司到底指什么。金仓把实体、关系、业务口径、行业术语这些收进语义层管起来,能版本化、能灰度、能回滚,AI 先按表结构和业务文档提建议,人再审核拍板。语义这东西以前散在各处,产品的脑子里、过期的文档里,现在变成了数据库里可以管理的对象。没有这层治理的自然语言查询,看着聪明,其实靠猜。

权限是金仓的老本行,行级列级控制加细粒度审计,智能体调用直接继承这套体系。数据尽量不出库加工,权限断层就不存在。我在评审会上驳过不止一次"用提示词保证安全"的方案,提示词能拦住的,太少了。三权分立也提一嘴,系统、安全、审计三个管理员互相看着,等保高级别的硬要求,金仓是内建的,能省不少整改的活儿。

八、几句掏心窝的话

要动手 PoC 的朋友,听我三句劝。

跑分别全信。厂商的百万点写入都是理想条件下测的,你自己拿接近真实规模的数据灌进去,把生产 TOP 50 的 SQL 跑一遍,看执行计划看耗时。故障切换要真演练,别只看文档。

迁移评估放在选型决策前面。存储过程和包的自动转换率直接决定工期预算,让 DBA 亲手备份恢复一次、排查一次慢查询,工具顺不顺手一试便知。

分区和降采样第一天就配好。别等磁盘报警,返工比多花两天设计贵十倍。

最后啰嗦两句

绕回开头那个选了三个月的老同学。我的建议一直没变过:先看自己再看产品,源端定兼容方向,规模定架构路线,信创做硬过滤,团队能力做裁决,四步走完候选自然就剩两三个,剩下的交给 PoC 和真实业务 SQL。

金仓能常驻我的短名单,靠的不是哪项跑分惊艳,是几件事凑齐了:Oracle 和 MySQL 两头兼容,迁移成本压得下来;一套内核从集中式铺到分布式;时序、向量这些新负载长在关系内核里,不用另起炉灶;国产化适配和 RPO 等于 0 的高可用把硬门槛兜住。选数据库选的不只是个存算引擎,是往后三五年数据演进的路径。这一层,标书开写之前值得多想十分钟。

转载自 CSDN-专业IT技术社区

原文链接:https://blog.csdn.net/beautifulmemory/article/details/170703931

文章来源转载

评论

评论列表

微信小程序
QQ小程序

关于作者

点赞数:0
关注数:0
粉丝:0
文章:0
关注标签:0
加入于:--