迁移数据库往往被当成一次技术操作,实际上它是一次带风险的系统变更。真正决定成败的,是动手之前的判断。 先明确为什么要迁 迁移的动因通常有几类:性能瓶颈、成本压力、合规要求、架构解耦、厂商锁定。不同动因对应不同的验收标准。为降本而迁,就要算清迁移后的总拥有成本;为性能而迁,就要先在测试环境复现瓶颈。目标说不清,项目就没有终点,也无法判断何时该停。 摸清数据家底 先盘点数据量、表数量、字段类型、索引、约束、存储过程、触发器和外键依赖。重点找三类隐患:源库特有语…
先分清同步的四种典型场景 数据同步的需求看起来相似,落地差别很大。先判断自己属于哪一类: 同构库之间:如 MySQL 到 MySQL,多用于读写分离、跨机房容灾。 异构库之间:如 MySQL 到 Elasticsearch、PostgreSQL 到 ClickHouse,服务于检索、分析。 库到数仓/数据湖:强调批量吞吐与历史可追溯。 多活与双向同步:最难,要处理写冲突。 场景判断错了,选型基本会走偏。比如把分析型同步当成在线交易同步来做,往往在延迟和成本…
SQL数据库解决什么问题 SQL数据库即关系型数据库,以表的形式组织数据,用行表示记录、列表示字段,并通过主键、外键建立表间关联。它擅长处理结构化数据,尤其适合需要强一致性和复杂查询的业务场景,比如订单、账务、用户权限等。 其核心优势来自两点:一是数据以规范化结构存储,减少冗余;二是通过SQL这一声明式语言描述“要什么”,而把“怎么取”交给查询优化器。 理解SQL的三个关键点 事务与ACID 事务把多条操作打包成一个整体,要么全部成功,要么全部回滚。ACI…
先明确:数据库学习不是背语法 很多人学数据库从背 SQL 语法开始,结果能写出查询,却说不清一条语句为什么慢。数据库学习的核心是理解数据如何被存储、检索和并发访问。语法只是入口,真正的分水岭在“执行层面”。 建议把学习拆成三个阶段:会用、会调、会设计。 阶段一:把 SQL 写到“能看懂执行计划” 这一阶段的重点是增删改查与连接查询。不要只练单表查询,重点练多表 JOIN、子查询和聚合。每写完一条查询,试着用 EXPLAIN 看执行计划,观察是否走索引、扫描…
Access 数据库以单文件形式存储,使用方便,但也正因为所有表、查询、窗体都集中在一个 mdb 或 accdb 文件里,一旦文件异常,影响面往往很大。理解损坏的常见诱因,掌握正确的修复顺序,比事后盲目尝试更重要。 先判断是不是真的损坏 遇到打不开的情况,不要急着下结论。先排除几种常见误判: 文件位于网络共享目录,多人同时打开导致锁冲突,提示可能类似损坏,实际只是权限或连接问题。 文件被复制时未关闭,得到的是不完整副本。 当前 Access 版本与文件格式…
先判断:删除到底发生了什么 数据库里的“删除”并不都等于数据被抹掉。DELETE 通常只标记行不可见,数据页仍在;TRUNCATE 释放数据页但可能留下日志;DROP TABLE 删除元数据与表空间。恢复的可能性,取决于删除发生后系统还写了多少东西。 因此第一步不是急着恢复,而是停止写入。 立即止损的三件事 暂停业务写入,或将库置为只读,避免新数据覆盖可恢复区域。 记录删除时间点、操作账号、涉及表与大致行数。 保留现场:不要重启实例,不要重建表,不要在原库…
先建立数据模型的概念 关系型数据库把数据放在“表”里,可以把它想成一张规整的电子表格:每一行是一条记录,每一列是一个字段,字段有固定的数据类型。表与表之间通过外键关联,避免同一份数据重复存放。 有一列或几列能唯一标识每一行,这就是主键。主键通常用自增整数,也可以用业务编号,但必须唯一且不为空。 常用数据类型 INT:整数,适合编号、数量 DECIMAL(p,s):精确小数,金额优先用它,不要用浮点数 VARCHAR(n):变长字符串,n 是上限,不要无脑给…
VB连接数据库的两条主线 VB 连接数据库大致分为两种场景:VB6 时代的 ADO,以及 VB.NET 时代的 ADO.NET。前者以 Connection、Command、Recordset 三个对象为核心,后者以 SqlConnection、SqlCommand、SqlDataReader 为主。理解这条分界线,可以避免在网上抄到版本不匹配的代码。 VB6:用 ADO 建立连接 ADO 的连接字符串决定了数据库类型。以 Access 为例,可使用 Pr…
mdb 不只是“一个文件” 很多人把 mdb 当成 Access 的专属后缀,其实它代表的是 Jet 数据库引擎(Joint Engine Technology)的存储格式。一个 mdb 文件内部同时容纳了表、索引、查询、窗体、报表和 VBA 代码,表与对象元数据都放在同一个文件里,因此开箱即用、无需单独安装服务端。 这种“单文件即数据库”的设计,是它在上世纪九十年代到本世纪初广泛流行的根本原因。 文件内部大致有什么 从结构上看,mdb 把数据页按固定大小…
先明确Access适合做什么 Access是微软Office套件中的桌面关系型数据库,适合单人或小团队管理结构化数据,例如客户名单、库存记录、项目台账。它把数据表、查询、窗体、报表整合在同一个文件中,学习门槛低于大型数据库。入门阶段不必追求功能全覆盖,先把“建表—录入—查询”这条主线走通。 建表:字段设计决定后续效率 新建数据库后,第一件事是规划表结构。每张表只描述一类事物,避免把客户信息和订单信息塞进同一张表。 字段设计要遵循三条原则: 一个字段只存一种…
先明确:MySQL 本身免费,花钱的是“运行环境” MySQL 社区版采用 GPL 协议,可以免费下载、免费商用,不存在“数据库授权费”。所谓“免费 MySQL 数据库”,真正要解决的是把它跑在什么地方:自己的服务器、云厂商的免费额度,还是第三方托管平台。选型的关键不是软件价格,而是运维成本、可用性要求和数据安全。 四种常见的免费方案 1. 本地或自有服务器自建 在开发机、家用主机或已有云服务器上安装 MySQL 社区版,是最彻底的免费方案。优点是权限完全…
备份的目标是恢复,不是存档 很多团队把备份当成一项合规任务:定时跑脚本、文件落在磁盘上,就算完成。真正决定备份价值的,是故障发生时能否在可接受的时间内把数据恢复到可接受的状态。两个指标要先定下来:RPO(能容忍丢多少数据)和 RTO(能容忍停多久)。RPO 决定了备份频率和是否必须依赖日志,RTO 决定了恢复手段是直接还原还是需要并行重建。 三种基本备份方式怎么选 全量备份 每次完整复制整个数据库。优点是恢复路径最短,一个备份集就能还原;缺点是耗时和占用空…
数据库服务器配置没有通用答案。先判断负载是读多写少、写多读少,还是混合型,以及数据量级、并发连接数和延迟要求。OLTP 场景关注低延迟与高 IOPS,OLAP 场景更看重吞吐与内存带宽。配置前把这几项写清楚,后续选型和调参才有依据。 硬件选型的三条底线 CPU 与内存 CPU 核心数不必盲目堆高,数据库更依赖单核性能与稳定的主频。内存是性价比最高的投入:尽量让热数据常驻内存,减少磁盘随机读。内存容量建议按活跃数据集大小估算,并预留 20% 以上给连接、排序…
数据库测试到底测什么 数据库测试的目标不是“确认能连上”,而是验证数据在写入、读取、修改、删除的全过程中保持正确、完整、可恢复。它通常包括五类内容:表结构与字段类型、约束与索引、事务与并发行为、数据迁移脚本、查询性能。 很多缺陷不在接口层暴露,而是藏在约束缺失、默认值错误、字符集不一致、时区处理不当这些细节里。测试要从数据本身出发,而不是只盯着页面反馈。 结构与约束验证 先验证数据库定义是否符合设计:字段类型与长度、非空约束、唯一约束、外键关系、默认值、索…
先判断:是数据问题还是逻辑问题 发现数据异常时,第一反应不应是改数据。先确认异常来源:是应用层写入逻辑缺陷、并发竞争,还是存储层损坏。前者修数据只是治标,下次仍会复现;后者才需要优先处理数据本身。判断依据包括异常是否集中在特定时间窗口、是否与某次发布或批量任务重合、是否可稳定复现。 修复前必须做的三件事 冻结写入。 在定位清楚前,对受影响表或业务线做写保护,避免修复过程中新数据混入,导致污染范围扩大。 完整备份。 对受影响数据进行全量快照,包括当前异常状态…
数据库到底解决什么问题 数据库的核心价值不是"存数据",而是在并发、故障和增长面前,让数据保持一致、可查、可控。文件系统也能存数据,但一旦多个人同时改、机器突然断电、数据量涨到千万级,就需要数据库来兜底:事务保证要么全成功要么全失败,索引让查询不必全表扫描,权限与备份机制让数据可管理。 关系型数据库仍是默认答案 MySQL、PostgreSQL 这类关系型数据库,用表结构约束数据、用 SQL 描述查询、用事务保证一致性。它的优势在于数据模型清晰、生态成熟、…
数据库系统解决什么问题 数据量小的时候,用文件保存数据似乎够用。但一旦多个用户同时读写、数据分散在多个文件、还要保证不出现矛盾记录,文件系统就力不从心了。数据库系统的价值在于把数据的存储、共享、安全和一致性交给一套统一的管理机制,应用只需通过接口访问数据。 数据库系统通常由数据库、数据库管理系统和应用三部分组成。数据库管理系统负责数据的定义、操纵、控制和维护,是整套体系的核心。 数据模型:从概念到实现 理解数据库,先要理解数据模型。常见的有三个层次: 概念…
数据库损坏到底是什么 数据库损坏指存储的数据文件、索引结构或事务日志出现不一致,导致查询报错、表无法打开,甚至整个实例无法启动。它可能是物理层面的页损坏,也可能是逻辑层面的元数据错乱。两类问题的处理方式差别很大:物理损坏通常依赖备份和修复工具,逻辑损坏有时可通过导出重建解决。 常见诱因 硬件与系统层 磁盘坏道、内存故障、RAID 卡缓存异常都可能把错误数据写入文件。文件系统在异常断电后未完成日志回放,也会留下半写状态的数据页。 运维与操作层 直接复制正在运…
数据库往往是攻击者最想拿到的东西:业务数据、用户信息、交易记录都在里面。安全做得好不好,不取决于买了多少设备,而取决于日常管理是否到位。下面从三个最容易被忽视的环节展开。 账号与权限:先把门关小 多数泄露事件的起点不是高深漏洞,而是弱口令和过大的权限。落地时抓住几点: 一人一账号,禁止多人共用应用账号,便于追责; 应用连接库使用最小权限账号,只授予必要的库表读写,不给 DROP、GRANT 等高危权限; 禁用或删除默认账号、测试账号,定期清理离职人员账号;…
VB数据库开发的基本格局 用Visual Basic做数据库应用,核心问题不是“能不能连”,而是“用什么连、连什么、怎么连得稳”。VB本身不提供数据库引擎,它依赖外部数据访问接口。理解这一点,后面的选型才不会混乱。 常见的数据访问方式 ADO(ActiveX Data Objects):目前VB6及VBA环境中最主流的方式,通过Connection、Command、Recordset三个核心对象完成连接与操作,支持ODBC和OLEDB提供程序。 DAO(D…