MySQL：如何快速的查看Innodb数据文件

欢迎关注我的《深入理解MySQL主从原理 32讲 》，如下：

如果图片不能显示可查看下面链接：

https://www.jianshu.com/p/d636215d767f注意：本文输出格式全是16进制格式。经常有朋友问我一些如何查看Innodb数据文件的问题比如：如果要得到答案除了学习源码，可能更加直观的方式就是查看Innodb的ibd数据文件了，俗话说得好“眼见为实”，但是我们知道数据文件是二进制形式的，Innodb通过既定的访问方式解析出其中的格式得到正确的结果。如果我们要去访问这些ibd文件，通常的方式就是可以通过hexdump -Cv这样的命令进行二进制的访问，最初我也是这样访问的，但是看起来眼睛特别难受。因此我写了2个工具：innblock：一个用于解析数据块的工具，能够得到每行的偏移量，并且按照逻辑和物理顺序排序。详细使用方式可以参考
https://www.jianshu.com/p/5c1a99614fb8

下载地址：
https://github.com/gaopengcarl/innblock 除了代码我已经编译好了直接使用即可bcview：一个小工具，用于将数据文件按照既定的大小（比如16K）分块，然后访问每个块的偏移量后指定的字节数，通常我们并不知道记录到底多长，可以设置一个较大的查看字节数。

下载地址：
https://github.com/gaopengcarl/bcview 除了代码我已经编译好了直接使用即可有了这两工具可能访问ibd数据文件就更加方便一些了，下面我就使用这两个工具来进行数据文件的查看，来解决开头我们提出的这些问题。本文无意解释详细的Innodb文件结构，这样的文章和书籍很多，比如：整个系列都是讲解Innodb文件结构的，我们只需要知道普通数据文件，除去块级别的开销后，其第一行记录从偏移量96 开始，首先出现的是2个伪列 infimum 和 supremum，它们的位置固定在块的94-120字节，其中94-107为infimum 相关信息，而107到120为supremum相关信息，分别的heap no 为 0和1，它们是逻辑记录的开始和结尾，所有的实际的记录都链接在这一条链表上。其中普通记录的大概格式如下：
我暂且将黄色部分称为‘行头’，图中用粉红色标记的innblock每行数据offset的位置，
我们发现innblock工具指向的是行头以后实际字段开启的位置。下面是一个innblock工具典型的部分输出：我们可以找到一行除了infimum和 supremum记录以外的normal记录，并且标记了这样记录字段的起点（offset:128），也就是图中的粉红色部分，但是需要注意的是聚集索引（表本身）而言，如果没有主键前面3列分别为：如果存在主键则为：关于rowidtrx idroll ptr的源码中的定义如下：而roll ptr的具体含义可以参考函数trx_undo_decode_roll_ptr如下：为了解决文中开头的几个问题，我们来建立测试表如下：我们发现这里实际上除了rowid问题还不能包含，其他都包含了，接下来我们使用innblock进行扫描。如下：1、扫描数据文件找到主键和普通索引数据块这里实际上323就是聚集索引，324就是普通索引，它们数据块对应是3和4。2、扫描聚集索引记录3、扫描普通索引记录

“`

[root
@gp1 test]# ./innblock baguait1.ibd 4 16链表部分：

==== Block list info ====

——-Total used r开发云主机域名ows:6 used rows list(logic):

(1) INFIMUM record offset:99 heapno:0 n_owned 1,delflag:N minflag:0 rectype:2

(2) normal record offset:126 heapno:2 n_owned 0,delflag:N minflag:0 rectype:0

(3) normal record offset:173 heapno:5 n_owned 0,delflag:N minflag:0 rectype:0

(4) normal record offset:137 heapno:3 n_owned 0,delflag:N minflag:0 rectype:0

(5) normal record offset:155 heapno:4 n_owned 0,delflag:N minflag:0 rectype:0

(6) SUPREMUM record offset:112 heapno:1 n_owned 5,delflag:N minflag:0 rectype:3

——-Total used rows:6 used rows list(phy):

(1) INFIMUM record offset:99 heapno:0 n_owned 1,delflag:N minflag:0 rectype:2

(2) SUPREMUM record offset:112 heapno:1 n_owned 5,delflag:N minflag:0 rectype:3

(3) normal record offset:126 heapno:2 n_owned 0,delflag:N minflag:0 rectype:0

(4) normal record offset:137 heapno:3 n_owned 0,delflag:N minflag:0 rectype:0

(5) normal record offset:155 heapno:4 n_owned 0,delflag:N minflag:0 rectype:0

(6) normal record offset:173 heapno:5 n_owned 0,delflag:N minflag:0 rectype:0
| 4 | a | NULL | NULL |[root
@gp1 test]# ./bcview baguait1.ibd 16 262 30|grep 00000003

current block:00000003—Offset:00262—cnt bytes:30—data is:8000000400000005d970e000000043011061000000000000000000000000
| 2 | gaopeng | NULL | gaopeng |[root
@gp1 test]# ./bcview baguait1.ibd 16 180 50|grep 00000003

current block:00000003—Offset:00180—cnt bytes:50—data is:8000000200000005d96adc00000042011067616f70656e6767616f70656e6720202020202020202020202020070600002000
[root
@gp1 test]# ./bcview baguait1.ibd 16 137 20|grep 00000004

current block:00000004—Offset:00137—cnt bytes:20—data is:67616f70656e67800000020700000020ffd56761
[root
@gp1 test]# ./bcview baguait1.ibd 16 173 20|grep 00000004

current block:00000004—Offset:00173—cnt bytes:20—data is:6180000004000000000000000000000000000000
| 2 | gaopeng | NULL | gaopeng |+——+————-+————-+————-+

| id | c1 | c2 | c3 |

+——+————-+————-+————-+

| 1 | NULL | gaopeng | gaopeng |

| 2 | gaopeng | NULL | gaopeng |

| 3 | gaopeng | NULL | NULL |

| 4 | a | NULL | NULL |

+——+————-+————-+————-+
设置NULL和NOT NULL属性都是inplace方式，因为需要修改NULL位图 因此都需要重组，代价较高

ALTER TABLE tbl_name MODIFY COLUMN column_name data_type NULL, ALGORITHM=INPLACE, LOCK=NONE;

ALTER TABLE tbl_name MODIFY COLUMN column_name data_type NOT NULL, ALGORITHM=INPLACE, LOCK=NONE;
drop table baguait1;

create table baguait1(id int ,c1 varchar(20) ,c2 varchar(20),c3 char(20)) ENGINE=InnoDB DEFAULT CHARSET=utf8;
insert into baguait1 values(1,NULL,’gaopeng’,’gaopeng’);mysql> select * from baguait1;

+———+———+————-+————-+

| id | c1 | c2 | c3 |

+———+———+————-+————-+

| 1 | NULL | gaopeng | gaopeng |

+———+———+————-+————-+

1 row in set (0.00 sec)
[root
@gp1 test]# ./innblock baguait1.ibd scan 16

…

Datafile Total Size:98304

===INDEX_ID:325

level0 total block is (1)

block_no: 3,level: 0|*|
[root
@gp1 test]# ./innblock baguait1.ibd 3 16…

==== Block list info ====

——-Total used rows:3 used rows list(logic):

(1) INFIMUM record offset:99 heapno:0 n_owned 1,delflag:N minflag:0 rectype:2

(2) normal record offset:128 heapno:2 n_owned 0,delflag:N minflag:0 rectype:0

(3) SUPREMUM record offset:112 heapno:1 n_owned 2,delflag:N minflag:0 rectype:3

——-Total used rows:3 used rows list(phy):

(1) INFIMUM record offset:99 heapno:0 n_owned 1,delflag:N minflag:0 rectype:2

(2) SUPREMUM record offset:112 heapno:1 n_owned 2,delflag:N minflag:0 rectype:3

(3) normal record offset:128 heapno:2 n_owned 0,delflag:N minflag:0 rectype:0
[root
@gp1 test]# ./bcview baguait1.ibd 16 128 60 |grep 00000003

current block:00000003—Offset:00128—cnt bytes:60—data is:000001ac310000000005d97fea0000002c01108000000167616f70656e6767616f70656e672020202020202020202020202000000000000000000000

“`
我们来解析一下：当然这里只是列举了一些例子来说明工具的使用方式，可以按照你的需求方便的从ibd文件中提取出你感兴趣的信息。

相关推荐: mysql的root用户无法给普通用户授权问题处理

mysql> update mysql.user set Grant_priv=’Y’ where User=’root’ an开发云主机域名d Host=’localhost’; mysql> flush privileges;相关推荐: 揭秘M…