使用myisamchk进行表的维护和崩溃恢复
ckernel
|
1#
ckernel 发表于 2006-10-19 22:15
使用myisamchk进行表的维护和崩溃恢复
在下文中,我们将讨论myisamchk,但是也适用于老的isamchk。
你可以使用myisamchk实用程序来获得有关你的数据库桌表的信息、检查和修复他们或优化他们。下列小节描述如何调用myisamchk(包括它的选项的描述),如何建立一个表维护的时间表,并且如何使用myisamchk执行其各种功能。 如果你用--skip-locking运行mysqld(它在一些系统上是缺省的,如Linux),当mysqld正在使用同一个表时,你不能可靠地使用myisamchk检查一张表。如果你能肯定在你运行myisamchk时没有人通过mysqld正在存取表,在你开始检查表之前,你仅需做mysqladmin flush-tables。如果你不能保证, 那么当你检查表时,你必须停掉mysqld。如果你在mysqld正在更新表时运行myisamchk,你可能得到一个表已破坏的警告,即使它没有。 如果你没使用--skip-locking,你能在任何时间使用myisamchk检查表。当你这样时,所有试图更新表的客户在继续前将等到myisamchk就绪。 如果你使用myisamchk修复或优化表,你必须总是保证mysqld服务器不在使用表(如果你正在使用--skip-locking,这也适用)。如果你不停掉mysqld,在你运行myisamchk前,你至少应该做一个mysqladmin flush-tables。 在大多数情况下,你也可使用命令OPTIMIZE TABLES优化并修复表,但是这不如myisamchk快或可靠(在真正的致命错误的情况下)。在另一方面,OPTIMIZE TABLE较易使用并且你不必须关心清空表。见7.9OPTIMIZE TABLE句法。 13.1.1 myisamchk调用语法 myisamchk这样调用: shell> myisamchk [options] tbl_name options指定你想要myisamchk做什么。他们在下面描述。(你也可以通过调用myisamchk --help得到一张选项表。) 没有选项,myisamchk简单地检查你的表。为了得到更多的信息或告诉myisamchk执行校正操作,指定在下面和下小节描述的选项择。 tbl_name是你想要检查的数据库表。如果你不在数据库目录的某处运行myisamchk,你必须指定到文件的路径,因为myisamchk不知道你的数据库位于哪儿。实际上,myisamchk别在乎你正在操作的文件是否位于一个数据库目录;你可以拷贝对应于一张数据库表的文件到别处并且在那里执行恢复操作。 如果你愿意,你可以myisamchk命令行命名几个表。你也能指定一个名字作为一个索引文件(用“ .MYI”后缀),它允许你通过使用模式“*.MYI”指定在一个目录所有的表。例如,如果你在一个数据库目录,你可以这样在目录下检查所有的表: shell> myisamchk *.MYI 如果你不在数据库目录下,你可通过指定到目录的路径检查所有在那里的表: shell> myisamchk /path/to/database_dir/*.MYI 你甚至可以通过为MySQL数据目录的路径指定一个通配符来检查所有的数据库中的所有表: shell> myisamchk /path/to/datadir/*/*.MYI myisamchk支持下列选项: -a, --analyze 分析键值的分布。这通过让联结优化器更好地选择表应该以什么次序联结和应该使用哪个键来改进联结性能。 -#, --debug=debug_options 输出调试记录文件。debug_options字符串经常是'd:t:o,filename'。 -d, --description 打印出关于表的一些信息。 -e, --extend-check 非常彻底地检查表。这仅在极端情况下是必要的。通常,myisamchk应该找出所有错误,即使没有改选项。 -f, --force 覆盖老的临时文件。如果你在检查表时使用-f (运行myisamchk没有-r),myisamchk在检查期间将自动为出现一个错误的表用-r重启。 --help 显示一条帮助消息并且退出。 -i, --information 打印有关被检查的表的信息统计。 -k #, --keys-used=# 与-r一起使用。告诉ISAM表处理器仅更新头#个索引。较高编号的索引被撤销。这能用来使插入变得更快!撤销的索引能通过使用myisamchk -r被重新激活。 -l, --no-symlinks 在修复时,不跟随符号连接。通常myisamchk修复一个符号连接所指的表。 -q, --quick 与-r一起使用使得一个修复更快。通常,原来的数据文件没被接触;你能指定第二个-q强制使用原来的数据文件。 -r, --recover 恢复模式。可以修复几乎所有一切,除非唯一的键不是唯一。 -o, --safe-recover 恢复模式。使用一个老的恢复方法;这比-r慢些,但是能处理一-r不能处理的情况。 -O var=option, --set-variable var=option 设置一个变量的值。可能的变量列在下面。 -s, --silent 沉默模式。当错误发生时,仅写输出。你能使用-s两次(-ss)非常沉默地做myisamchk。 -S, --sort-index 以从高到低的顺序排序索引树块。这将优化搜寻并且将使按键值的表扫描更快。 -R index_num, --sort-records=index_num 根据一个索引排序记录。这使你的数据更局部化并且可以加快在该键上的SELECT和ORDER BY的范围搜索。(第一次做排序可能很慢!) 为了找出一张表的索引编号,使用SHOW INDEX,它以myisamchk看见他们的相同顺序显示一张表的索引。索引从1开始编号。 -u, --unpack 解开一个用myisampack压缩的表。 -v, --verbose 冗长模式。打印更多的信息。这能与-d和-e一起使用。为了更冗长,使用-v多次(-vv, -vvv)! -V, --version 打印myisamchk版本并退出。 -w, --wait 如果表被锁定,等待。 对--set-variable(-O)选项,可能的变量是: key_buffer_size 当前值: 16776192 read_buffer_size 当前值: 262136 write_buffer_size 当前值: 262136 sort_buffer_size 当前值: 2097144 sort_key_blocks 当前值: 16 decode_bits 当前值: 9 13.1.2 myisamchk内存使用 当你运行myisamchk时,内存分配很重要。myisamchk使用不超过你用-O选项指定的内存量。如果你想在很大的文件上使用myisamchk,你首先应该确定你想要它使用多少内存。缺省仅使用大约 3M 来修复。通过使用更大的值,你能使myisamchk更快地操作。例如,如果你有多于32M内存,你能使用例如这些选项(除了任何你可能指定的选项): shell> myisamchk -O sort=16M -O key=16M -O read=1M -O write=1M ... 使用-O sort=16M应该可能对大多数情形就足够了。 必须明白,myisamchk使用在TMPDIR里面的临时文件。如果TMPDIR指向一个内存文件系统,你可能很容易得到内存溢出的错误。如果它发生,设定TMPDIR指向有更多空间的某个目录并且重启myisamchk。 --建立一个数据库表维护规范 在一个定期基础而非等到问题出现才实施数据库表的检查是一个好主意。为维护目的,你能使用myisamchk -s检查表。-s选项使myisamchk以沉默模式运行,当错误出现时,仅仅打印消息。 在服务器启动时检查表是一个好主意。例如,无论何时机器在更新当中重新启动了,你通常需要检查所有可能被影响了的表。(这是一个“期望破坏了的表”) 如果重启后有一个旧的“.pid”(进程ID),你能为safe_mysqld加入一个测试,运行myisamchk检查所有在过去24小时修改过的表)。(“.pid”文件在mysqld启动时由它创建,并它正常终止时删除。在系统启动时存在一个“.pid”文件表明mysqld异常地终止了。) 一个更好的测试将是检查任何表,它的最后修改时间是比“.pid”文件更新。 你也应该定期在正常系统操作期间检查表。在TcX,我们运行一个cron任务,每周一次检查我们所有重要的表,在一个“crontab”文件中使用这样的行: 35 0 * * 0 /path/to/myisamchk -s /path/to/datadir/*/*.MYI 这打印出损坏的表的信息,因此我们能检验并且在需要时修复他们。 当我们现在几年(这确实是真的)都没有任何意外损坏的表时(由于除硬件故障外的其他原因造成损坏的表),每周一次对我们是足够了。 我们建议现在开始,你对所有最后24小时内被更新了表每晚都执行myisamchk -s,直到你变得象我们那样信任MySQL。 --- 建立一个数据库表维护规范 为了获得关于一个表的描述或统计,使用显示在下面的命令。我们以后更详细地解释某些信息。 myisamchk -d tbl_name 以“描述模式”运行myisamchk,生成你的表的描述。如果你用--skip-locking选项启动MySQL服务器,myisamchk可以当它运行时报告被一个更新的表的错误。然而,既然在描述模式中myisamchk不改变表,没有破坏数据的任何风险。 myisamchk -d -v tbl_name 为了生成更多关于myisamchk正在做什么的信息,加上-v告诉它以冗长模式运行。 myisamchk -eis tbl_name 仅显示一个表最重要的信息。因为必须读取整个表,它很慢。 myisamchk -eiv tbl_name 这类似-eis,只是告诉你正在做什么。 myisamchk -d输出的例子: MyISAM file: company.MYI Record format: Fixed length Data records: 1403698 Deleted blocks: 0 Recordlength: 226 table description: Key Start Len Index Type 1 2 8 unique double 2 15 10 multip. text packed stripped 3 219 8 multip. double 4 63 10 multip. text packed stripped 5 167 2 multip. unsigned short 6 177 4 multip. unsigned long 7 155 4 multip. text 8 138 4 multip. unsigned long 9 177 4 multip. unsigned long 193 1 text myisamchk -d -v输出的例子: MyISAM file: company Record format: Fixed length File-version: 1 Creation time: 1999-10-30 12:12:51 Recover time: 1999-10-31 19:13:01 Status: checked Data records: 1403698 Deleted blocks: 0 Datafile parts: 1403698 Deleted data: 0 Datafilepointer (bytes): 3 Keyfile pointer (bytes): 3 Max datafile length: 3791650815 Max keyfile length: 4294967294 Recordlength: 226 table description: Key Start Len Index Type Rec/key Root Blocksize 1 2 8 unique double 1 15845376 1024 2 15 10 multip. text packed stripped 2 25062400 1024 3 219 8 multip. double 73 40907776 1024 4 63 10 multip. text packed stripped 5 48097280 1024 5 167 2 multip. unsigned short 4840 55200768 1024 6 177 4 multip. unsigned long 1346 65145856 1024 7 155 4 multip. text 4995 75090944 1024 8 138 4 multip. unsigned long 87 85036032 1024 9 177 4 multip. unsigned long 178 96481280 1024 193 1 text myisamchk -eis输出的例子: Checking MyISAM file: company Key: 1: Keyblocks used: 97% Packed: 0% Max levels: 4 Key: 2: Keyblocks used: 98% Packed: 50% Max levels: 4 Key: 3: Keyblocks used: 97% Packed: 0% Max levels: 4 Key: 4: Keyblocks used: 99% Packed: 60% Max levels: 3 Key: 5: Keyblocks used: 99% Packed: 0% Max levels: 3 Key: 6: Keyblocks used: 99% Packed: 0% Max levels: 3 Key: 7: Keyblocks used: 99% Packed: 0% Max levels: 3 Key: 8: Keyblocks used: 99% Packed: 0% Max levels: 3 Key: 9: Keyblocks used: 98% Packed: 0% Max levels: 4 Total: Keyblocks used: 98% Packed: 17% Records: 1403698 M.recordlength: 226 Packed: 0% Recordspace used: 100% Empty space: 0% Blocks/Record: 1.00 Record blocks: 1403698 Delete blocks: 0 Recorddata: 317235748 Deleted data: 0 Lost space: 0 Linkdata: 0 User time 1626.51, System time 232.36 Maximum resident set size 0, Integral resident set size 0 Non physical pagefaults 0, Physical pagefaults 627, Swaps 0 Blocks in 0 out 0, Messages in 0 out 0, Signals 0 Voluntary context switches 639, Involuntary context switches 28966 myisamchk -eiv输出的例子: Checking MyISAM file: company Data records: 1403698 Deleted blocks: 0 - check file-size - check delete-chain block_size 1024: index 1: index 2: index 3: index 4: index 5: index 6: index 7: index 8: index 9: No recordlinks - check index reference - check data record references index: 1 Key: 1: Keyblocks used: 97% Packed: 0% Max levels: 4 - check data record references index: 2 Key: 2: Keyblocks used: 98% Packed: 50% Max levels: 4 - check data record references index: 3 Key: 3: Keyblocks used: 97% Packed: 0% Max levels: 4 - check data record references index: 4 Key: 4: Keyblocks used: 99% Packed: 60% Max levels: 3 - check data record references index: 5 Key: 5: Keyblocks used: 99% Packed: 0% Max levels: 3 - check data record references index: 6 Key: 6: Keyblocks used: 99% Packed: 0% Max levels: 3 - check data record references index: 7 Key: 7: Keyblocks used: 99% Packed: 0% Max levels: 3 - check data record references index: 8 Key: 8: Keyblocks used: 99% Packed: 0% Max levels: 3 - check data record references index: 9 Key: 9: Keyblocks used: 98% Packed: 0% Max levels: 4 Total: Keyblocks used: 9% Packed: 17% - check records and index references [LOTS OF ROW NUMBERS DELETED] Records: 1403698 M.recordlength: 226 Packed: 0% Recordspace used: 100% Empty space: 0% Blocks/Record: 1.00 Record blocks: 1403698 Delete blocks: 0 Recorddata: 317235748 Deleted data: 0 Lost space: 0 Linkdata: 0 User time 1639.63, System time 251.61 Maximum resident set size 0, Integral resident set size 0 Non physical pagefaults 0, Physical pagefaults 10580, Swaps 0 Blocks in 4 out 0, Messages in 0 out 0, Signals 0 Voluntary context switches 10604, Involuntary context switches 122798 这是对于用在上述例子中的表的数据大小和索引文件的大小: -rw-rw-r-- 1 monty tcx 317235748 Jan 12 17:30 company.MYD -rw-rw-r-- 1 davida tcx 96482304 Jan 12 18:35 company.MYM 对myisamchk产生信息的类型在下面解释。“keyfile”是索引文件。“记录”和“行”是同义词。 ISAM file ISAM(索引)文件名。 Isam-version ISAM格式的版本。当前总是2。 Creation time 数据文件被创建的时间。 Recover time 索引/数据文件上次被重建的时间。 Data records 在表中有多少记录。 Deleted blocks 有多少删除的块仍然保留着空间。你可以优化表以使这个空间减到最小。见13.4.3 表优化。 Datafile: Parts 对动态记录格式,这指出有多少数据块。对于一个没有碎片的优化过的表,这与Data records相同。 Deleted data 不能回收的删除数据有多少字节。你可以优化表以使这个空间减到最小。见13.4.3 表优化。 Datafile pointer 数据文件指针的大小,以字节计。它通常是2、3、4或5个字节。大多数表用2个字节管理,但是目前这还不能从MySQL控制。对固定表,这是一个记录地址。对动态表,这是一个字节地址。 Keyfile pointer 索引文件指针的大小,以字节计。它通常是1、2或3个字节。大多数表用 2 个字节管理,但是它自动由MySQL计算。它总是一个块地址。 Max datafile length 表的数据文件(.MYD文件)能够有多长,以字节计。 Max keyfile length 表的关键字文件(.MYI文件)能够有多长,以字节计。 Recordlength 每个记录占多少空间,以字节计。 Record format 用于存储表行的格式。上面的例子使用Fixed length。其他可能的值是Compressed和Packed. table description 在表中所有键值的一张表。对每个键,给出一些底层的信息: Key 该键的编号。 Start 该索引部分从记录的哪里开始。 Len 该索引部分是多长。对于紧凑的数字,这应该总是列的全长。对字符串,它可以比索引的列的全长短些,因为你能索引字符串列的前缀。 Index unique或multip(multiple)。表明一个值是否能在该索引中存在多次。 Type 这索引部分有什么数据类型。这是一个packed、stripped或empty选项的 ISAM 数据类型。 Root 根索引块的地址。 Blocksize 每个索引块的大小。缺省是1024,但是值可以在编译时改变。 Rec/key 这是由优化器使用的统计值。它告诉对该键的每个值有多少条记录。唯一键总是有一个1值。在一个表被装载后(或改变很大),这可以用myisamchk -a更新。如果这根本没被更新,给定一个30的缺省值。 在上面第一个例子中,第个9键是有2个部分的多部键。 Keyblocks used 键块使用的百分比是什么。因为在例子中使用的表只能用myisamchk被重新组织,值非常高(很接近理论上的最大值)。 Packed MySQL试图用一个公共后缀压缩键。这只能被用于CHAR/VARCHAR/DECIMAL键。对长字符串如姓名,这能显著地减少使用空间。在上面的第3个例子中,第4个键是10个字符长并且在空间上达到60%的缩减。 Max levels 对于该键的B树有多深。有长键的大表有较高的值。 Records 表中有多少行。 M.recordlength 平均记录长度。对于有定长记录的表,这是准确的记录长度。 Packed MySQL从字符串的结尾去掉空格。Packed值表明这样做达到的节约的百分比。 Recordspace used 数据文件被使用的百分比。 Empty space 数据文件未被使用的百分比。 Blocks/Record 每个记录的平均块数 (即,一个碎片记录由多少个连接组成)。对固定格式表,这总是1。该值应该尽可能保持接近1.0。如果它变得太大,你可用myisamchk重新组织表。见13.4.3 表优化。 Recordblocks 多少块(连接)被使用。对固定格式,它与记录的个数相同。 Deleteblocks 多少块(连接)被删除。 Recorddata 在数据文件中使用了多少字节。 Deleted data 在数据文件中多少字节被删除(未使用)。 Lost space 如果一个记录被改为更短的长度,就损失了一些空间。这是所有这样的损失之和,以字节计。 Linkdata 当使用动态表格式,记录碎片用指针连接(每个4 ~ 7字节)。 Linkdata被这样的指针使用的内存量之和。 如果一张表已经用myisampack压缩了,myisamchk -d打印每个表列的附加信息。对于它的一个例子及其含义的描述,见12.5 MySQL压缩只读表生成器。 使用myisamchk进行表的维护和崩溃恢复- 由MySQL用来存储数据的文件格式以已经被广泛地测试过,但是总是有外部情况可以导致数据库表被破坏: mysqld进程在一个写入当中被杀死。 计算机的意外关闭(例如,如果计算机掉电)。 一个硬件错误 这章描述如何检查和处理在MySQL数据库中的数据损坏。如果你的表损坏很多,你应该尝试找出其原因!见G.1 调试一个MySQL服务器。 在执行崩溃恢复时,理解在一个数据库中的每一个表tbl_name对应的在数据库目录中的3个文件是很重要的: 文件 用途 “tbl_name.frm” 表定义(表格)文件 “tbl_name.MYD” 数据文件 “tbl_name.MYI” 索引文件 这3个文件的每一个文件类型可能遭受不同形式的损坏,但是问题最常发生在数据文件和索引文件。 myisamchk通过一行一行地创建一个“.MYD”(数据 )文件的副本来工作,它通过由删除老的“.MYD 文件并且重命名新文件到原来的文件名结束修复阶段。如果你使用--quick,myisamchk不创建一个临时“.MYD”文件,只是假定“.MYD”文件是正确的并且仅创建一个新的索引文件,不接触“.MYD”文件,这是安全的,因为myisamchk自动检测“.MYD”文件是否损坏并且在这种情况下,放弃修复。你也可以给myisamchk两个--quick选项。在这种情况下,myisamchk不会在一些错误上(象重复键)放弃,相反试图通过修改“.MYD”文件解决它们。通常,只有在你在太少的空闲磁盘空间上实施一个正常修复,使用两个--quick选项才有用。在这种情况下,你应该至少在运行myisamchk前做一个备份。 13.4.1 怎样检查表的错误 为了检查一张表,使用下列命令: myisamchk tbl_name 这能找出所有错误的99.99%。它不能找出的是仅仅涉及数据文件的损坏(这很不常见)。如果你想要检查一张表,你通常应该没有选项地运行myisamchk或用-s或--silent选项的任何一个。 myisamchk -e tbl_name 它做一个完全彻底的数据检查(-e意思是“扩展检查”)。它对每一行做每个键的读检查以证实他们确实指向正确的行。这在一个有很多键的大表上可能花很长时间。myisamchk通常将在它发现第一个错误以后停止。如果你想要获得更多的信息,你能增加--verbose(-v)选项。这使得myisamchk继续一直到最多20个错误。在一般使用中,一个简单的myisamchk(没有除表名以外的参数)就足够了。 myisamchk -e -i tbl_name 象前面的命令一样,但是-i选项告诉myisamchk还打印出一些统计信息。 13.4.2 怎样修复表 一张损坏的表的症状通常是查询意外中断并且你能看到例如这些错误: “tbl_name.frm”被锁定不能改变。 不能找到文件“tbl_name.MYI”(Errcode :### )。 从表处理器的得到错误###(此时,错误135是一个例外)。 意外的文件结束。 记录文件被毁坏。 在这些情况下,你必须修复表。myisamchk通常能检测并且修复出错的大部分东西。 修复过程包含最多4个阶段,在下面描述。在你开始前,你应该cd到数据库目录和检查表文件的权限,确保他们可被运行mysqld的Unix用户读取(和你,因为你需要存取你正在检查的文件)。如果它拒绝你修改文件,他们也必须是可被你写入的。 阶段1:检查你的表 运行myisamchk *.MYI或(myisamchk -e *.MYI,如果你有更多的时间)。使用-s(沉默)选项禁止不必要的信息。 你必须只修复那些myisamchk报告有一个错误的表。对这样的表,继续到阶段2。 如果在检查时,你得到奇怪的错误(例如out of memory错误),或如果myisamchk崩溃,到阶段3。 舞台 2 :简单安全的修复 首先,试试myisamchk -r -q tbl_name(-r -q意味着“快速恢复模式”)。这将试图不接触数据文件来修复索引文件。如果数据文件包含它应有的一切和在数据文件指向正确地点的删除连接,这应该管用并且表可被修复。开始修理下一张表。否则,使用下列过程: 在继续前做数据文件的一个备份。 使用myisamchk -r tbl_name(-r意味着“恢复模式”)。这将从数据文件中删除不正确的记录和已被删除的记录并重建索引文件。 如果前面的步骤失败,使用myisamchk --safe-recover tbl_name。安全恢复模式使用一个老的恢复方法,处理常规恢复模式不行的少数情况(但是更慢)。 如果在修复时,你得到奇怪的错误(例如out of memory错误),或如果myisamchk崩溃,到阶段3。 舞台 3 :困难的修理 如果在索引文件的第一个16K块被破坏,或包含不正确的信息,或如果索引文件丢失,你只应该到这个阶段 。在这种情况下,创建一个新的索引文件是必要的。按如下这样做: 把数据文件移更安全的地方。 使用表描述文件创建新的(空)数据和索引文件: shell> mysql db_name mysql> DELETE FROM tbl_name; mysql> quit 将老的数据文件拷贝到新创建的数据文件之中。(不要只是将老文件移回新文件之中;你要保留一个副本以防某些东西出错。) 回到阶段2。现在myisamchk -r -q应该工作了。(这不应该是一个无限循环)。 阶段4:非常困难的修复 只有描述文件也破坏了,你才应该到达这个阶段。这应该从未发生过,因为在表被创建以后,描述文件就不再改变了。 从一个备份恢复描述文件并且回到阶段3。你也可以恢复索引文件并且回到阶段2。对后者,你应该用myisamchk -r启动。 如果你没有一个备份但是确切地知道表是怎样被创建的,在另一个数据库中创建表的一个拷贝。删除新的数据文件,然后从其他数据库将描述和索引文件移到破坏的数据库中。这给了你新的描述和索引文件,但是让数据文件独自留下来了。回到阶段2并且尝试重建索引文件。 13.4.3 表优化 为了组合成碎片的记录并且消除由于删除或更新记录而浪费的空间, 以恢复模式运行myisamchk: shell> myisamchk -r tbl_name 你可以用SQL的OPTIMIZE TABLE语句使用的相同方式来优化一张表,OPTIMIZE TABLE比较容易,但是myisamchk更快。也没有在一个实用程序和服务器之间不必要的交互可能性,因为当你使用OPTIMIZE TABLE时,服务器做所有的工作。 myisamchk也有你可用来改进一个表的性能的很多其他选项: -S, --sort-index -R index_num, --sort-records=index_num -a, --analyze 对于选项完整的描述见13.1.1 myisamchk调用语法。 |