用crontab命令完成SCO UNIX系统中大批量数据的自
cnhnln
|
1#
cnhnln 发表于 2005-04-16 21:15
用crontab命令完成SCO UNIX系统中大批量数据的自
作者：佚名 来源：InterNet 加入时间：2005-2-15
在UNIX系统中，为了使数据备份变得轻松、容易、安全，最好的办法就是自动安 排系统例行工作(系统调度)，在系统空闲时间里自动执行任务。如定期删除一些流 水文件、日志文件,定期完成数据的本地备份和异地备份等。这样既发挥了UNIX系 统的卓越功能，又减轻了系统管理员的工作量，使数据备份做到及时安全。 一、建立数据备份用户 首先建立一个用户，如：userbk，将该用户的属主、属组设定为Informix，权限 为755。在该用户下存放备份的各种数据，以便统一备份到磁带上或异地机器上。 二、用系统例行工作安排作业 UNIX系统有一个始终运行的守护进程，该进程可以在正常调度的间隙运行作业, 用户可以在一个文件中指定crontab命令运行任务,cron守护程序在初始化或该文件 修改后自动读取其内容。crontab文件中指定的各个域为: 分钟 小时 月 日 星期几 命令 如文件/usr/spool/cron/crontabs/root存放超级用户调度的命令,内容为: 17 5 ?? 0 /etc/cleanup>/dev/null 0 2 ?? 0,4 /usr/lib/cron/logchecker 3 3 ???/usr/lib/cleantmp>/dev/null 1 3 ???/etc/setclk－rd1800>/dev/null 2>＆1 ＃5 18 ??1－5/usr/lib/sa/sa2 －s 8:00 －e 18:01－i 1200－A 0 4 ??0 /etc/custom －V symlinks;＃CUSTOM －SYMLINK －REPORT 0 0 ??1－5 scosh cronsched－r 0 0??1 scosh cronsched－wr 第一行的作用是在每周星期日5：17执行/etc/cleanup来清除系统上的某些日志文 件。第二行的作用是每周星期日和星期四2:00执行/usr/lib/cron/logchecker来检 查守护进程cron的日志文件。第三行为每天3：03运行/usr/lib/cheantmp命令清除 指定目录中的临时文件等。 用户可以用命令crontab －u root －e来编辑此文件,在文件最后加入一行内容 : 0 3 ??? kill－user 此行内容为每天3：00运行kill－user,此命令文件的任务是终止某些用户的进程。 同样,用命令crontab－u userbk －e来编辑userbk文件,安排userbk用户的作业 任务,内容如下: 10 3??? bdbf 30 5 ?? 0 ftp －inv<ydbf>ydbf.log 0 2 ? 1 ?rm ?.log 第一行内容为每天3：10运行bdbf程序,使数据备份至/usr/userbk目录下, 并拷贝 到磁带上。第二行内容为每周星期日5：30运行ydbf程序,将备份至/usr/userbk目 录下的数据通过网络传送到异地机器上存贮,并将备份信息写入 ydbf.log日志文件 中。第三行内容为每月1日2:00删除/usr/userbk下的日志文件。 三、本地数据备份 笔者使用的操作平台为SCO Openserver5.04系统，数据库为Informix4.0和 Informix－Online7.3两种版本。在Informix4.0上使用的业务有“人身保险”(用 户名rsbx)、“子女备用金保险”(用户名zbbx)等。数据以字符串形式保存在各自 的目录下,备份时可用tar命令或cpio命令将整个用户目录备份即可。而在 Informix－Online7.3上应用的有“综合处理系统”(用户名c4g1，库名picc2. dbs),“会计记帐系统”(用户名为claf，库名account.dbs)等，数据存放在 Online指定的设备上,平时采用ontape －s命令备份,但由于此命令实现自动备份较 困难,并且不能和其它数据备份到一盘磁带上,会造成备份介质的浪费。所以最好采 用 dbexport命令备份数据。运行dbexport命令的前提是调用数据库的相关用户必 须 退出，一旦有一个应用点没有退出，备份就会失败。为了确保数据的安全备份，需 编制一个终止进程的命令文件，即前述中由超级用户调度的kill－user程序。 程序1：/usr/bin/kill－user ps －u rsbx >tmp－a ps －u zbbx >>tmp－a ps －u c4gl >>tmp－a ps －u claf >>tmp－a cut －cl－6 tmp－a >tmp－b while read a do kill－9 ＄a echo “kill alread＄a”|cat>>/tmp/kill－user.log done <tmp－b rm tmp－a tmp－b 程序前5行为列用户进程,并将所要终止的进程存放至/tmp/K－user2文件中,后面 的循环语句是杀死进程,并将运行信息存放至/tmp/kill－user.log日志文件中,以 备查阅。此程序放在“/”下或“/usr/bin”下。 程序2：/usr/user/bdbf 本地数据备份程序 INFORMIXDIR=/user/informix PATH=＄PATH:＄HOME/bin:.:＄INFORMIXDIR /bin INFORMIXSERVER=cbps－shm ONCONFIG=onconfig.cbps export PATH MAIL INFORMIXDIR INFORMIXSERVER ONCONFIG rm －r ?.Z find /usr/rsbx |cpio－oacvB>RSBX;compress RSBX find /usr/zbbx |cpio－oacvB>ZBBX;compress ZBBX … rm－r?.exp dbexport －c picc2 －ss find ./picc2.exp | cpio－oacvB>PICC2;compress PICC2 dbexport －c account －ss find ./account.exp | cpio－oacvB>ACCOUNT;compress ACCOUNT … sleep 10 tar c8v ?.Z date | cat>>userbk.log echo“PICC2 ACCOUNT RSBX ZBBX...backup over”|cat>>userbk.log 程序中所设置的环境变量同Informix用户的环境变量设置一样,所有需要备份的 数据用归档命令cpio拷贝至/usr/userbk目录下,用户可根据自已的实际情况自行添 加,然后用tar命令统一将所有文件拷贝至磁带上,最后将备份信息写到日志文件 userbk.log中,这样系统管理员只需每天早晨上班后检查一下是否备份好,然后更换 一般磁带即可。 四、异地数据备份 熟悉网络的人都知道FTP的功能十分强大，它主要用于网络之间的文件传输。一 般情况下，用户传输多个文件时，需登录服务器逐一传输，只有等待一个文件传送 完毕之后才能传输下一个，这样用户需花很长时间守候在终端前等待一个文件传输 结束。为了简化工作,在UNIX平台上FTP支持非在线传输,即用户只需把要输入的命 令逐条写进shell脚本,FTP传输文件时调用脚本即可,例:对上述/usr/userbk目录下 的数据文件的异地备份，可用如下脚本来完成。 程序3：/usr/userbk/ydbf open hostgs user mybackup mypasswd mpt ?.Z bye 程序中的hostgs为异地的主机名。该主机名需在本地主机/etc/hosts文件中定义。 mybackup、mypasswd是异地主机中为备份数据而建立的用户名和口令字，当系统例 行程序调用此程序时，可将数据全部备份至异地的hostgs主机中mybackup用户下。 五、数据恢复 本地备份到磁带上的数据可用tar x8v命令将数据文件拷贝到/usr/userbk目录下 。异地备份的数据可用FTP命令传输至该目录下,或者直接用/usr/userbk目录下的 数据,用uncompress?.Z解压。 对于Informix4.0版以字符串形式存放的数据,可直接用cpio命令来恢复。如: rsbx用户数据可用如下命令来恢复： cpio －icduvB < RSBX 对于Informix－Online的数据恢复，需采用如下方法。如对picc2数据库的恢复 可用如下命令来恢复： cpio －icduvB < PICC2 dbimport picc2 －d workdbs 其中，workdbs为Online建立的数据空间，须注意的是恢复数据库时，原数据库 必须删除。 -- [0;37;47m [30m 每当有人赞美我的时候 我总是感到浑身不安 [37m;[30m [37m;[30m 因为我觉得他们赞美的不够 [37m [37m [0m [m[1;37m※ 来源:·荔园晨风BBS站 bbs.szu.edu.cn·[FROM: 192.168.55.192][m |