Have you ever seen the replication stopped with message like this:

Last_Error: Could not parse relay log event entry. The possible reasons are: the master's binary log is corrupted (you can check this by running 'mysqlbinlog' on the binary log), the slave's relay log is corrupted (you can check this by running 'mysqlbinlog' on the relay log), a network problem, or a bug in the master's or slave's MySQL code. If you want to check the master's binary log or slave's relay log, you will be able to know their names by issuing 'SHOW SLAVE STATUS' on this slave.

This is relay relay log corruption and you can check details in the MySQL Error log file. The error message describes few reasons and indeed because there is little validation (ie no checksums) in the replication there are multiple reasons for bad event to show up in relay logs.

Really this is only one of various error messages you could see if relay log corrupted. You could also see malformed queries (with some junk), complaining about event to big etc if there is a garbage in relay logs.

If relay logs are corrupted it is surely worth to check what could cause it - it could be network (especially if replicating over unreliable long distance networks), MySQL bugs on master or slave, hardware problems and few others. In any case it is worth investigating.

Investigating is what you do later but how do you fix the problem first ? The important question you need to have answered - are logs corrupted on the master ? If logs on the master are OK you can just run SHOW SLAVE STATUS on slave experiencing error and use CHANGE MASTER TO to re-point replication to Relay_Master_Log_File:Exec_Master_Log_Pos:

This will purge existing relay logs re-fetch all events which have not been executed yet. Doing this command make sure your master is operational and it still has all the logs needed to re-fetch events.

How would you know if logs are OK on the master ? Well in this case there were probably 5 another slaves which did not have the problem - which means Master is most likely OK. In any case it is little harm to try restarting from the same position - if logs are bad on the master you would get the same error message again and can continue with investigation.

What if logs on the master are corrupted ? In this case you have couple of choices (and you also potentially have multiple slaves to deal with). You can use mysqlbinlog (or you favorite hex editor if mysqlbinlog does not work) to find the next event start and potentially recover "corrupted" event to be manually executed on the slaves.

Skipping around event makes master and slave potentially inconsistent and you should access the risks depending on applications (and on amount of events which were corrupted) you may want to let replication continue from the new position or resync the slaves to the master.

How can you recover the slave ? As all slaves are likely to be affected in this case you can't clone another slave. You also can't use classical method of recovery from backup - because you would need relay logs to roll forward, and they are corrupted. You can either re-clone the data from Master. (This is where LVM or similar techniques can help you a lot) or skip bad events as described and when use Maatkit mk-table-checksum to check what tables are out of sync and when use mk-table-sync to resync them.

Last method works in particularly well in case you can afford to run for a while with slaves which are a bit out of sync, which is quite often better than having just master available (also having extra load of data copied from it).

Entry posted by peter | No comment

Add to: | | | |

dbanotes posted a photo:

2008年8-9月号合刊目录
　　
　　1/“托管”
　　——私产公用背后的玄机 /钱满素
　　
　　9/敬畏思想家（启蒙札记） /陈乐民
　　
　　11/永远的明代瓷器 /晨 枫
　　
　　17/“教我临镜如溷厕” /张增泰
　　
　　19/“老年弟兄不得团聚为恨为恨也”
　　 ——三读张大千致张丽诚信札 /包立民
　　
　　34/群芳集艳（上）（齐如山戏本） /齐如山/撰 王晓梵/整理
　　
　　47/读《桃源行》 /林 彝
　　
　　53/纸灰飞作白蝴蝶（扪虱谈鬼录） /栾保群
　　
　　69/联苑忆丛 /王充闾
　　
　　81/黑海小记 /赋 格
　　
　　91/土耳其：影像与文明的跋涉 /朱靖江
　　
　　100/夜,在苏丹麦特 /杜欣欣
　　
　　110/土耳其咖啡 /龚鹏程
　　
　　120/酷死酷死 /郑培凯
　　
　　126/闲话墨盒 /戈 革
　　
　　133/斋说墨 /周绍良
　　
　　140/君子之器
　　——赵南星、厉鹗、《铁如意歌》 /诸文进
　　
　　151/两岸史学与史家：罗志田访谈(中) /罗志田 王震邦
　　
　　161/红楼人解读：卤人 /刘再复
　　
　　168/大洋彼岸的旧时月色
　　——张爱玲与《我们的小镇》 /李君维
　　
　　174/方鸿渐给唐晓芙的信与《大话西游》中的经典台词 /谢 泳
　　
　　176/四个“洛丽塔” /余凤高
　　
　　186/两年的苦斗 /王云五
　　
　　205/从作家到台大文学院院长的钱歌川 /蔡登山
　　
　　214/天堂之门已经打开 /尉任之
　　
　　226/蛮人借妻（言言斋佚文·六） /周越然
　　
　　233/“顶你个肺”何解？
　　 ——兼谈章太炎鲁迅对“州戏”的误读 /章立凡
　　
　　236/“救美” /叶志江
　　
　　260/凌霄花下 /赵 珩
　　
　　264/温都尔汗（提前怀旧） /余 斌
　　
　　274/鲤鱼洲 /汤 双
　　
　　282/橡皮 /蔡天新
　　
　　289/招募演员
　　 ——因太阳剧团而激发灵感的生活片段 /胡晴舫
　　
　　296/加拿大省际公路（旅人生涯） /新井一二三
　　
　　309/野猫，奶队和大雪灾（三江源随笔·二） /郭 净
　　

dbanotes posted a photo:

2008年8-9月号合刊目录
　　
　　1/“托管”
　　——私产公用背后的玄机 /钱满素
　　
　　9/敬畏思想家（启蒙札记） /陈乐民
　　
　　11/永远的明代瓷器 /晨 枫
　　
　　17/“教我临镜如溷厕” /张增泰
　　
　　19/“老年弟兄不得团聚为恨为恨也”
　　 ——三读张大千致张丽诚信札 /包立民
　　
　　34/群芳集艳（上）（齐如山戏本） /齐如山/撰 王晓梵/整理
　　
　　47/读《桃源行》 /林 彝
　　
　　53/纸灰飞作白蝴蝶（扪虱谈鬼录） /栾保群
　　
　　69/联苑忆丛 /王充闾
　　
　　81/黑海小记 /赋 格
　　
　　91/土耳其：影像与文明的跋涉 /朱靖江
　　
　　100/夜,在苏丹麦特 /杜欣欣
　　
　　110/土耳其咖啡 /龚鹏程
　　
　　120/酷死酷死 /郑培凯
　　
　　126/闲话墨盒 /戈 革
　　
　　133/斋说墨 /周绍良
　　
　　140/君子之器
　　——赵南星、厉鹗、《铁如意歌》 /诸文进
　　
　　151/两岸史学与史家：罗志田访谈(中) /罗志田 王震邦
　　
　　161/红楼人解读：卤人 /刘再复
　　
　　168/大洋彼岸的旧时月色
　　——张爱玲与《我们的小镇》 /李君维
　　
　　174/方鸿渐给唐晓芙的信与《大话西游》中的经典台词 /谢 泳
　　
　　176/四个“洛丽塔” /余凤高
　　
　　186/两年的苦斗 /王云五
　　
　　205/从作家到台大文学院院长的钱歌川 /蔡登山
　　
　　214/天堂之门已经打开 /尉任之
　　
　　226/蛮人借妻（言言斋佚文·六） /周越然
　　
　　233/“顶你个肺”何解？
　　 ——兼谈章太炎鲁迅对“州戏”的误读 /章立凡
　　
　　236/“救美” /叶志江
　　
　　260/凌霄花下 /赵 珩
　　
　　264/温都尔汗（提前怀旧） /余 斌
　　
　　274/鲤鱼洲 /汤 双
　　
　　282/橡皮 /蔡天新
　　
　　289/招募演员
　　 ——因太阳剧团而激发灵感的生活片段 /胡晴舫
　　
　　296/加拿大省际公路（旅人生涯） /新井一二三
　　
　　309/野猫，奶队和大雪灾（三江源随笔·二） /郭 净
　　

作者:d.c.b.a, 订阅AnySQL, Oracle数据库恢复及服务, Sybase恢复, 磁盘及RAID恢复

    不考虑技术成熟度, 及100%的数据准确性, 逻辑备份数据库是灾备的最佳方案, 只不过目前这方面技术在稳定性和性能上还有未解决的问题. 许多公司在做这样的产品, DSG也是其中之一. 今天听了DSG的产品介绍后, 猜想了他们产品的技术基础.

    阿里巴巴集团内部完全具备了研究这些的技术基础, 需要考虑的是做这些产品的前景, 需要的时间及资源.

相关文章 | Related Artiles

我要留言(当前3)

Shared by Fenng
五常本人就是狡兔三窟的现代版啊，美国抓不到他

美国时间7月14～18日的五天里，我有幸参加了科斯发起的“中国经济改革”的学术研讨会。这次会议有很多让我感到震撼的人和事，但其中之最要数科斯对中国这么一个他从未谋面的遥远的东方国度所表达出来的深沉、热烈的情怀。无论是在公开的文章、演讲，还是私下的聊天、闲谈，张五常教授以前都曾多次提到，美国经济学家大多对中国非常友善，但没有谁比科斯对中国如此关心。经过这长达五日的会议，我总算是切身地体会到这一点。

7月13日傍晚时分，我与友人飞抵芝加哥，就在入住的酒店附属的牛排屋吃晚饭。本来是因为经过长达14小时的飞行而太累太饿，无法到外面另觅吃饭的场所，却因此而遇上意外之喜——科斯竟然就在我们旁边的桌子上与张五常教授的儿子等人一起吃饭。

科斯的助手王宁先发现我们，过来跟我们打招呼。友人问我是否应该借此机会与科斯交谈并合照。开始时我有点犹豫，因为经过长途飞行，风尘仆仆的，这个样子上前，似乎有点唐突。但转念想到，明天开会的时候肯定会有很多人都想跟科斯在一起，那时机会就没现在这样好了。于是我就请原在香港理工大学、现在芝加哥大学访学并照顾科斯的蔡鸿达代为传达求见之意。不久，蔡鸿达走到我面前说，科斯愿意与我们交谈，还说他记得我写的文章，对我有印象。

我走上前去，与科斯说了几句表示仰慕的话后，就跟他谈起这次会议与张五常教授的事情。科斯说：“当年张五常撰写《中国会走向资本主义的道路吗？》的小书，最后作出肯定的回答，我是同意他的预言的。”听到这里，我忍不住插口说：“是的，但其他所有人都并不同意——只有您是例外的。”科斯微笑着接口道：“但我当时想的是，这预言实现将是在100年之后！”我不由得大笑起来。从这脱口而出的幽默可见，这98岁高龄的老人仍是保持着他的睿智与机敏。次日科斯在会议开始时致的开幕辞中也说到了这一句妙语。

科斯继续说：“无论从规模还是速度上来说，中国的经济发展都是个奇迹，我对此有很多不明白的地方，这也就是为什么我想召开这个会议。”我回答说：“中国经济在今天取得的成就，全赖对您的理论的应用。您曾在诺贝尔奖的获奖演讲中说，在80岁的时候因20岁时的工作而获奖是一件神奇的事情。我想，现在有一件更为神奇的事，那就是您能活着见到自己的理论应用于现实——那就是中国改革——，并得到证实。”科斯微笑。

本想跟科斯再多聊，而他也显得兴致正高，但蔡鸿达担心科斯的身体，催着我们不要再多谈话，拍了照就送科斯离开。

第二天星期一是会议正式开始的第一天。此次会议竟是齐集了四位诺贝尔经济学奖得主：科斯自己，做评论人的Fogel（福格尔，1993年诺贝尔经济学奖得主）、Mundell（蒙代尔，1999年的诺贝尔经济学奖得主），主持Panel的诺斯（North，也是1993年诺贝尔经济学奖得主）。若非Mundell没能赶上星期一的开幕、在星期二才到达，Fogel又只参加了星期一的会议，本来有可能出现同一时间在会场内有四位诺贝尔经济学奖得主的盛况。能目睹如此罕见的大师云集的场面，全赖科斯在学术界的江湖地位所具有的号召力，才得以实现的。

科斯率先致开幕词，开始的内容大致上跟昨晚交谈时说到的差不多。然后科斯谈到对这次会议的期待，希望能多听到争论，而不是一致的同意，因为没有争论的问题就会变成“死问题”。后来在私下聊天时，朱锡庆教授说到科斯的开幕词对他触动最深的就是这一句，因为它展现了科斯是如何的一位真正孜孜以求事实真相与知识学问的学者。

科斯的开幕词之后就是张五常教授为大会特别录制的DVD，内容是他朗读提交给大会的《中国的经济制度》的全文，之前有100秒的片头，朗读期间也不断地插播着与内容相关的图片与视频片段。来芝加哥之前，张教授就不断地提起那100秒的片头，说科斯很喜欢它的震撼性，对具体内容自然是大卖关子不肯说。此时我当然是睁大了眼睛看，竖起了耳朵听。只见一开始的时候是一幅幅黑白图片，展现着旧中国时期的人们劳苦工作的情景，没有配任何音乐，只是一片的静默。突然之间，激昂的音乐喷薄飞扬，字幕显示是年仅10岁的钢琴神童牛牛负责的演奏。图片也随之切换成彩图，展现着的是现代中国绚丽夺目的景象：摩天大楼拔地而起，玻璃外墙在阳光下闪闪生辉，高速公路蜿蜒四射，集装箱码头繁忙而有序……。强烈的对比，强烈的反差，让在场众人屏息凝气，在短短的100秒里感受到30年来中国改革为这片土地上的人们所带来的是何等翻天覆地的改进。

接着是张五常教授朗读《中国的经济制度》的全文。虽然他已经读得非常快，但还是花了两个多小时，以致中途不得不插入一个Coffee Break让大家休息一下，以便舒缓舒缓一直绷得紧紧的神经，因为所有人都那么聚精会神地盯着屏幕看，眼睛也难得眨上一下。DVD制作得非常好，虽然此前张教授跟我抱怨过，说录制DVD时把麦克风放在桌下，拾音效果不理想，使得DVD里他的声音不够响亮清晰。但播放时我完全不觉得声音太小或听不清楚，显然播放时把声音调大了之后，除了有一点点电流噪音的小瑕疵之外，拾音的问题其实不算问题。插播其间的图片，有些是我帮忙在网上找来的，包括一些城镇或建筑物的面貌（如乐从的家俱城、义乌的小商品城、绍兴的市容、杭州湾大桥的壮丽外观等）、人物及其著作的图片（如孙冶方的画像及其著作、马歇尔的头像及其著作、赫舒拉发的《The dark side of the force》等）。

DVD播放完后，先是由Fogel进行评论。 Fogel的评论主要是表述他自己对于中国经济奇迹的解释，大致上是传统的经济增长理论的见解，如FDI的作用、人力资本的提升、国内外政治环境的和平稳定等等。接着是Demsetz（德姆塞茨）进行评论。在后来几天的会议里，我逐渐认识到他在学术辩论上是个“好战分子”，果然这时他一开口就连珠炮地提出各种异议，于是引发其他人的回应纷纭沓至，他又再一一反击。一时之间会场之内人声鼎沸，你来我往，唇枪舌战，短兵相接，好不热闹。

后来第二天张五常教授打通我的电话的时候，说科斯那天一大早的七点半就起来，在会场里撑了整整一天，晚上十一点半才回到住处，仍然兴奋地跟他通电话，告诉他这会议有多成功，大家的争论有多激烈。联系起科斯在开幕词中的说法，我理解这位穷其一生都在追求真知的老人的兴奋与快乐的源头：中国问题是活生生的问题，不是死问题。

此后的四天里，科斯以98岁的高龄，竟然天天坚持着坐在会场听讲，除了第二天上午，大概是第一天的兴奋与激动实在太消耗这老人的体力了，他不得不休息上半天。当天我有份做文章的presentation，根据会议的安排，科斯每天都会与当天有份演讲的人共进午餐。那天中午我们等在餐室的外面好一会儿，都没见到科斯，本以为经过昨天的劳累，他不会再来了，虽感遗憾，还是只好径自进去用餐。谁知吃到中途，却见科斯坐在轮椅上，缓缓而进。一时之间，我们既是感动，又是激动，赶紧调整座位，靠近科斯而坐。一位中文也能讲得很溜的美国教授向科斯表示，他在大学里主讲中国经济，常对学生们说，要理解中国改革，只需熟读几位诺奖得主的作品，其中最至关重要的，就是科斯的文章。然后他问起科斯是怎么写出《社会成本问题》一文的，科斯缓慢而优雅地追述着往事，我从旁细听，发觉内容大致与张五常教授多次写过的科斯与芝大诸君子如何在Director（戴维德，弗里德曼的郎舅，时任《法律经济学期刊》的主编）家里辩论并获胜的故事是一样的。其后又谈及他与诺斯的比较。科斯说，他的一生都是意料之外的，他从来没有期望过得到这一切，这一切却不期而至。相比之下，诺斯却是另一个极端，他对自己的一生预期得一丝不差，完全就是按着他的计划来展开人生的。这确实是很有趣的对比：完全掌控着自己的人生路向，还是一路上惊喜或意外不断的人生，哪一种更值得向往呢？

接下来的三天，科斯都大概在上午10点左右就到达会场，但他绝大部分时间里只是默默地倾听发言，观看争辩，只有偶尔才在请求下说上几句。有一次，会场里争论起中国的未来将是发展成什么的样子，朱锡庆教授发言说，他不知道中国未来是怎样，他只能谈一下自己的希望。他希望中国能有独立的大学，有独立的传媒，有三权分立，但他不希望像美国那样一人一票选举总统。哪怕是用抽签的方法，也好过一人一票选总统。一直表现为“民主斗士”形象的Demsetz马上出言反驳，为美国的总统选举制度辩护，最后请求科斯为此争论发表一下意见。这时科斯才说，他在这个问题上是中立的，但他认为像美国现在那样，为了选出一个总统而提前两年就开始选战，这肯定不是正常的。

到了最后一天星期五，下午的会程结束后，大家有30分钟的Coffee Break休息，众人随意地走动、交谈、吃些小点心。科斯却仍然端坐在会场之内，慢慢地在纸上写着什么，大概是在准备接下来的闭幕词。这老人的认真执着，实在令人动容。不久，致闭幕词的时间到了，但科斯不肯坐到主席的位置去，仍是坐在会场左侧的第一排上，以他一贯的缓慢节奏开始了闭幕词。

如果说开幕词里科斯表达的是对这次会议的期待，那闭幕词里陈述的正是他对中国这从未谋面的国度的奇异“爱情”：年轻的时候只因看到马可·波罗的游记，从此就对中国梦萦魂牵。中国在近代突然衰落，在近三十年又再突然崛起，这戏剧性的起起落落都让他迷惑不解却又更加深了他对中国的兴趣。在他看来，中国对世界的意义重大。为中国而奋斗，就是为世界而奋斗。（原句是“The struggle for China is the struggle for the world”，尽管其实已经在科斯为张五常教授的英语论文集写的序言中看到过这一句，但亲耳听到科斯一字一顿、语重心长地说出这一句，我仍是忍不住热血升腾。）在他出生的1910年，一切都显得那么美好，可是突然之间，愚蠢的战争相继爆发，无数生灵涂炭。这让他认识到美好的东西是那么容易破碎。希望中国也能珍惜眼前来之不易的美好，不要重蹈欧洲人当年的覆辙。学者们应该多些聆听从事实际工作的人们的话。末了，这98岁高龄的老人以一句：“我将长眠，祝福中国！”结束了闭幕词，结束了他对中国这一份奇异“爱情”的漫长历程的简短总结。会场全体人员不约而同地都站了起来，掌声如潮数分钟，向科斯致敬，向这份“爱情”致敬。摄像机的镜头前，科斯的眼睛里泪光莹然……。

当我事后一次又一次地向不同的人追述这一幕的时候，总能再次回到那一刻，总是一再地热泪盈眶。哪怕是在最浪漫的爱情故事里，一个人对另一个从未谋面的人也难以有如此炽热无尽的爱，更何况是对一个抽象的国家？就是中国人对自己的国家，又有多少人能这样拼尽风烛残年来爱中国？后来聊天的时候，朱锡庆教授谈到，如果科斯能来中国，哪怕只是亲自看一眼他深爱了这一辈子的这个国家，中国应该给予他最高规格的礼遇，也不过只是回报了这老人这份痴情的万分之一而已。

或者，对科斯这奇异“爱情”的最好回报，就是中国的经济奇迹一定要延续下去，要不愧于这年近百旬的老人为她奉献了差不多一个世纪的情怀！