mds备用的全部无法重启mds unable to obtain rotating service keys; retrying

问题：ceph集群突然mds全都无法启动，查询日志报错mds unable to obtain rotating service keys; retrying。
分析：节点时间不一致，ceph不但要求系统时间一致，还要求bios时间一致。
解决：

• 系统时间ntpdate调一致，然而并没有解决问题，还需要下一步
• 各节点hwclock -w把BIOS时间刷新。ceph竟然也依赖BIOS时间，也真是醉了。
• 再重启mds服务，问题解决。