Linux集群系统时间同步

环境准备：

要做到服务器集群的时间同步，集群中各台机器的时区必须相同的，我们在国内就使用中国时区，如果你的机器的时区不是"Asia/Shanghai"，需要修改时区

CentOS 中时区是以文件形式存在，当前正在使用的时区文件位于

/etc/localtime ，其他时区文件则位于 /usr/share/zoneinfo 下，中国时区的文件全路径是 /usr/share/zoneinfo/Asia/Shanghai

要更改时区，直接使用如下命令就OK

需要使用 tzselect 命令去生成时区文件，生成好的时区文件就在/usr/share/zoneinfo 目录下，具体步骤去下：

使用 date -s 命令来修改系统时间

让集群所有的服务器的时间同步，就用远程连接工具连接所有服务器，然后在所有的服务器中同时执行 date -s 命令设置时间，然后在所有的服务器中执行 hwclock -w 命令即可

美国标准技术院时间服务器：timenistgov（1924324418）

上海交通大学网络中心NTP服务器地址：ntpsjtueducn（2021202101）

中国国家授时中心服务器地址：cnpoolntporg（2107214544）

若以上提供的网络时间服务器不可用，请自行上网寻找可用的网络时间服务器

<1> 使用命令： crontab -e

<2> 然后往里加入一行内容

上面的配置表示，每隔十分钟从 2021202101 该时间服务器同步一次时间。

<3> 保存退出

以上两步操作可以让node01这个服务器每隔10分钟去指定的服务器同步时间，如果需要让集群中的所有服务器(hadoop01-hadoop04)时间同步，那么每台服务器都要做以上两步操作。

node01的IP为19216821101，让它作为时间服务器，192168210局域网内的所有服务器都向它同步时间，而node01这台时间服务器本身，向外网时间服务器同步时间(比如中国国家授时中心服务器)

我用node01

我去掉了所有的默认注释，对其中的修改写了自己的注释，没有写注释的是默认配置

因为ntpd服务开启之后，就不能手动同步时间了，那么为什么要先手动同步时间呢？

当server(中国国家授时中心服务器)与client(node01)之间的时间误差过大时（可能是1000秒），node01去同步时间可能对系统和应用带来不可预知的问题，node01将停止时间同步！所以如果发现node01启动之后时间并不进行同步时，应该考虑到可能是时间差过大引起的，此时需要先手动进行时间同步！

看到红色框中的内容，表示连接和监听已正确

这里的前4行就是我们配置的4个中国国家授时中心的服务器的信息

最后一行就是本地时间服务的信息

下面对每个列的意义进行说明：

同样，服务启动后需要等待5-10分钟才能看到这个正常的信息

到这里，我们局域网内的时间服务器node01就已经配置完毕了

文件内容如下：

同样，没有写注释的都是默认的配置

原因同(5)

到这里，利用局域网内一台时间服务器来同步整个集群时间的全部配置就已经完成

说明：若以上提供的网络时间服务器不可用，请自行上网寻找可用的网络时间服务器，另外需要关闭各服务器的防火墙，才能进行时间同步

参考文章：

内网环境NTP服务及时间同步(CentOS6x)配置和部署

配置NTP服务ntpd/ntpconf（搭建Hadoop集群可参考）

首先来了解下面几个知识点：

1 date命令：

#date

显示系统时间

2hwclock命令 (即hardwareclock系统硬件时间)

#hwclock

显示硬件时间

#hwclock -w

将系统时间写入到系统硬件当中

3ntpdate

ntpdate 是一个linux时间同步服务软件，具体的详细资料请参考下百度，有很多详细的资料

第二、查看本机是否安装ntpdate服务，如果没有安装，请 yum install -y ntpdate

第三、同步时间

1 输入ntpdate timenistgov同步网络时间

结果：3 Jun 15:42:39 ntpdate[4721]: adjust time server 21111519421 offset -0005885 sec

出现上述结果代表时间同步成功，上面的大致意思为调整时间为服务器21111519421的时间，相差-0005885秒的时间

如果上面timenistgov服务器同步不了，可以换下面几个时间服务器试试：

timenistgov

timenurinet

0asiapoolntporg

1asiapoolntporg

2asiapoolntporg

3asiapoolntporg

2同步时间成功后调整硬件时间

#hwclock -w

执行成功后， 查看系统硬件时间（不出意外的话，现在date和hwclock现实的时间均为internet时间）

#date

#hwclock

执行上述命令，显示的时间应该一样的

四、定时执行时间同步任务，所以我们利用crontab -e 来添加定时任务

# 1/ root ntpdatetimenurinet;hwclock -w

即：每隔一个小时同步一下internet时间。

一：NTP是网络时间同步协议，就是用来同步网络中各个计算机的时间的协议。

二：NTP服务端配置

21、检查系统是否安装了NTP包（linux系统一般自带NTP42），没有安装我们直接使用yum命令在线安装： yum install ntp

22、NTP服务端配置文件编辑： vim /etc/ntpconf

结果:

# @3新增-权限配置restrict 12712710restrict 192168310 mask 2552552550 nomodify notrap# @3改动-注释掉上级时间服务器地址#server 0centospoolntporg iburst#server 1centospoolntporg iburst#server  2centospoolntporg iburst#server 3centospoolntporg iburst# @4新增-上级时间服务器server 12712710 # local clockfudge 12712710 stratum 10

23、启动NTP时间服务器：service ntpd start

24、设置NTP开机自动启动：chkconfig ntpd on

25、查看NTP是否正常运行：netstat -tlunp | grep ntp

26、配置防火墙过滤规则：/sbin/iptables -I INPUT -p udp --dport 123 -j ACCEPT

如何配置：/etc/sysconfig/iptables 文件内配置开放udp 123端口： -A INPUT -p udp --destination-port 123 -j ACCEPT

A服务端配置文件解释

①：设定NTP主机来源（其中prefer表示优先主机），19216831134是本地的NTP服务器，所以优先指定从该主机同步时间。

server 192168749 prefer

server 0rhelpoolntporg

server 1rhelpoolntporg

server 2rhelpoolntporg

server 3rhelpoolntporg

②：限制你允许的这些服务器的访问类型,在这个例子中的服务器是不容许修改运行时配置或查询您的Linux NTP服务器

restrict 19216800 mask 2552552550 notrust nomodify notrap

在上例中，掩码地址扩展为255，因此从19216801-1921680254的服务器都可以使用我们的NTP服务器来同步时间

#此时表示限制向从19216801-1921680254这些IP段的服务器提供NTP服务。

restrict 19216800 mask 2552552550 notrust nomodify notrap noquery

#设置默认策略为允许任何主机进行时间同步

restrict default ignore

三：NTP客户端配置

31、检查安装NTP服务有没有安装，未安装请自行安装

32、NTP客户端配置文件编辑： vim /etc/ntpconf

# @1新增-权限配置restrict 192168310 mask 2552552550 nomodify notrap# Use public servers from the poolntporg project# Please consider joining the pool (http://wwwpoolntporg/joinhtml)# 注释掉原来的实际服务器地址#server 0centospoolntporg iburst#server 1centospoolntporg iburst#server 2centospoolntporg iburst#server 3centospoolntporg iburst# @2新增-自己的时间服务器地址server 19216831223 prefer <==以这部主机为最优先#broadcast 1921681255 autokey # broadcast server#broadcastclient # broadcast client#broadcast 224011 autokey # multicast server#multicastclient 224011 # multicast client#manycastserver 239255254254 # manycast server#manycastclient 239255254254 autokey # manycast client

33、手动同步一次时间：/usr/sbin/ntpdate19216831134 （服务端主机IP，这里需要先关闭NTP服务哦）

34、启动NTP服务：service ntpd start

35、观察时间同步状况：ntpq -p

结果：

[root@localhost hct]# ntpq -p remote refid st t when poll reach delay offset jitter==============================================================================19216831134 LOCAL(0) 11 u 64 128 377 0202 73980 412834

⑥查看时间同步结果：ntpstat

[root@hct ~]# ntpstat

unsynchronised

polling server every 8 s

同步失败,同步也需要时间，需等待5-10分钟再次查询：

Every 20s: ntpstat Tue Jul 11 16:55:57 2017synchronised to NTP server (101011247) at stratum 12 time correct to within 605 ms polling server every 128 s

时间同步完成，date一下看是不是和服务器主机时间一致

B客户端配置文件详解

修改/etc/ntp/stpe-tickers文件，内容如下（当ntpd服务启动时，会自动与该文件中记录的上层NTP服务进行时间校对

C系统时间与硬件时间同步

如果主从服务时间超过1000秒则不再进行同步了，这时候要手动同步，即：/usr/sbin/ntpdate命令，如果怕服务器时差会经常变动比较大可以再Linux中添加计划任务，例如：

10 5 root /usr/sbin/ntpdate 19216831223 && /sbin/hwclock -w

ntp服务，默认只会同步系统时间。如果想要让ntp同时同步硬件时间，可以设置/etc/sysconfig/ntpd文件，在/etc/sysconfig/ntpd文件中，添加 SYNC_HWCLOCK=yes 这样，就可以让硬件时间与系统时间一起同步。

拓展内容

ntpq -p各个选项相关信息

restrict 控制相关权限。

语法为： restrict IP地址 mask 子网掩码 参数

其中IP地址也可以是default ，default 就是指所有的IP

参数有以下几个：

ignore  ：关闭所有的 NTP 联机服务

nomodify：客户端不能更改服务端的时间参数，但是客户端可以通过服务端进行网络校时。

notrust ：客户端除非通过认证，否则该客户端来源将被视为不信任子网

noquery ：不提供客户端的时间查询：用户端不能使用ntpq，ntpc等命令来查询ntp服务器

notrap ：不提供trap远端登陆：拒绝为匹配的主机提供模式 6 控制消息陷阱服务。陷阱服务是 ntpdq 控制消息协议的子系统，用于远程事件日志记录程序。

nopeer ：用于阻止主机尝试与服务器对等，并允许欺诈性服务器控制时钟

kod ： 访问违规时发送 KoD 包。

restrict -6 表示IPV6地址的权限设置。

root@www ~]# vim /etc/ntpconf# 1 先处理权限方面的问题，包括放行上层伺服器以及开放区网用户来源：restrict default kod nomodify notrap nopeer noquery <==拒绝 IPv4 的用户restrict -6 default kod nomodify notrap nopeer noquery <==拒绝 IPv6 的用户restrict 22013015871 <==放行 tockstdtimegovtw 进入本 NTP 伺服器restrict 5912419683 <==放行 tickstdtimegovtw 进入本 NTP 伺服器restrict 5912419684 <==放行 timestdtimegovtw 进入本 NTP 伺服器restrict 127001 <==底下两个是预设值，放行本机来源restrict -6 ::1restrict 1921681000 mask 2552552550 nomodify <==放行区网来源# 2 设定主机来源，请先将原本的 [0|1|2]centospoolntporg 的设定注解掉：server 22013015871 prefer <==以这部主机为最优先server 5912419683server 5912419684# 3预设时间差异分析档案与暂不用到的 keys 等，不需要更动它：driftfile /var/lib/ntp/driftkeys /etc/ntp/keys

ntpd、ntpdate的区别

下面是网上关于ntpd与ntpdate区别的相关资料。如下所示所示：

使用之前得弄清楚一个问题，ntpd与ntpdate在更新时间时有什么区别。ntpd不仅仅是时间同步服务器，它还可以做客户端与标准时间服务器进行同步时间，而且是平滑同步，并非ntpdate立即同步，在生产环境中慎用ntpdate，也正如此两者不可同时运行。

时钟的跃变，对于某些程序会导致很严重的问题。许多应用程序依赖连续的时钟——毕竟，这是一项常见的假定，即，取得的时间是线性的，一些操作，例如数据库事务，通常会地依赖这样的事实：时间不会往回跳跃。不幸的是，ntpdate调整时间的方式就是我们所说的”跃变“：在获得一个时间之后，ntpdate使用settimeofday(2)设置系统时间，这有几个非常明显的问题：

第一，这样做不安全。ntpdate的设置依赖于ntp服务器的安全性，攻击者可以利用一些软件设计上的缺陷，拿下ntp服务器并令与其同步的服务器执行某些消耗性的任务。由于ntpdate采用的方式是跳变，跟随它的服务器无法知道是否发生了异常（时间不一样的时候，唯一的办法是以服务器为准）。

第二，这样做不精确。一旦ntp服务器宕机，跟随它的服务器也就会无法同步时间。与此不同，ntpd不仅能够校准计算机的时间，而且能够校准计算机的时钟。

第三，这样做不够优雅。由于是跳变，而不是使时间变快或变慢，依赖时序的程序会出错（例如，如果ntpdate发现你的时间快了，则可能会经历两个相同的时刻，对某些应用而言，这是致命的）。因而，唯一一个可以令时间发生跳变的点，是计算机刚刚启动，但还没有启动很多服务的那个时候。其余的时候，理想的做法是使用ntpd来校准时钟，而不是调整计算机时钟上的时间。

NTPD 在和时间服务器的同步过程中，会把 BIOS 计时器的振荡频率偏差——或者说 Local Clock 的自然漂移(drift)——记录下来。这样即使网络有问题，本机仍然能维持一个相当精确的走时。

方法/步骤

打开Ubuntu虚拟机，在桌面空白处右键 -- 打开终端。

在终端输入命令，启动ntp时间同步服务。

sudo ntp start

如果ntp服务已经开启可以省略。

在设置修改Ubuntu虚拟机时间。将时间向上调一小时。

查看系统时间，使用命令：

date

查看硬件时间，使用命令：

sudo hwclock -r 

可以发现系统时间和硬件时间同时被提前了1小时。

等待一会，会发现系统时间由于ntp服务同步服务器时间变准确了。

date

使用命令查看硬件时间还是提前了一小时

sudo hwclock -r

这时可以使用命令

sudo hwclock --systohc

更方便的方法是在每天定时把系统时间同步到硬件时间，可以使用crontab -e配置一个定时任务。

例如

0 8 /sbin/hwclock -w

这段含义是在每天八点自动把系统时间同步到硬件时间。

1选择其中一台作为同步的

2修改文件：vi /etc/ntpconf

## Outside source of synchronized time

##

server IP地址 # IP address of server（在IP地址那填写要同步的linuxIP）

3修改完之后按：：wq! 保存

4执行如下命令： rcapparmor restart

service ntp restart

5用date命令查看是否时间同步了

Linux自带了ntp服务 -- /etc/initd/ntpd，这个服务不仅可以设置让本机和某台/某些机器做时间同步，他本身还可以扮演一个time server的角色，让其他机器和他同步时间。

配置文件就是/etc/ntpconf。

为了测试，设置让node2 -- 1921681102和node1 -- 1921681101做时间同步。

第一步，node1做time server，node1本身不和其他机器时间同步，就是取本地时间。

所以，先把node1机器的时间调准了：

[root@node1 ~]date -s 08/03/2011

[root@node1 ~]date -s 11:12:00

[root@node1 ~]clock -w

[root@node1 ~]hwclock --systohc

后两个命令是把设置的时间写到硬件时间中去（也就是CMOS里面的时间）。

第二步，然后将node1配置成一个time server，修改/etc/ntpconf，

[root@node1 ~]vi /etc/ntpconf

其他的配置不怎么需要改，只需要关注restrict的配置：

1 注释掉原来的restrict default ignore这一行，这一行本身是不响应任何的ntp更新请求，其实也就是禁用了本机的ntp server的功能，所以需要注释掉。

2 加入：restrict 19216810 mask 2552552550 -- 让19216810/24网段上的机器能和本机做时间同步

3 这样就可以了，记得下面的：

server 12712710 # local clock

fudge 12712710 stratum 10

这两行需要，这是让本机的ntpd和本地硬件时间同步。

当然，我们也可以添加server xxxxxxxxxxxx，让他和其他的time server时间同步。

4 /etc/initd/ntpd restart

5 chkconfig ntpd on

6 修改iptables配置，将tcp和udp 123端口开放，这是ntp需要的端口，在/etc/services中可以查到这个端口。

第三步，这样node1就成为一台time server了，现在我们配置node2这台机器，也是修改/etc/ntpconf ，

[root@node2 ~]vi /etc/ntpconf

1 restrict default ignore这行保留为注释状态，因为sales不需要做time server

2 注释掉server 12712710, fudge 12712710 stratum 10这两行，因为这台机器不需要和本地硬件时钟同步了。

3 加入server 1921681101这行，和node1机器同步。

这样就OK了。看看时间，已经和node1同步了。往后默认配置好像是5分钟和time server同步一次。ntpdate命令是显式的和某台机器做时间同步，以前将ntpdate放到crontab中定期同步也是可以的，但是既然ntpd本身就可以做这个时间

第四步，将ntpdate放到crontab中定期步也是可以的

[root@node2 ~]#vi ntpupdatesh

/usr/sbin/ntpdate 1921681101

[root@node2 ~]#chmod 755 ntpupdatesh

[root@node2 ~]#crontab -e

/1 /root/ntpupdatesh

[root@node2 ~]#/etc/initd/crond restart