如何将数据库备份到阿里云的OSS上
第一步:将我们数据库备份到某目录下,注明时间:
运行备份脚本(注意在备份目录下,我的在/home/dbback/下)
查看目录是否生成备份文件,心细的同学可能发现我这个mysqldump没有指定用户名和密码,为啥我运行的时候费用输入密码呢?莫着急,马上为你揭晓答案,因为mysql56后(具体版本编号不记得了),如果你把密码写到脚本里,运行会有警告,告诉你不要把密码写到脚本里,会有危险,那我的小伙伴该怎么办呢,官方给了解决方案,期望你是配置到mycnf文件中,所以,现在打开你的mycnf,加入如下字段:
有了以上这两条,运行脚本时就不会在提示要输入密码了,马上测试下,看是否成功,如果没问题,我们进入下一步。
第二步:如何自动备份到oss中,开始前我们要做两件事,
1、登录阿里云控制台,点右上“管理控制台”,然后点左上“产品与服务”,在第二列中点击“对象存储OSS”,如果没开通就要开通,如果开通了直接点击右上的“新建bucket”,来创建一个bucket,记住buket的名字。(注:其实通过api也是可以直接创建bucket的,因为这个操作不多,所以我就用控制台来创建了,降低理解的难度。)
2、开始写上传脚本,因为要导入oss的sdk,所以要下安装下,比较简单,跟安装其他python包没啥区别,解压进入目录,然后运行python setuppy install 就安装完毕了,接下来看我们如何使用它,全部代码如下:
#!/usr/bin/python env
#autor:glacier
#date:2015-11-16
import os,ospath,time
import operator
import time
from ossoss_api import
prefix = '/home/dbback'
logtime = timestrftime(timectime())
#filelist = [ file for file in oslistdir(ospathdirname(ospathabspath(__file__))) if ospathisfile(file) ]
filelist = [ file for file in oslistdir(prefix) if ospathisfile(prefix + '/' + file) ]
def get_time(filename):
ft = osstat(filename)
return ftst_ctime
#def get_max():
# flist = []
# for file in filelist:
# flistappend(osstat(file)st_ctime)
# return max(flist)
def get_dist():
d = {}
for file in filelist:
d[file] = get_time(prefix + '/' + file)
return d
if __name__ == '__main__':
#maxtime = get_max()
d = get_dist()
#dic= sorted(diteritems(), key=lambda d:d[1], reverse = True)
upfile = max(diteritems(), key=operatoritemgetter(1))[0]
endpoint = "your aliyun endpoint"
accessKeyId, accessKeySecret="your accessKeyId","your accessKeySecret "
oss = OssAPI(endpoint, accessKeyId, accessKeySecret)
res = ossput_object_from_file("bucketname",upfile,prefix + '/' + upfile)
if resstatus != 200:
with open('/var/log/dbbacklog', 'a+') as f:
fwrite(logtime + ' back failed' + '\n')
我们接下来分析下脚本内容,其中脚本中注释的行都不用看,是我编写过程中测试用的,最开始我们设定了备份文件的目录和记录日志的时间,然后生成了一个备份目录所有文件的列表(列表其实不是最好的方式,我是用最简单的方式了,因为文件多了,列表会慢),然后定义了两个函数,get_time()函数是获取文件的创建时间戳,get_dist()函数是获取文件名和时间戳的字典,主函数部分比较难理解的根据字典value排序获得文件名了,diteritems()获得字典中的每个key,value对,key指定了一个函数,operatoritemgetter(1)表示用value来排序(因为就两个元素,key 是0,value就是1了),就是时间戳,排序完后返回key,最后的[0]做了这个工作,脚本其它部分的内容我就不多说了,都是很常见的用法,没什么难于理解的,好,脚本就介绍到这里,接下来进入我们最后一步。
第三步:将脚本写入crontab中,具体什么时候执行,就根据大家各自业务不同来设置了,没什么特别的。
类型、作用。
1、类型。OSS是一款基于阿里云OSS的FTPserver工具,FTP的文件是上传到阿里云OSS存储服务器。
2、作用。OSS作用是电信业务开展和运营时所必需的支撑平台,FTP的作用是用于文件的上传和下载。
1、功能不同:阿里云视频点播是一种视频云服务,提供视频上传、转码、存储、播放等功能,适用于各种视频应用场景;而OSS是一种对象存储服务,提供文件上传、存储、下载等功能,适用于各种文件存储和管理场景。
2、数据类型不同:阿里云视频点播主要处理视频数据,支持多种视频格式和编码方式;而OSS主要处理各种类型的文件数据,包括文本、、音频、视频等。
3、存储方式不同:阿里云视频点播提供云端视频存储服务,将视频文件存储在云端服务器上,用户可以通过API接口进行管理和调用;而OSS提供对象存储服务,将文件以对象的形式存储在云端服务器上,用户可以通过API接口进行管理和调用。
4、安全性不同:阿里云视频点播提供多种安全措施,包括视频加密、防盗链、访问控制等;而OSS也提供多种安全措施,包括数据加密、访问控制、防盗链等。
OSS主要为用户提供数据存储服务,用户可以通过以下操作来处理OSS上的数据:
1、创建、查看、罗列、删除 Bucket;
2、修改、获取Bucket的访问权限;
3、上传、查看、罗列、删除Object/Object Group;
4、访问时支持If-Modified-Since和If-Match等HTTP参数。
特点具体如下:
1、易用性:简单易用,便于管理,深度集成数据处理服务;
2、高可靠:多重冗余备份,服务设计可用性不低于9999%;
3、强安全:多层次安全防护,支持跨区域复制、异地容灾机制;
4、低成本:总体TCO更低,生命周期管理进一步降低成本。
0条评论