linux实现定时备份文件到百度网盘详细教程

简介: 作为一个程序员,数据备份尤为重要,本文主要介绍的是将服务器上的某文件定时备份到百度网盘中。主要实现思路是:安装pip、byp --> 百度网盘进行授权登陆 --> 使用crontab+bypy实现定时自动数据备份。

一、准备工作


(1)写在文章之前

     作为一个程序员,数据备份尤为重要,本文主要介绍的是将服务器上的某文件定时备份到百度网盘中。主要实现思路是:安装pip、byp --> 百度网盘进行授权登陆 --> 使用crontab+bypy实现定时自动数据备份。


(2)环境

     Centos7+python2.7.5下利用crontab+bypy实现自动备份数据到百度网盘。笔者在制作过程中使用的是Xshell7软件连接linux服务器,当然你也可以使用宝塔面板上的终端来进行相关命令的操作,不过宝塔面板上的终端在输入一些命令时更容易出现问题,有时也有一定的局限性,比如点击宝塔其他页面之后终端上输入的命令将被清屏,有时连接失败后也会被清屏,不方便查看之前的命令执行结果。


(3)查看配置信息

成功连接linux服务器后可以使用如下命令查看自己的环境配置信息:


1.查看centos版本信息

cat /etc/redhat-release

2.查看linux版本

cat /proc/version

3.查看python版本

查看系统是否有python环境(一般系统自带python2.7),此命令查看过后用Ctrl-D退出或输入quit()退出。

python


二、执行流程


(1)安装pip

进入到服务器对应的项目文件根目录下,可以使用cd命令

#使用cd命令进入到项目根目录中
[root@iZ85173om7p5tdZ ~]# cd /www/wwwroot/zx.wiyp.top


sudo yum -y install epel-release   #这是安装pip是要用到的东西
sudo yum -y install python-pip
sudo yum clean all
sudo pip install --upgrade pip     #更新 


#如果无法更新可以使用命令:sudo python -m pip install --upgrade pip


 依次执行上面的代码,执行效果如下:

6cc3392e89b54901a919bc30aacf0327.png

2abda570c06a42b9955df78e52e27024.png

c8fc40fdbc334b17b368258d19699ec3.png

需要注意的是

这里在执行更新语句时出现了报错,无法更新时改命令用:sudo python -m pip install --upgrade pip,改用此命令时还是出现了一个错误:更新pip包时报错( “Python‘ setup.py egg_info“ failed with error code 1)记录。

此时尝试使用如下命令,发现还是不行,依然报错

    1. pip install --upgrade setuptools

    2.pip install ez_setup

这种情况可能是因为版本升级跨度较大,低级版本无法直接升级到高级版本,可尝试先升级到20.2.4,再尝试升级到20.3.4,此时问题就解决了。最后在进行一下更新操作。

1.python -m pip install --user --upgrade pip==20.2.4

2.python -m pip install --user --upgrade pip==20.3.4

c05d090e81d746f3a67f82c82bdb8930.png

(2)安装bypy,requests

sudo pip install bypy
sudo pip install requests

执行结果如下:出现succcess···表示成功。d7faecb79be34aabb6651ea523107582.png

0230727542a14218bde20a5c9ca0aec6.png

(4)授权登录

bypy info

执行bypy info并访问方框内的连接

ac9c9c0a59224b398248854fc56ed750.png

授权完成后可查看相关信息,由于百度PCS API权限限制,程序只能存取百度云端/apps/bypy目录下面的文件和目录。

bypy info     #空间使用信息
bypy list     #目录信息
bypy upload     例如我们可以备份上传/test目录下的所有文件,把本地当前目录下的文件同步到百度云盘,要注意切换到你想要上传的目录在执行这个命令,登录到网盘上,可以看到所有文件已经上传
bypy downdir    #把云盘上的内容同步到本地
bypy compare    #比较本地当前目录和云盘根目录,看是否一致,来判断是否同步成功:

(5)创建目录和脚本文件

1.创建目录:

[root@iZ85173om7p5tdZ ~]# mkdir -p /backup/
[root@iZ85173om7p5tdZ ~]# cd /backup/ 
[root@iZ85173om7p5tdZ backup]# touch backup_to_baidu.sh  #创建脚本文件
[root@iZ85173om7p5tdZ backup]# vim backup_to_baidu.sh  #进入脚本文件进行编辑

2.创建脚本文件代码如下(书写代码要规范):

bypy 无法同时上传多个文件,百度云不支持上传文件夹,可以通过压缩的方式解决

#!/bin/sh
. /etc/profile
. ~/.bash_profile
backtar=`date '+%Y%m%d%H%M%S'`   //名称为当前时间年月日时分秒
zip -r /backup/${backtar}.zip  /www/wwwroot/zx.wiyp.top/public/assets/img/logo.png//上传某个路径下的文件,以空格隔开,可以添加多个
/usr/bin/bypy upload /backup/${backtar}.zip//上传的压缩文件
find /backup -mtime +7 |grep .zip | xargs rm -f//删除7天前生成的压缩包

需要用到的vim编辑器的命令:qa-切换模式,Esc+:wq+回车-保存退出,esc+shift_zz-保存退出

3.如果遇到脚本无法执行可以进行如图操作,参考菜鸟教程

414a0dfd29454460a818a7d4763abd94.png

(6)使用crontab实现定时备份数据

1. crontab是什么?

       crontab命令用于设置周期性被执行的指令。该命令从标准输入设备读取指令,并将其存放于“crontab”文件中,以供之后读取和执行。crontab储存的指令被守护进程激活, crond常常在后台运行,每一分钟检查是否有预定的作业需要执行。这类作业一般称为cron jobs。每个用户可以拥有自己的crontab文件。同时,操作系统保存一个针对整个系统的crontab文件,该文件通常存放于/etc目录中。

      crontab配置文件位于“/etc/crontab”,打开配置文件,可以看到相关配置信息。


5b7ada3769054458bff5bc9d6cf5161e.png

2. 怎样使用?

       用法:* * * * *command。前面5个*代表执行命令时间,后面的command代表要执行的命令。该命令可以使一个普通的命令、shell脚本、python脚本、java的jar包等。

3.使用流程

使用命令打开自动执行指令编辑脚本

crontab -e

f70157e3864a4568b2ec98ce018dcc97.png

脚本内容如下:我这里设置的是10:50进行执行上面创建的shell脚本backup_to_baidu.sh,具体时间设置可以参考菜鸟教程。

bd4bef60b8d54e2dba8147fa1a86fed3.png


完成后保存退出并重启服务,这样系统将会每天定时执行数据备份的脚本

systemctl restart crond   # 重启crond服务


补充:crontab相关的其他命令


crontab -r   #删除任务
crontab -l   #查看任务


三、百度网盘中的效果

5cfccca8781146aa81a63d5a080ed6c4.png

四、在文章最后


    以上过程是笔者在使用时出现的问题,如有什么问题欢迎指正。

相关实践学习
CentOS 7迁移Anolis OS 7
龙蜥操作系统Anolis OS的体验。Anolis OS 7生态上和依赖管理上保持跟CentOS 7.x兼容,一键式迁移脚本centos2anolis.py。本文为您介绍如何通过AOMS迁移工具实现CentOS 7.x到Anolis OS 7的迁移。
目录
相关文章
|
4天前
|
网络协议 Linux
linux系统重要文件目录
本文介绍了Linux系统中的重要目录及其历史背景,包括根目录、/usr、/etc、/var/log和/proc等目录的结构和功能。其中,/etc目录下包含了许多关键配置文件,如网卡配置、DNS解析、主机名设置等。文章还详细解释了各目录和文件的作用,帮助读者更好地理解和管理Linux系统。
18 2
|
3天前
|
缓存 监控 Linux
|
7天前
|
Linux Shell 数据库
文件查找是Linux用户日常工作的重要技能介绍了几种不常见的文件查找方法
文件查找是Linux用户日常工作的重要技能。本文介绍了几种不常见的文件查找方法,包括使用`find`和`column`组合、`locate`和`mlocate`快速查找、编写Shell脚本、使用现代工具`fd`、结合`grep`搜索文件内容,以及图形界面工具如`Gnome Search Tool`和`Albert`。这些方法能显著提升文件查找的效率和准确性。
25 2
|
10天前
|
Linux 数据库
linux 全局搜索文件
在 Linux 系统中,全局搜索文件常用 `find`、`locate` 和 `grep` 命令。`find` 根据文件名、类型、大小、时间戳等条件搜索;`locate` 通过预构建的数据库快速查找文件;`grep` 在文件中搜索特定文本,常与 `find` 结合使用。选择合适的命令取决于具体需求。
|
13天前
|
运维 安全 Linux
Linux文件清空的五种方法总结分享
每种方法各有优势,选择最合适的一种或几种,可以极大提高您的工作效率。更多有关Linux系统管理的技巧与资源,欢迎访问,持续提升您的运维技能。
59 1
|
6月前
|
Linux
百度搜索:蓝易云【Linux中如何对文件进行压缩和解压缩?】
这些是在Linux中进行文件压缩和解压缩的常见方法。根据您的需求和具体情况,可能会使用其他压缩工具和选项。您可以通过查阅相应命令的帮助文档来获取更多详细信息。
87 1
|
6月前
|
NoSQL Java Linux
Linux常用命令(文件目录操作、拷贝移动、打包压缩、文本编辑、查找)
Linux常用命令(文件目录操作、拷贝移动、打包压缩、文本编辑、查找)
|
6月前
|
算法 Java Linux
Linux下文件增删改查定位压缩操作与权限所属用户
Linux下文件增删改查定位压缩操作与权限所属用户
71 0
26Linux - 文件管理(文件压缩解压:bzip2)
26Linux - 文件管理(文件压缩解压:bzip2)
60 0
|
6月前
|
Java Shell Linux
Linux【脚本 01】简单Shell脚本实现定时备份文件、压缩、删除超时文件操作(showDoc文件备份脚本举例)
Linux【脚本 01】简单Shell脚本实现定时备份文件、压缩、删除超时文件操作(showDoc文件备份脚本举例)
325 0

热门文章

最新文章