cky2024 commited on
Commit
5b0337e
·
verified ·
1 Parent(s): bec9c3c

Update sync_data.sh

Browse files
Files changed (1) hide show
  1. sync_data.sh +111 -84
sync_data.sh CHANGED
@@ -1,101 +1,128 @@
1
  #!/bin/bash
2
 
3
- ENABLE_GITHUB_SYNC=true
4
 
5
- # 检查必要的环境变量
6
- if [ -z "$G_NAME" ] || [ -z "$G_TOKEN" ]; then
7
- echo "缺少必要的环境变量 G_NAME 或 G_TOKEN,将跳过 GitHub 同步"
8
- ENABLE_GITHUB_SYNC=false
9
- fi
10
-
11
- if [ "$ENABLE_GITHUB_SYNC" = true ]; then
12
- # 解析仓库名和用户名
13
- IFS='/' read -r GITHUB_USER GITHUB_REPO <<< "$G_NAME"
14
-
15
- # 构建 GitHub 仓库的克隆 URL,包含令牌
16
- REPO_URL="https://${G_TOKEN}@github.com/${G_NAME}.git"
17
- mkdir -p ./data/github_data
18
 
19
- # 克隆仓库
20
- echo "正在克隆仓库……"
21
- git clone "$REPO_URL" ./data/github_data || {
22
- echo "克隆失败,请检查 G_NAME G_TOKEN 是否正确。"
23
- ENABLE_GITHUB_SYNC=false
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
24
  }
25
-
26
- if [ -f ./data/github_data/webui.db ]; then
27
- cp ./data/github_data/webui.db ./data/webui.db
28
- echo "从 GitHub 仓库中拉取成功"
29
- else
30
- echo "GitHub 仓库中未找到 webui.db,将在同步时推送"
31
- fi
32
  fi
33
 
34
- # 定义同步函数
35
  sync_data() {
36
  while true; do
37
- echo "正在开始同步"
38
-
39
- # 1. 同步到 GitHub
40
- if [ "$ENABLE_GITHUB_SYNC" = true ]; then
41
- cd ./data/github_data
42
- git config user.name "AutoSync Bot"
43
- git config user.email "[email protected]"
44
- git checkout main || git checkout master
45
-
46
- if [ -f "../webui.db" ]; then
47
- cp ../webui.db ./webui.db
48
- else
49
- echo "数据库尚未初始化"
50
- fi
51
-
52
- if [[ -n $(git status -s) ]]; then
53
- git add webui.db
54
- git commit -m "Auto sync webui.db $(date '+%Y-%m-%d %H:%M:%S')"
55
- git push origin HEAD && {
56
- echo "GitHub推送成功"
57
- } || {
58
- echo "推送失败,等待重试..."
59
- sleep 10
60
- git push origin HEAD || {
61
- echo "重试失败,放弃推送到Github。"
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
62
  }
63
- }
64
  else
65
- echo "GitHub: 没有检测到数据库变化"
 
66
  fi
67
-
68
- cd ../..
69
- fi
70
-
71
- # 2. 同步到 WebDAV
72
- if [ -z "$WEBDAV_URL" ] || [ -z "$WEBDAV_USERNAME" ] || [ -z "$WEBDAV_PASSWORD" ]; then
73
- echo "WebDAV 环境变量缺失,跳过 WebDAV 同步。"
74
  else
75
- echo "同步到 WebDAV..."
76
- FILENAME="webui_$(date +'%m_%d').db"
77
- if [ -f ./data/webui.db ]; then
78
- curl -T ./data/webui.db --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/$FILENAME" && {
79
- echo "WebDAV 上传成功"
80
- } || {
81
- echo "WebDAV 上传失败,等待重试..."
82
- sleep 10
83
- curl -T ./data/webui.db --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/$FILENAME" || {
84
- echo "重试失败,放弃webdav上传。"
85
- }
86
- }
87
- else
88
- echo "未找到 webui.db 文件,跳过 WebDAV 同步"
89
- fi
90
  fi
91
-
92
- # 3. 等待统一的时间间隔
93
- SYNC_INTERVAL=${SYNC_INTERVAL:-7200}
94
- echo "当前时间 $(date '+%Y-%m-%d %H:%M:%S')"
95
- echo "等待 ${SYNC_INTERVAL} 秒后进行下一次同步..."
96
- sleep $SYNC_INTERVAL
97
  done
98
  }
99
 
100
- # 后台启动同步进程
101
- sync_data &
 
1
  #!/bin/bash
2
 
3
+ mkdir -p ./data
4
 
5
+ # 生成校验和文件
6
+ generate_sum() {
7
+ local file=$1
8
+ local sum_file=$2
9
+ sha256sum "$file" > "$sum_file"
10
+ }
 
 
 
 
 
 
 
11
 
12
+ # 优先从WebDAV恢复数据
13
+ if [ ! -z "$WEBDAV_URL" ] && [ ! -z "$WEBDAV_USERNAME" ] && [ ! -z "$WEBDAV_PASSWORD" ]; then
14
+ echo "尝试从WebDAV恢复数据..."
15
+ curl -L --fail --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/webui.db" -o "./data/webui.db" && {
16
+ echo "从WebDAV恢复数据成功"
17
+ } || {
18
+ if [ ! -z "$G_NAME" ] && [ ! -z "$G_TOKEN" ]; then
19
+ echo "从WebDAV恢复失败,尝试从GitHub恢复..."
20
+ REPO_URL="https://${G_TOKEN}@github.com/${G_NAME}.git"
21
+ git clone "$REPO_URL" ./data/temp && {
22
+ if [ -f ./data/temp/webui.db ]; then
23
+ mv ./data/temp/webui.db ./data/webui.db
24
+ echo "从GitHub仓库恢复成功"
25
+ rm -rf ./data/temp
26
+ else
27
+ echo "GitHub仓库中未找到webui.db"
28
+ rm -rf ./data/temp
29
+ fi
30
+ }
31
+ else
32
+ echo "WebDAV恢复失败,且未配置GitHub"
33
+ fi
34
  }
35
+ else
36
+ echo "未配置WebDAV,跳过数据恢复"
 
 
 
 
 
37
  fi
38
 
39
+ # 同步函数
40
  sync_data() {
41
  while true; do
42
+ echo "开始同步..."
43
+ HOUR=$(date +%H)
44
+
45
+ if [ -f "./data/webui.db" ]; then
46
+ # 生成新的校验和文件
47
+ generate_sum "./data/webui.db" "./data/webui.db.sha256.new"
48
+
49
+ # 检查文件是否变化
50
+ if [ ! -f "./data/webui.db.sha256" ] || ! cmp -s "./data/webui.db.sha256.new" "./data/webui.db.sha256"; then
51
+ echo "检测到文件变化,开始同步..."
52
+ mv "./data/webui.db.sha256.new" "./data/webui.db.sha256"
53
+
54
+ # 同步到WebDAV
55
+ if [ ! -z "$WEBDAV_URL" ] && [ ! -z "$WEBDAV_USERNAME" ] && [ ! -z "$WEBDAV_PASSWORD" ]; then
56
+ echo "同步到WebDAV..."
57
+
58
+ # 上传数据文件
59
+ curl -L -T "./data/webui.db" --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/webui.db" && {
60
+ echo "WebDAV更新成功"
61
+
62
+ # 每日备份(包括WebDAV和GitHub),在每天0点进行
63
+ if [ "$HOUR" = "00" ]; then
64
+ echo "开始每日备份..."
65
+
66
+ # 获取前一天的日期
67
+ YESTERDAY=$(date -d "yesterday" '+%Y%m%d')
68
+ FILENAME_DAILY="webui_${YESTERDAY}.db"
69
+
70
+ # WebDAV每日备份
71
+ curl -L -T "./data/webui.db" --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/$FILENAME_DAILY" && {
72
+ echo "WebDAV日期备份成功: $FILENAME_DAILY"
73
+
74
+ # GitHub每日备份
75
+ if [ ! -z "$G_NAME" ] && [ ! -z "$G_TOKEN" ]; then
76
+ echo "开始GitHub每日备份..."
77
+ REPO_URL="https://${G_TOKEN}@github.com/${G_NAME}.git"
78
+ git clone "$REPO_URL" ./data/temp || {
79
+ echo "GitHub克隆失败"
80
+ rm -rf ./data/temp
81
+ }
82
+
83
+ if [ -d "./data/temp" ]; then
84
+ cd ./data/temp
85
+ git config user.name "AutoSync Bot"
86
+ git config user.email "[email protected]"
87
+ git checkout main || git checkout master
88
+ cp ../webui.db ./webui.db
89
+
90
+ if [[ -n $(git status -s) ]]; then
91
+ git add webui.db
92
+ git commit -m "Auto sync webui.db for ${YESTERDAY}"
93
+ git push origin HEAD && {
94
+ echo "GitHub推送成功"
95
+ } || echo "GitHub推送失败"
96
+ else
97
+ echo "GitHub: 无数据变化"
98
+ fi
99
+ cd ../..
100
+ rm -rf ./data/temp
101
+ fi
102
+ fi
103
+ } || echo "WebDAV日期备份失败"
104
+ fi
105
+ } || {
106
+ echo "WebDAV上传失败,重试..."
107
+ sleep 10
108
+ curl -L -T "./data/webui.db" --user "$WEBDAV_USERNAME:$WEBDAV_PASSWORD" "$WEBDAV_URL/webui.db" || {
109
+ echo "WebDAV重试失败"
110
+ }
111
  }
112
+ fi
113
  else
114
+ echo "文件未发生变化,跳过同步"
115
+ rm -f "./data/webui.db.sha256.new"
116
  fi
 
 
 
 
 
 
 
117
  else
118
+ echo "未找到webui.db,跳过同步"
 
 
 
 
 
 
 
 
 
 
 
 
 
 
119
  fi
120
+
121
+ echo "当前时间: $(date '+%Y-%m-%d %H:%M:%S')"
122
+ echo "下次同步: $(date -d '+30 minutes' '+%Y-%m-%d %H:%M:%S')"
123
+ sleep 300
 
 
124
  done
125
  }
126
 
127
+ # 启动同步进程
128
+ sync_data &