-
Notifications
You must be signed in to change notification settings - Fork 0
Expand file tree
/
Copy pathgenerate_file_detail.py
More file actions
189 lines (157 loc) · 6.31 KB
/
generate_file_detail.py
File metadata and controls
189 lines (157 loc) · 6.31 KB
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
import argparse
import datetime
import json
import subprocess
from pathlib import Path
from typing import List, Optional
def get_file_last_commit_info(filepath: Path) -> tuple[Optional[str], Optional[str]]:
"""
取得指定檔案最後一次 commit 的 SHA 和時間戳記。
此函數使用 `git log` 命令來查詢檔案的 commit 資訊。
Args:
filepath: 檔案路徑 (Pathlib Path 物件)。
Returns:
一個 tuple,包含最後一次 commit 的 SHA (字串) 和 ISO 8601 格式的時間戳記 (字串)。
如果發生錯誤或檔案沒有 commit 紀錄,則返回 (None, None)。
"""
try:
output = (
subprocess.check_output(
[
"git",
"log",
"-n",
"1",
"--pretty=format:%H %ct",
"--",
str(filepath),
],
stderr=subprocess.DEVNULL, # 避免 git log 錯誤訊息輸出到標準輸出
)
.decode("utf-8")
.strip()
)
if not output: # 檔案沒有 commit 紀錄
return None, None
commit_sha, commit_timestamp_str = output.split(" ", 1)
commit_timestamp = int(commit_timestamp_str)
commit_datetime_utc = datetime.datetime.fromtimestamp(
commit_timestamp, datetime.timezone.utc
)
commit_datetime_taipei = commit_datetime_utc.astimezone(
datetime.timezone(datetime.timedelta(hours=8))
)
last_updated = commit_datetime_taipei.isoformat()
return commit_sha, last_updated
except subprocess.CalledProcessError:
print(
f"錯誤:無法取得 {filepath} 的 commit 資訊。請確認檔案已納入 Git 版本控制。"
)
return None, None
except ValueError as e:
print(
f"錯誤:解析 {filepath} 的 commit 時間戳記時發生錯誤: {e}, 輸出: {output}"
)
return None, None
def generate_file_detail_json(
data_folder: Path,
file_detail_json_path: Path,
include_folders: Optional[List[str]] = None,
exclude_folders: Optional[List[str]] = None,
) -> None:
"""
產生 file_detail.json 檔案,包含指定資料夾中檔案的詳細資訊,並使用 commit 時間戳記作為更新時間。
Args:
data_folder: 根資料夾路徑 (Pathlib Path 物件),程式將在此資料夾下遞迴搜尋檔案。
file_detail_json_path: 輸出 file_detail.json 檔案的路徑 (Pathlib Path 物件)。
include_folders: 要包含的資料夾名稱列表 (字串列表)。如果為 None,則包含所有資料夾。
exclude_folders: 要排除的資料夾名稱列表 (字串列表)。
"""
now_utc = datetime.datetime.now(datetime.timezone.utc)
now_taipei = now_utc.astimezone(datetime.timezone(datetime.timedelta(hours=8)))
file_details = {}
latest_commit_datetime = None # 用來儲存最新檔案的 commit 時間
for path in data_folder.rglob("*"):
if not path.is_file() or path.name == file_detail_json_path.name:
continue
relative_path = path.relative_to(data_folder)
parts = relative_path.parts
if parts:
if len(parts) > 1:
folder_key = "/".join(parts[:-1])
else:
# 根目錄的 key 為 "/"
folder_key = "/"
else:
folder_key = "/"
if exclude_folders and folder_key in exclude_folders:
continue
if include_folders and folder_key not in include_folders:
continue
if folder_key not in file_details:
file_details[folder_key] = []
last_commit_sha, last_updated = get_file_last_commit_info(path)
# 更新 latest_commit_datetime
if last_updated is not None:
try:
dt = datetime.datetime.fromisoformat(last_updated)
if latest_commit_datetime is None or dt > latest_commit_datetime:
latest_commit_datetime = dt
except ValueError:
pass
file_details[folder_key].append(
{
"name": path.name,
"last_updated": last_updated,
"last_commit": last_commit_sha,
}
)
for folder in file_details:
file_details[folder].sort(key=lambda f: f["name"])
# 如果有最新 commit 時間,則用它,否則以目前台北時間為準
current_time_iso = (
latest_commit_datetime.isoformat()
if latest_commit_datetime is not None
else now_taipei.isoformat()
)
detail_data = {"last_updated": current_time_iso, "file_details": file_details}
data_folder.mkdir(parents=True, exist_ok=True)
with file_detail_json_path.open("w", encoding="utf-8") as f:
json.dump(detail_data, f, indent=2, ensure_ascii=False, sort_keys=True)
print(f"{file_detail_json_path} 檔案已生成。")
if __name__ == "__main__":
"""
主程式入口。使用 argparse 解析命令列參數,並生成 file_detail.json 檔案。
使用者可以透過命令列參數指定資料夾路徑、file_detail.json 輸出路徑、包含和排除的資料夾。
"""
parser = argparse.ArgumentParser(
description="從指定資料夾生成 file_detail.json 檔案,包含檔案的最後更新時間 (commit 時間)。"
)
parser.add_argument(
"--data_folder",
type=str,
default="data",
help="要掃描的根資料夾路徑 (預設為 'data')",
)
parser.add_argument(
"--json_path",
type=str,
default="file_detail.json",
help="輸出 file_detail.json 檔案的路徑 (預設為 'file_detail.json')",
)
parser.add_argument(
"--include",
type=str,
nargs="+",
help="要包含的資料夾名稱,多個名稱請用空格分隔 (預設包含所有資料夾)",
)
parser.add_argument(
"--exclude",
type=str,
nargs="+",
help="要排除的資料夾名稱,多個名稱請用空格分隔 (預設不排除任何資料夾)",
)
args = parser.parse_args()
generate_file_detail_json(
Path(args.data_folder), Path(args.json_path), args.include, args.exclude
)