如何限制多个目录中文件查找的最大总体大小？

2024-05-17 20:20:25

限制多个目录中文件查找的最大总体大小

问题

需要一个命令来解决以下问题：

在多个目录中查找所有文件，按日期降序排列。
将命令输出限制为最大总文件大小（例如 2TB）。
将结果输出到文件或管道到 rsync 或 rclone 同步。

解决方案

可以执行以下命令：

find /path/to/folderA /path/to/folderB -type f -printf '%T@ %p\n' | sort -nr | awk -v max_size=2097152000 'BEGIN {total_size = 0} {total_size += $1} total_size <= max_size {print $2}'

解释

find 命令 ：

find /path/to/folderA /path/to/folderB -type f: 在 folderA 和 folderB 中查找所有文件。
-printf '%T@ %p\n': 打印每个文件的修改时间戳和文件路径。

sort 命令 ：

sort -nr: 按修改时间戳降序排列文件。

awk 命令 ：

awk -v max_size=2097152000 'BEGIN {total_size = 0} {total_size += $1} total_size <= max_size {print $2}': 遍历文件列表，计算总文件大小，并打印小于或等于 max_size 的文件路径。

示例

假设有以下文件：

/path/to/folderA/file1.txt（修改时间戳：1656675887）
/path/to/folderA/file2.txt（修改时间戳：1656675885）
/path/to/folderB/file3.txt（修改时间戳：1656675883）
/path/to/folderB/file4.txt（修改时间戳：1656675881）

执行命令后，输出为：

1656675887 /path/to/folderA/file1.txt
1656675885 /path/to/folderA/file2.txt
1656675883 /path/to/folderB/file3.txt

这表示满足最大总文件大小（2TB）限制的前三个最新文件。

限制搜索深度

可以使用 -maxdepth 选项将搜索限制到指定深度。例如，要将搜索限制到根目录下的两个子目录：

find /path/to/folderA /path/to/folderB -maxdepth 2 -type f -printf '%T@ %p\n' | sort -nr | awk -v max_size=2097152000 'BEGIN {total_size = 0} {total_size += $1} total_size <= max_size {print $2}'