如何仅显示来自 aws s3 ls 命令的文件？

您不能仅使用 aws 命令执行此操作，但您可以轻松地将其通过管道传递给另一个命令以删除您不想要的部分。您还需要删除 --human-readable 标志以使输出更易于使用，并删除 --summarize 标志以删除最后的摘要数据。

尝试这个：

aws s3 ls s3://mybucket --recursive | awk '{print $4}'

编辑：考虑文件名中的空格：

aws s3 ls s3://mybucket --recursive | awk '{$1=$2=$3=""; print $0}' | sed 's/^[ \t]*//'

---

将 s3api 与 jq (AWS docu aws s3api list-objects) 一起使用：

这种模式总是递归的。

$ aws s3api list-objects --bucket "bucket" | jq -r '.Contents[].Key'
a.txt
foo.zip
foo/bar/.baz/a
[...]

您可以通过添加前缀来过滤子目录（此处为 foo 目录）。前缀不能以 / 开头。

$ aws s3api list-objects --bucket "bucket" --prefix "foo/" | jq -r '.Contents[].Key'
foo/bar/.baz/a
foo/bar/.baz/b
foo/bar/.baz/c
[...]

jq 选项：

-r = 原始模式，输出中没有引号

.Contents[] = 获取内容对象数组内容

.Key = 获取每个Key Field（不会产生有效的JSON Array，但我们处于原始模式，所以我们不在乎）

附录：

您可以使用纯 AWS CLI，但值将由 \x09 = Horizontal Tab (AWS: Controlling Command Output from the AWS CLI - Text Output Format) 分隔

$ aws s3api list-objects --bucket "bucket" --prefix "foo/" --query "Contents[].Key" --output text
foo/bar/.baz/a   foo/bar/.baz/b   foo/bar/.baz/c   [...]

AWS CLI 选项：

--query "Contents[].Key" = 查询内容对象数组并获取其中的每个键

--output text = 输出为制表符分隔的文本，现在带有引号

基于李光阳的附录评论：

带有新线的纯 AWS CLI：

$ aws s3api list-objects --bucket "bucket" --prefix "foo/" --query "Contents[].{Key: Key}" --output text
foo/bar/.baz/a
foo/bar/.baz/b
foo/bar/.baz/c
[...]

---

一个简单的过滤器是：

aws s3 ls s3://mybucket --recursive | perl -pe 's/^(?:\S+\s+){3}//'

这将删除日期、时间和大小。只留下文件的完整路径。它也可以在没有递归的情况下工作，它也应该适用于包含空格的文件名。

---

简单的方法

aws s3 ls s3://mybucket --recursive --human-readable --summarize|cut -c 29-

---

我的解决方案

使用 aws cli 以递归方式仅列出文件。

aws s3 ls s3://myBucket --recursive | awk 'NF>1{print $4}' | grep .

grep . - 清除空行。

示例：aws s3 ls s3://myBucket

                           PRE f5c10c1678e8484482964b8fdcfe43ad/
                           PRE f65b94ad31734135a61a7fb932f7054d/
                           PRE f79b12a226b542dbb373c502bf125ffb/
                           PRE logos/
                           PRE test/
                           PRE userpics/
2019-05-14 10:56:28       7754 stage.js

解决方案：aws s3 ls s3://myBucket --recursive | awk 'NF>1{print $4}' | grep .

stage.js

---

编辑：在考虑了 MultiDev 的评论后，以前的解决方案不适用于其中有空格的对象。我使用 s3api 而不是 s3

aws s3api list-objects --bucket mybucket --prefix myprefix --query 'Contents[].Key' | jq -rc '.[]'

前缀是可选的

使用 jq 从返回的数组中获取原始元素（键）

使用 --query 'Contents[].{Key: Key, Size: Size}' 之类的内容来获取更多信息，然后使用 jq 进一步格式化输出

旧解决方案：aws s3 ls s3://mybucket --recursive | rev | cut -d" " -f1 | rev

我建议不要依赖间距和获取第 4 个字段。

从技术上讲，您想要最后一个字段，无论它在哪个位置。

因此，将 rev 用于您的优势会更安全...
rev 将字符串输入 char 按 char
反转，因此当您将 aws s3 ls 输出到 rev 时，您将反转所有内容，包括字段的位置，因此最后一个字段始终成为第一个字段。
您只需 rev，先获取第一个字段，然后再次获取 rev，而不是确定最后一个字段的位置，因为字段中的字符也会反过来。

例子：

2013-09-02 21:32:57 23 Bytes foo/bar/.baz/a 变为 a/zab./rab/oof setyB 32 75:23:12 20-90-3102

那么 cut -d" " -f1 将检索第一个字段 a/zab./rab/oof

然后再次rev得到foo/bar/.baz/a

---

简单的命令是

aws s3 ls s3://mybucket --recursive --human-readable --summarize |cut -d ' ' -f 8

如果您需要时间戳，只需更新命令字段值。

---

S3 存储桶不仅可以包含文件，还可以包含带有前缀的文件。如果您使用 --recursive，它不仅会列出文件，还会列出前缀。如果您不关心前缀，只关心存储桶中的文件，或者只关心存储桶中的前缀，这应该可以工作。

aws s3 ls s3://$S3_BUCKET/$S3_OPTIONAL_PREFIX/ --recursive | awk '{ if($3 >0) print $4}'

awk 的 $3 是文件的大小，如果前缀是 0。也可能是文件为空，因此它也会跳过空文件。

---

How to display only files from aws s3 ls command?

1. Basic command

$ aws s3 ls s3://bucket --recursive

output :

2021-02-10 15:29:02          0 documents/
2021-02-10 15:29:02         18 documents/data/data.txt
2021-03-15 23:35:12          0 documents/data/my code.txt


2. To get only keys from s3 bucket containing spaces also.

$ aws s3 ls s3://bucket --recursive | awk '{ $1=$2=$3=""; print $0}' | cut -c4-

output : 

documents/
documents/data/data.txt
documents/data/my code.txt

3. Removing "documents/" from result

$ aws s3 ls s3://bucket --recursive | awk '$0 !~ /\/$/ { $1=$2=$3=""; print $0}' | cut -c4-

output :

documents/data/data.txt
documents/data/my code.txt

---

仅对于文件名，我发现最简单的是：

aws s3 ls s3://path/to/bucket/ | cut -d " " -f 4

这将在空格 (cut -d " ") 处截断返回的输出并返回第四列 (-f 4)，即文件名列表。

---

如果您的文件没有空格，那么这是最简单的方法：

aws s3 ls s3://mybucket  | cut -c32-

输出是：

1.txt.gz
2.txt.gz
3.txt.gz

代替：

2021-12-15 23:05:44         36 1.txt.gz
2021-12-15 23:05:45         37 2.txt.gz
2021-12-15 23:05:46         39 3.txt.gz

---

它只是通过起始符号过滤的grep。 “^-”表示行以“-”符号开头。另一方面，目录以字母“d”开头

ls -Al | grep "^-"

---