如何使用Boto3分页

Question

背景：

默认情况下，列出IAM用户的AWS操作返回的最大值为50。

阅读下面的文档（链接），我运行下面的代码，并通过将“MaxItems”设置为1000返回完整的数据集。

paginator = client.get_paginator('list_users')
response_iterator = paginator.paginate(
 PaginationConfig={
     'MaxItems': 1000,
     'PageSize': 123})
for page in response_iterator:
    u = page['Users']
    for user in u:
        print(user['UserName'])

http://boto3.readthedocs.io/en/latest/guide/paginators.html https://boto3.readthedocs.io/en/latest/reference/services/iam.html#IAM.Paginator.ListUsers

问题:

例如，如果“MaxItems”设置为10，那么循环遍历结果的最佳方法是什么？这个

我测试了以下内容，但它只循环2次迭代之前的'IsTruncated'==False和结果的关键错误：'标记'。不知道为什么会这样，因为我知道有200多个结果。

marker = None

while True:
    paginator = client.get_paginator('list_users')
    response_iterator = paginator.paginate( 
        PaginationConfig={
            'MaxItems': 10,
            'StartingToken': marker})
    #print(response_iterator)
    for page in response_iterator:
        u = page['Users']
        for user in u:
            print(user['UserName'])
            print(page['IsTruncated'])
            marker = page['Marker']
            print(marker)
        else:
            break

Answer 1

（回答重写）**注意**，分页器包含一个与留档不一致的错误（反之亦然）。MaxItem当总项目超过MaxItem数量时不返回标记或NextToken。事实上Pagesize是控制标记/NextToken指示符返回的一个。

import sys
import boto3
iam = boto3.client("iam")
marker = None
while True:
    paginator = iam.get_paginator('list_users')
    response_iterator = paginator.paginate( 
        PaginationConfig={
            'PageSize': 10,
            'StartingToken': marker})
    for page in response_iterator:
        print("Next Page : {} ".format(page['IsTruncated']))
        u = page['Users']
        for user in u:
            print(user['UserName'])
    try:
        marker = response_iterator['Marker']
        print(marker)
    except KeyError:
        sys.exit()

代码不工作不是你的错 MaxItems似乎成为一个“阈值”指示器。具有讽刺意味的是，原始boto3.iam.list_用户中的 MaxItems，仍然可以像前面提到的那样工作。

如果选中boto3.iam.list_users，您会注意到您忽略了标记，否则必须输入一个值。显然，paginator并不是所有boto3类列表方法的包装器。

import sys
import boto3
iam = boto3.client("iam")
marker = None
while True:
    if marker:
        response_iterator = iam.list_users(
            MaxItems=10,
            Marker=marker
        )
    else:
        response_iterator = iam.list_users(
            MaxItems=10
        )
    print("Next Page : {} ".format(response_iterator['IsTruncated']))
    for user in response_iterator['Users']:
        print(user['UserName'])

    try:
        marker = response_iterator['Marker']
        print(marker)
    except KeyError:
        sys.exit()

您可以跟进我在boto3 github中提交的问题。根据成员，您可以在paginate（）之后调用build\u full\u result，这将显示所需的行为。