最新要闻
- 环球关注:1月4日发布!一加11官宣搭载双环式对磁扬声器:支持杜比全景声
- 世界讯息:新能源补贴正式终止!小鹏宣布:2023年各车型售价与补贴后一致
- 今日热搜:岚图汽车12月交付1729辆 大增14.7%!全年累计交付19409辆
- 环球微速讯:《阿凡达2》成第100部内地票房破10亿电影:当年《阿凡达1》是第1部
- 今日看点:外观帅炸了!阿富汗首款国产跑车随风雪亮相喀布尔
- 《王者荣耀》盘古即将获得品质升级:上手难度大幅下降
- 每日短讯:跨年夜无人机被气球缠绕坠落人群 引发一阵惊呼
- 大年初一上映!《流浪地球2》微笑海报发布:主创全员出镜
- 2023全年油价调整时间表出炉:1月3日第一调 要涨
- 最新消息:你看过几场?2022年国内电影总票房超300亿
- 即时焦点:必囤:百草味年货坚果大礼包1370g/8袋仅49元
- 微速讯:特斯拉拼了:其他品牌车辆置换特斯拉 3.2万元功能免费用90天
- 全球首架国产大飞机C919新年首飞:验证飞行将达100小时
- 每日快看:全球最大第三方Android系统!基于Android 13的LineageOS 20正式发布
- 全球今头条!联想新款迷你主机M60Q官宣:厚度仅3.4厘米 可选12代i5
- 当前简讯:2023大事前瞻:杭州亚运会9月举办 首次纳入电竞比赛项目
手机
iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
- 警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- 男子被关545天申国赔:获赔18万多 驳回精神抚慰金
- 3天内26名本土感染者,辽宁确诊人数已超安徽
- 广西柳州一男子因纠纷杀害三人后自首
- 洱海坠机4名机组人员被批准为烈士 数千干部群众悼念
家电
今日快讯:关于使用boto3方式获取AWS-所有EC2-机型及属性时所遇到的结果返回不全的坑点及使用分布机制的解决方法
对于aws如果我们想获取现在提供的所有的机型及相关的属性,我们可以使用aws cli命令如下:
[qq5201351@localhost ~]$ aws ec2 describe-instance-types --query InstanceTypes[].InstanceType
可以发现截止2023-01-01,一共有259个实例机型,不要--query后面的部分,可以查看到每个实例机型详细的属性,如cpu,内存等信息
但是笔者是准备使用boto3的方式获取aws所有实例机型相关的信息,于是有了如下的核心代码:
(相关资料图)
session=boto3.Session(profile_name=AWS_Account_XXX,region_name="cn-north-1")client = session.client("ec2")EC2Response = client.describe_instances()EBSResponse = client.describe_volumes()EC2InstanceTypeResponse=client.describe_instance_types()print(EC2InstanceTypeResponse)
但是却发现只有返回100个结果,也就是返回的实例机型不全,关键这个最坑的是没有任何提示和报错,不仔细核心,可能还真以为EC2的实例机型就100种
因为在后续代码中发现有没有机型查询不到,才猜到可能不全,对于没有在结果中的实例,笔者通过API文档发现也可以通过如下的方式得到
EC2InstanceTypeResponse=client.describe_instance_types(InstanceTypes=["t3.small","r3.large"])
但是这样分别查询效率必然会低很多,笔者又发现还有一个参数MaxResults=xx,可以指定返回的条数,于是笔者又将此值指定到很大,如99999
但是又返回报错:
botocore.exceptions.ClientError: An error occurred (InvalidMaxResults) when calling the DescribeInstanceTypes operation: Value ( 99999 ) for parameter maxResults is invalid. Expecting a value from ( 5 ) to ( 100 ).
从这里可以看出就算指定返回的结果值条数,指定的范围也只能是 5~100
那么如何才能返回全部的结果呢,按理说官网在提供API编程方法时不可能没有考虑到这个bug呢、于是又查阅了大量的官网资料才发现
有些返回,当数据过多时,默认没有使用分布的机制,我们需要引入.get_paginator分布机制才能得到全部的结果,注意参数不可以加(),在写法上稍稍调整一下即可
session=boto3.Session(profile_name=AWS_Account_XXX,region_name="cn-north-1")client = session.client("ec2")EC2Response = client.describe_instances()EBSResponse = client.describe_volumes()EC2InstanceTypeResponse=client.get_paginator("describe_instance_types")for EC2InstanceTypeResponsePage in EC2InstanceTypeResponse.paginate(): for EC2InstanceTypeItem in EC2InstanceTypeResponsePage["InstanceTypes"]: EC2InstanceType=EC2InstanceTypeItem["InstanceType"] print(EC2InstanceType)
这时我们执行时,就可以看到能返回所有的结果,其中每页默认依然是100条,一共分3次就能全部返回了~
终于完美的解决了这个问题,想起来,这个确实是AWS boto3 API的一个巨大的坑点,在client.describe_instance_types()说明中也没有明确地说明解决方法
最后还得大量其他页面才知道有分机的这个机制~,于是记录于此,希望能帮助到其他被这个分布机制坑到的朋友~
关于分布机制及详细的介绍可以参考:https://boto3.amazonaws.com/v1/documentation/api/latest/guide/paginators.html
尊重别人的劳动成果 转载请务必注明出处:https://www.cnblogs.com/5201351/p/17018113.html
-
今日快讯:关于使用boto3方式获取AWS-所有EC2-机型及属性时所遇到的结果返回不全的坑点及使用分布机制的解决方法
对于aws如果我们想获取现在提供的所有的机型及相关的属性,我们可以使用awscli命令如下:[qq5201351@loc...
来源: 今日快讯:关于使用boto3方式获取AWS-所有EC2-机型及属性时所遇到的结果返回不全的坑点及使用分布机制的解决方法
世界快讯:web项目开发---第三天
环球关注:1月4日发布!一加11官宣搭载双环式对磁扬声器:支持杜比全景声
世界讯息:新能源补贴正式终止!小鹏宣布:2023年各车型售价与补贴后一致
MAUI新生6.6-搜索栏SearchHandler
今日热搜:岚图汽车12月交付1729辆 大增14.7%!全年累计交付19409辆
每日焦点!得到跨年演讲2023
环球微速讯:《阿凡达2》成第100部内地票房破10亿电影:当年《阿凡达1》是第1部
Django模板层
今日看点:外观帅炸了!阿富汗首款国产跑车随风雪亮相喀布尔
《王者荣耀》盘古即将获得品质升级:上手难度大幅下降
每日短讯:跨年夜无人机被气球缠绕坠落人群 引发一阵惊呼
【世界热闻】从系统整体观思考系统构建
大年初一上映!《流浪地球2》微笑海报发布:主创全员出镜
2023全年油价调整时间表出炉:1月3日第一调 要涨
AcWing362. 区间
最新消息:你看过几场?2022年国内电影总票房超300亿
即时焦点:必囤:百草味年货坚果大礼包1370g/8袋仅49元
微速讯:特斯拉拼了:其他品牌车辆置换特斯拉 3.2万元功能免费用90天
全球首架国产大飞机C919新年首飞:验证飞行将达100小时
每日快看:全球最大第三方Android系统!基于Android 13的LineageOS 20正式发布
全球今头条!联想新款迷你主机M60Q官宣:厚度仅3.4厘米 可选12代i5
当前简讯:2023大事前瞻:杭州亚运会9月举办 首次纳入电竞比赛项目
热头条丨日本外卖小哥晒收入:月入合人民币5.5万元
观察:MYSQL安装教程及sqlyog初次使用
全球焦点!80秒看全球跨年烟火秀:用璀璨夜空迎接2023 你那能放烟花吗
【天天热闻】中国汽车保有量超3亿辆 千人拥有量达220辆 已成普通家庭消费品
搜索页上全是广告和推荐?用这插件一键去除
播报:新规即日起开始执行!手机预装App终于可以卸载了
苹果4GB内存为何能击败安卓12GB?历代iPhone内存容量公布:最大不过6GB
每日热议!铁路新规今日起施行:实名制儿童火车票将按照年龄购买 不看身高
焦点热讯:MAUI新生6.5-导航路由Navigation
每日资讯:Intel带着56核心再次发烧!新座驾降临 能插16条内存
环球头条:大批192号段诈骗电话出现!中国广电发布提醒:电商客服不会用192
热文:一项大奖的所有得主:都没有后代 为什么呢?
动态焦点:SpaceX预告2023年第一发:一箭114星!超越印度新纪录
要再见了!《魔兽世界》临时充值渠道将于1月1日0点正式关闭
詹姆斯生日夜狂砍47分!杜兰特盛赞其表现:神迹!
第119篇: JavaScript 类
天天速递!仅仅10年 中国在西部修了2.5万公里铁路
【天天聚看点】直播央视2023跨年晚会:明星阵容豪华、两大运动员登台
3999元 LG新款27英寸显示器开售:搭载4K Nano IPS Black屏
2423公里!曾经的中国西部最长铁路 开通60年了
焦点热门:妈妈给儿子读英语 发音如原声磁带!6岁孩子开口惊人
玩家吐槽《塞尔达传说:王国之泪》NS限定机太丑:希望不是真的
报道:屏幕碾压iPhone 14 Pro!红魔8 Pro系列20点开售:3999元起
今日快看!男子上公厕10分钟门自动打开:装了定时器 网友吐槽不合理
36个月流畅不卡顿!卢伟冰:Redmi 12C满足低预算人群核心需求
手工耿又出大作 自制小黄人悬空火炉 网友:有用、想要
世界微资讯!AcWing 1359. 洛谷P1457 城堡
LaTeX快速入门
【天天聚看点】早餐来一盒 伊利高端品牌金典纯牛奶24盒到手76元
世界报道:28年再温经典!周星驰电影《大话西游》元旦抖音全网独播
当前热讯:Python类的多态和多态性
当前观点:红绿灯倒计时覆盖量破百万 百度地图:全国3000县市只差1个没有
世界新消息丨“流氓软件”拜拜!手机预装App终于要能卸载了:新规明天执行
长城大气!魏牌官宣:国补取消后插混车型不涨价
马斯克疯狂省钱:断供厕纸、辞退保洁、退租办公室
Codeforces Good Bye 2022 CF 1770 A~E 题解
世界观天下!上调幅度2000到6000元!比亚迪宣布调整相关车型官方指导价
【环球热闻】今晚20点播出!央视跨年晚会阵容官宣:短道速滑运动员武大靖加盟
每日简讯:分布式排队叫号系统源码出售
口碑崩盘豆瓣评分跌至5.4!《三体》动画第五集上线你还追吗?
WPF 实现通知属性的N种方式
P3Depth: Monocular Depth Estimation with a Piecewise Planarity Prior
全球滚动:从USB存储设备启动树莓派
全球快看:满满维生素!可口可乐innocent果汁大促:三瓶券后不到15元
天天热门:长绒棉亲肤透气 浪莎男士中筒袜子5双21.55元
每日讯息!2023元旦档预售总票房破1亿元:《阿凡达2:水之道》第一
《王者荣耀》铠荣耀典藏皮肤今晚上线!三形态特效帅炸
头条:游戏火爆全球 海外营收过半!米哈游获评全国文化企业30强
快播:Unreal学习笔记1-打印输出
环球速读:史上财富损失第一人:马斯克财产缩水破人类记录
即时:官旗抄底:新疆大红乌苏啤酒500ml*12罐整箱59.9元
环球即时:沙特球队官宣C罗加盟 本人回应:是时候来亚洲分享经验了
一加11R外观泄露:双曲面屏、后置三摄
MySQL报错解决
当前观点:联想YOGA新款笔记本曝光:双屏显示、支持360度翻转
天天快资讯:0糖、0脂肪!Nevercoffee咖啡:10盒到手16.41元
天天快资讯丨兴泉铁路全线开通:8个老区终于坐上火车
【世界报资讯】电脑上没有“锤子大爆炸”:自己做一个!
环球快播:辽宁吉林多地现不明飞行物:外星飞船?还是韩国制造?
天天速讯:女子因上厕所未在工位被领导打:网友集体愤怒
天天日报丨知情人士:李子柒短期内或不考虑复出 业内看好重回顶流
速递!奥迪最帅量产电车!RS e-tron GT上市:146.88万秒杀保时捷
网友在苹果官方旗舰店买iPhone 13:取消订单却不给退款
快讯:三大件不再是重点 调查显示:84.5%消费者更看重汽车智能化
环球微动态丨ColorOS 13 2023年Q1适配计划出炉:10款机型喜提正式版
环球新动态:2022年总结与反思
全球热文:显卡清库存告一段落 价格已经到底:AMD、NVIDIA不会再便宜
【全球新要闻】RTX 4090游戏本狂野!一脚踢翻桌面RTX 3090
有你吗?我国千兆宽带用户达到8707万户 同比增长157%
全球最新:联想SmartPaper墨水平板曝光:10.3寸大屏、23ms低延迟
天天即时:国产游戏《大多数》称《九霄大陆》是盗版 把自己破解了
【天天时快讯】HDU 6801 Game on a Circle 题解 (推式子,多项式)
LeetCode-400. 第N位数字
全球观热点:红黑树起源以及插入解析
世界简讯:“最牛00后”:成都122岁长寿老人朱郑氏去世 家人100多名
全球快看点丨女子圣诞节送男友PS5:送礼前先把自己感动哭了
【全球速看料】比亚迪发布公告:终止拆分半导体业务上市