使用python脚本查询AWS Athena模式,pyathena
和boto3
哪个更快?
目前,我正在使用pyathena查询Athena模式,但速度很慢,我知道还有另一种选择boto3,但在开始之前需要一些专家的建议。
查看PyAthena的依赖项,您可以看到它实际上有一个boto3的依赖项。
除非PyAthena为其库增加了大量开销(这是不可能的(,否则您可能看到的最佳性能改进将取决于您如何使用Athena本身。
你可以做很多性能改进,亚马逊发布了一个名为"亚马逊雅典娜十大性能调整技巧"的博客,这将有助于提高你的查询性能。