AWS EMR v5.32.0 Bootstrap Numpy Issue



我正在使用自定义脚本从EC2机器启动EMR集群。在bootstrap脚本中,我提到要升级numpy,使其能够与pandas兼容。但是当我尝试导入pandas时,它说它需要大于1.16的numpy版本。检查后我发现有两个版本的numpy可用1.16和1.21。我在引导中给出了卸载命令,但它没有删除以前的版本。请帮助

基于此- https://forums.aws.amazon.com/thread.jspa?messageID=989210&tstart=0 -我认为你可以尝试在引导脚本中降级你的pandas,而不是升级numpy。

最新更新