我使用awswrangler在我的S3中编写宴会,我通常在所有对象上添加标签以访问和成本控制,但我没有找到直接使用awswrangler的方法。我目前使用下面的代码进行测试:
import awswrangler as wr
import boto3
import pandas as pd
# Boto session
session = boto3.Session(profile_name='my_profile')
# Dummy pandas dataframe
d = {'col1': [1, 2], 'col2': [3, 4]}
df_pandas = pd.DataFrame(data=d)
wr.s3.to_parquet(df=df_pandas, path='s3://my-bucket/path/', boto3_session=session)
有一种方法可以将标签添加到.to_parquet
将在我的S3中写入的对象?
我刚刚发现awswrangler有一个名为s3_additional_kwargs
的参数,您可以将附加变量传递给s3请求awswrangler适合你。你可以像boto3'Key1=value1&Key2=value2'
这样发送标签
下面是一个如何给对象添加标签的例子:
import awswrangler as wr
import boto3
import pandas as pd
# Tagging
tag_set = 'Key1=value1&Key2=value2'
# Boto session
session = boto3.Session(profile_name='my_profile')
# Dummy pandas dataframe
d = {'col1': [1, 2], 'col2': [3, 4]}
df_pandas = pd.DataFrame(data=d)
wr.s3.to_parquet(df=df_pandas, path='s3://my-bucket/path/', s3_additional_kwargs={'Tagging': tag_set}, boto3_session=session)