要在不同位置进行读取和写入BigQuery数据,您需要使用跨位置复制功能。跨位置复制允许您将数据从一个地理位置复制到另一个地理位置。
以下是一个使用Python的示例代码,演示如何在欧洲位置读取数据,并将其复制到美国位置:
from google.cloud import bigquery
# 设置源和目标位置
source_location = "EU"
destination_location = "US"
# 设置源数据集和表
source_project = "your-source-project"
source_dataset = "your-source-dataset"
source_table = "your-source-table"
# 设置目标数据集和表
destination_project = "your-destination-project"
destination_dataset = "your-destination-dataset"
destination_table = "your-destination-table"
# 初始化BigQuery客户端
client = bigquery.Client()
# 获取源表的引用
source_table_ref = client.dataset(source_dataset, project=source_project).table(source_table)
# 获取目标表的引用
destination_table_ref = client.dataset(destination_dataset, project=destination_project).table(destination_table)
# 创建跨位置复制作业
job_config = bigquery.CopyJobConfig()
job_config.write_disposition = bigquery.WriteDisposition.WRITE_TRUNCATE
job_config.create_disposition = bigquery.CreateDisposition.CREATE_IF_NEEDED
job_config.destination_location = destination_location
# 运行跨位置复制作业
job = client.copy_table(source_table_ref, destination_table_ref, job_config=job_config)
job.result() # 等待作业完成
# 打印复制作业的状态
print("Job ID: {}".format(job.job_id))
print("State: {}".format(job.state))
确保替换示例代码中的占位符(如your-source-project
,your-source-dataset
等)为您自己的项目、数据集和表的值。
通过这个示例代码,您可以在源位置(欧洲)读取表数据,并将其复制到目标位置(美国)的表中。