要将CSV加载到BigQuery的字节列中,可以使用以下代码示例:
from google.cloud import bigquery
# 初始化BigQuery客户端
client = bigquery.Client()
# 指定要加载的CSV文件路径
csv_file = "path/to/csv/file.csv"
# 定义表架构
schema = [
bigquery.SchemaField("id", "INTEGER"),
bigquery.SchemaField("name", "STRING"),
bigquery.SchemaField("data", "BYTES")
]
# 定义加载配置
job_config = bigquery.LoadJobConfig(
schema=schema,
source_format=bigquery.SourceFormat.CSV,
skip_leading_rows=1
)
# 执行加载操作
with open(csv_file, "rb") as source_file:
load_job = client.load_table_from_file(source_file, "project.dataset.table", job_config=job_config)
load_job.result() # 等待加载作业完成
# 检查加载作业状态
if load_job.state == "DONE":
print("CSV文件已成功加载到BigQuery表中。")
else:
print("加载作业失败。")
请注意,上述代码示例假定您已经设置了正确的BigQuery项目、数据集和表,并且您具有适当的权限来执行加载操作。您需要根据实际情况修改代码中的csv_file
、schema
、"project.dataset.table"
等部分。