bigQueryExporterEnhanced 1.0.8

学分

此存储库是从 https://github.com/IcarusSO/bigQueryExporter

更改日志（与原始版本比较）

查询“本地”

• 在bq上创建一个带有随机散列的临时表作为输出表，这样函数的同时执行将不会相互覆盖。
• 执行后删除临时表。（如果希望保留，也可以将keep_temp_table设置为true）。

BigQueryExporter

将查询数据从google bigquery导出到本地计算机

安装

pip install bigQueryExporterEnhanced

准备连接

from bigQueryExport import BigQueryExporter
bigQueryExporter = BigQueryExporter(project_name, dataset_name, bucket_name)   

查询表

bigQueryExporter.query_to_table(query, job_name, dataset_name)

GS表

bigQueryExporter.table_to_gs(destination_table, job_name)

GS到本地

bigQueryExporter.gs_to_local(bucket, job_name, data_dir_path)

查询到GS（查询到表+表到GS）

bigQueryExporter.query_to_gs(query, job_name)

查询到本地（查询到表+表到GS+GS到本地）

export_path = bigQueryExporter.query_to_local(query)

# or with the options
export_path = bigQueryExporter.query_to_local(query, 
                                              job_name='simple_query', 
                                              data_dir_path='out/',
                                              keep_temp_table=False,
                                              overwrite_output_folder=True)

要求

• 您的服务器/本地计算机应有权访问项目

• 在Google SDK

• 执行以下命令

  gcloud auth应用程序默认登录名

标签：

• to
• 代码
• name
• gs
• 计算机
• query
• bq
• gcs
• bigqueryexporter

欢迎加入QQ群-->： 979659372

推荐PyPI第三方库

• akilib

  这个库是硬件库。你可以买到日本秋叶原的零件。

• cunidecode

  unicode文本的ascii音译

• sewar

  所有图像质量指标，你需要在一个包。

• django-logicaldelete

  提供内置逻辑删除功能的基本模型

• nucleic

  用于绘制突变谱的Python3.6库。

• MoneyLover_Excel_Lib

  MoneyLover Android应用程序生成的Excel文档的数据处理库

• cytomine-python-utilities

  cytomine python客户端。

• fio_email_queue

  尝试发送电子邮件队列模块

• ScoreModel

  记分模型

• tika

  apache tika python库

• opennms-client

  一个管理opennms的简单包。

• zeroconf-monke

  在zeroconf之上覆盖验证的薄包装

• tele-scope

  用于光度实验的模拟ccd观测

• strawberry-graphql

  用于创建graphqlapi的库

• Trix

  python代理/隧道服务器