BigQuery数仓管理与SQL查询
输入数据结构或SQL指令,自动化创建BigQuery数据集、配置表结构并执行大规模数据分析查询与结果提取。
功能与用途
本技能针对Google Cloud BigQuery云端无服务器数据仓库,为开发者与数据工程师提供标准化的操作指南与指令支持。涵盖启用BigQuery API、基于JSON Schema定义与创建数据表、通过bq命令行工具和SDK执行高性能标准SQL查询,以及配置IAM安全权限与Terraform基础设施即代码集成,帮助用户完成从数据导入建模到高效查询的全流程操作。
适用场景
- 数仓表结构初始化:基于业务数据字段与JSON Schema,自动化在BigQuery中创建数据集并配置数据表结构。
- 海量数据分析查询:通过bq命令行或SDK执行标准SQL,完成亿级数据集的快速过滤、聚合统计与结果导出。
- 数仓基础架构配置:编写Terraform脚本与IAM权限策略,规范化管理BigQuery资源配额与团队访问权限。
适用人群
- 数据分析师
- 数据工程师
- 云端架构师
- 后端开发者
使用步骤
- 在GCP项目中启用bigquery.googleapis.com服务接口
- 定义Schema JSON文件并使用bq mk命令创建对应的数据集与数据表
- 使用标准SQL编写查询语句,并通过bq query命令或客户端SDK执行数据检索与导出
开始使用
将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。
技术信息
- 分类
- 编程
- 适用工具
- Codex、Claude Code、OpenClaw、Hermes、国内 Agent
- 使用难度
- 进阶
- 版本
- main
- 最近更新
- 2026-09-24
- 文件数
- 3
- 安装包大小
- 自动生成 ZIP
- 安全检查
- 基础检查通过
>-
依赖与权限
- 读取用户主动提供的内容