Conector de origen
Conector de Google Cloud Storage
Integración de Google Cloud Storage con bases de datos, warehouses y herramientas de BI
Almacenamiento de objetos para archivos y exportaciones en GCP. Datrise captura entidades de Google Cloud Storage como buckets, objetos, prefijos, metadatos de objetos, generaciones y clases de almacenamiento, y luego entrega modelos normalizados y tipados para reporting en warehouse, atribución y flujos de IA.
La Cloud Storage JSON API v1 se autentica con service account, OAuth 2.0, las cargas incrementales usan updated (object metadata timestamp) or generation number, y el proveedor limita a buckets initially support roughly 1,000 object writes/sec and 5,000 object reads/sec before autoscaling further, but writes to any single object name are capped at 1 write per second.
De los 6 objetos, 6 se sincronizan con upsert por clave primaria y 0 como flujos append-only, de modo que cada ejecución incremental solo mueve lo que cambió desde la última marca de agua. Cada objeto llega a su propia tabla (por ejemplo `google_cloud_storage_f_buckets`) con el esquema derivado de la API de Google Cloud Storage, no de un CSV, en cualquiera de los 43 destinos soportados.
Datrise está en acceso anticipado: elige un destino abajo para ver el pipeline de Google Cloud Storage y únete a la lista de espera para recibir el conector con onboarding guiado.
Qué datos de Google Cloud Storage extrae Datrise
Cada objeto llega a su propia tabla tipada. El modo de sync se deriva del objeto: los objetos de historial se anexan, el resto se actualiza con upsert.
| Objeto | Tabla de destino | Modo de sync |
|---|---|---|
| buckets | google_cloud_storage_f_buckets | Upsert por clave primaria, incremental por updated-at |
| objects | google_cloud_storage_f_objects | Upsert por clave primaria, incremental por updated-at |
| prefixes | google_cloud_storage_f_prefixes | Upsert por clave primaria, incremental por updated-at |
| object metadata | google_cloud_storage_f_object_metadata | Upsert por clave primaria, incremental por updated-at |
| generations | google_cloud_storage_f_generations | Upsert por clave primaria, incremental por updated-at |
| storage classes | google_cloud_storage_f_storage_classes | Upsert por clave primaria, incremental por updated-at |
API de Google Cloud Storage: datos de configuración del conector
Verificado contra la documentación del proveedor el 2026-09-02. Los valores desconocidos se dejan en blanco, no se inventan.
| API | Cloud Storage JSON API v1 |
|---|---|
| Autenticación | service account, OAuth 2.0 — Requests carry an OAuth 2.0 Bearer access token, typically minted from an attached or key-based service account; HMAC keys are also available for S3-compatible XML API access. |
| Paginación | token — `objects.list` returns up to 1,000 combined `items`/`prefixes` per page (`maxResults`); follow the returned `nextPageToken` until it is absent to get the full listing. |
| Límite de peticiones | buckets initially support roughly 1,000 object writes/sec and 5,000 object reads/sec before autoscaling further, but writes to any single object name are capped at 1 write per second |
| Cursor incremental | updated (object metadata timestamp) or generation number — There is no server-side 'modified since' filter on `objects.list`; incremental pulls filter the per-object `updated` timestamp client-side, or consume Pub/Sub notifications for near-real-time capture instead of relisting. |
| Webhooks | Sí — Pub/Sub notifications (OBJECT_FINALIZE, OBJECT_METADATA_UPDATE, OBJECT_DELETE, OBJECT_ARCHIVE, OBJECT_INITIALIZE) |
| Exportación masiva | Sí — Storage Transfer Service / `gcloud storage` bulk copy-out |
| Detección de borrados | Sí — requires Object Versioning enabled; each object change is tracked by its `generation` number and a real DELETE is observable via a Pub/Sub `OBJECT_DELETE` (or `OBJECT_ARCHIVE` for a version becoming noncurrent) notification |
Destinos populares para Google Cloud Storage
Elige un destino abajo para abrir la página de pipeline lista para usar.
- AAirtable
Destino de hoja relacional para equipos de operaciones y go-to-market.
Ver pipeline - AAmazon Athena
SQL serverless sobre tablas del data lake en S3.
Ver pipeline - AAmazon DynamoDB
Base key-value y documental serverless en AWS.
Ver pipeline - AAmazon QuickSight
BI serverless en AWS con SPICE y analítica embebida.
Ver pipeline - AAmazon Redshift
Almacén a escala petabyte en AWS con Spectrum.
Ver pipeline - AAmazon S3 Data Lake
Zona de aterrizaje en object storage para parquet y snapshots.
Ver pipeline - AApache Superset
BI open source para exploración SQL, gráficos y publicación de dashboards.
Ver pipeline - AArchivos CSV
Destino de archivos planos para exportaciones y compartición ligera.
Ver pipeline - AAzure Data Lake Storage
Almacenamiento ADLS Gen2 para cargas analíticas.
Ver pipeline
Preguntas sobre el conector de Google Cloud Storage
- ¿Qué datos de Google Cloud Storage extrae el conector?
- 6 objetos: buckets, objects, prefixes, object metadata, generations y storage classes. Cada uno se carga en su propia tabla con tipos preservados; los objetos con historial (0) se cargan como append-only.
- ¿La integración de Google Cloud Storage es incremental?
- Sí. Tras la carga inicial completa, cada ejecución lee solo los registros cambiados desde la última marca de agua (updated-at o timestamp del evento) y aplica upsert o append según el objeto.
- ¿A dónde puedo cargar los datos de Google Cloud Storage?
- A 43 destinos: bases de datos relacionales, warehouses, data lakes, hojas de cálculo y herramientas de BI. Cada par Google Cloud Storage → destino tiene su propia página con el mapeo de objetos a tablas.
Otras fuentes de
Otras fuentes de la misma categoría, cada una con su propia página de conector.
Acceso anticipado
Lanza tu pipeline de Google Cloud Storage con onboarding guiado
Únete a la lista de espera para obtener acceso prioritario a integraciones de Google Cloud Storage con setup guiado, mapeo consciente del esquema y sincronización incremental de nivel producción.