DatriseETL con IA

Conector de origen

Conector de Amazon S3

Integración de Amazon S3 con bases de datos, warehouses y herramientas de BI

Almacenamiento de objetos para archivos, exportaciones y data lakes. Datrise captura entidades de Amazon S3 como buckets, objetos, prefijos, metadatos de objetos, versiones y clases de almacenamiento, y luego entrega modelos normalizados y tipados para reporting en warehouse, atribución y flujos de IA.

La Amazon S3 REST API (ListObjectsV2) + S3 Inventory + Event Notifications se autentica con API key, service account, las cargas incrementales usan LastModified, y el proveedor limita a 3,500 PUT/COPY/POST/DELETE and 5,500 GET/HEAD requests per second per partitioned key prefix, scaling roughly linearly by adding more prefixes.

De los 6 objetos, 6 se sincronizan con upsert por clave primaria y 0 como flujos append-only, de modo que cada ejecución incremental solo mueve lo que cambió desde la última marca de agua. Cada objeto llega a su propia tabla (por ejemplo `s3_buckets`) con el esquema derivado de la API de Amazon S3, no de un CSV, en cualquiera de los 43 destinos soportados.

Datrise está en acceso anticipado: elige un destino abajo para ver el pipeline de Amazon S3 y únete a la lista de espera para recibir el conector con onboarding guiado.

Sincronización incrementalMapeo consciente del esquema43 destinos disponibles

Qué datos de Amazon S3 extrae Datrise

Cada objeto llega a su propia tabla tipada. El modo de sync se deriva del objeto: los objetos de historial se anexan, el resto se actualiza con upsert.

ObjetoTabla de destinoModo de sync
bucketss3_bucketsUpsert por clave primaria, incremental por updated-at
objectss3_objectsUpsert por clave primaria, incremental por updated-at
prefixess3_prefixesUpsert por clave primaria, incremental por updated-at
object metadatas3_object_metadataUpsert por clave primaria, incremental por updated-at
versionss3_versionsUpsert por clave primaria, incremental por updated-at
storage classess3_storage_classesUpsert por clave primaria, incremental por updated-at

API de Amazon S3: datos de configuración del conector

Verificado contra la documentación del proveedor el 2026-09-02. Los valores desconocidos se dejan en blanco, no se inventan.

APIAmazon S3 REST API (ListObjectsV2) + S3 Inventory + Event Notifications
AutenticaciónAPI key, service account — Requests are signed with AWS Signature Version 4 using either long-lived IAM user access keys or short-lived credentials from an IAM role/instance profile.
Paginacióntoken — `ListObjectsV2` returns up to 1,000 keys per call (`MaxKeys`) with `IsTruncated`/`NextContinuationToken`; pass the token back as `continuation-token` to get the next page.
Límite de peticiones3,500 PUT/COPY/POST/DELETE and 5,500 GET/HEAD requests per second per partitioned key prefix, scaling roughly linearly by adding more prefixes
Cursor incrementalLastModified — There is no server-side 'modified since' filter on `ListObjectsV2`; incremental pulls filter the per-object `LastModified` timestamp client-side after listing, or consume S3 Event Notifications for near-real-time capture instead of relisting.
WebhooksSí — S3 Event Notifications (ObjectCreated/ObjectRemoved to SNS, SQS, Lambda, or EventBridge)
Exportación masivaSí — S3 Inventory (bucket-level object listing exported as CSV, ORC, or Parquet, daily or weekly)
Detección de borradosSí — requires S3 Versioning; a DELETE writes a delete marker (`x-amz-delete-marker: true`) visible via ListObjectVersions/Inventory, or an `ObjectRemoved:*` event fires in near real time

Referencia oficial de la API

Compara esto con todas las demás APIs documentadas

Destinos populares para Amazon S3

Elige un destino abajo para abrir la página de pipeline lista para usar.

  • A
    Airtable

    Destino de hoja relacional para equipos de operaciones y go-to-market.

    Ver pipeline
  • A
    Amazon Athena

    SQL serverless sobre tablas del data lake en S3.

    Ver pipeline
  • A
    Amazon DynamoDB

    Base key-value y documental serverless en AWS.

    Ver pipeline
  • A
    Amazon QuickSight

    BI serverless en AWS con SPICE y analítica embebida.

    Ver pipeline
  • A
    Amazon Redshift

    Almacén a escala petabyte en AWS con Spectrum.

    Ver pipeline
  • A
    Amazon S3 Data Lake

    Zona de aterrizaje en object storage para parquet y snapshots.

    Ver pipeline
  • A
    Apache Superset

    BI open source para exploración SQL, gráficos y publicación de dashboards.

    Ver pipeline
  • A
    Archivos CSV

    Destino de archivos planos para exportaciones y compartición ligera.

    Ver pipeline
  • A
    Azure Data Lake Storage

    Almacenamiento ADLS Gen2 para cargas analíticas.

    Ver pipeline

Preguntas sobre el conector de Amazon S3

¿Qué datos de Amazon S3 extrae el conector?
6 objetos: buckets, objects, prefixes, object metadata, versions y storage classes. Cada uno se carga en su propia tabla con tipos preservados; los objetos con historial (0) se cargan como append-only.
¿La integración de Amazon S3 es incremental?
Sí. Tras la carga inicial completa, cada ejecución lee solo los registros cambiados desde la última marca de agua (updated-at o timestamp del evento) y aplica upsert o append según el objeto.
¿A dónde puedo cargar los datos de Amazon S3?
A 43 destinos: bases de datos relacionales, warehouses, data lakes, hojas de cálculo y herramientas de BI. Cada par Amazon S3 → destino tiene su propia página con el mapeo de objetos a tablas.

Otras fuentes de

Otras fuentes de la misma categoría, cada una con su propia página de conector.

Acceso anticipado

Lanza tu pipeline de Amazon S3 con onboarding guiado

Únete a la lista de espera para obtener acceso prioritario a integraciones de Amazon S3 con setup guiado, mapeo consciente del esquema y sincronización incremental de nivel producción.