Conector de origem

Conector Amazon S3

Integração do Amazon S3 com bancos de dados, warehouses e ferramentas de BI

Armazenamento de objetos para arquivos, exportações e data lakes. A Datrise captura entidades do Amazon S3 como buckets, objetos, prefixos, metadados de objetos, versões e classes de armazenamento, e entrega modelos normalizados e tipados para reporting em warehouse, atribuicao e fluxos de IA.

A Amazon S3 REST API (ListObjectsV2) + S3 Inventory + Event Notifications autentica com API key, service account, as cargas incrementais usam LastModified, e o fornecedor limita a 3,500 PUT/COPY/POST/DELETE and 5,500 GET/HEAD requests per second per partitioned key prefix, scaling roughly linearly by adding more prefixes.

Dos 6 objetos, 6 sincronizam com upsert por chave primária e 0 como fluxos append-only, então cada execução incremental move só o que mudou desde a última marca d'água. Cada objeto chega na própria tabela (por exemplo `s3_buckets`) com esquema derivado da API do Amazon S3, não de um CSV, em qualquer um dos 43 destinos suportados.

A Datrise está em acesso antecipado: escolha um destino abaixo para ver o pipeline do Amazon S3 e entre na lista de espera para receber o conector com onboarding guiado.

Sync incrementalMapeamento orientado a schema43 destinos disponíveis

Quais dados do Amazon S3 a Datrise extrai

Cada objeto chega na própria tabela tipada. O modo de sync deriva do objeto: objetos de histórico fazem append, o restante faz upsert.

Objeto	Tabela de destino	Modo de sync
buckets	s3_buckets	Upsert por chave primária, incremental por updated-at
objects	s3_objects	Upsert por chave primária, incremental por updated-at
prefixes	s3_prefixes	Upsert por chave primária, incremental por updated-at
object metadata	s3_object_metadata	Upsert por chave primária, incremental por updated-at
versions	s3_versions	Upsert por chave primária, incremental por updated-at
storage classes	s3_storage_classes	Upsert por chave primária, incremental por updated-at

API do Amazon S3: fatos de configuração do conector

Verificado na documentação do fornecedor em 2026-09-02. Valores desconhecidos ficam em branco, não são inventados.

API	Amazon S3 REST API (ListObjectsV2) + S3 Inventory + Event Notifications
Autenticação	API key, service account — Requests are signed with AWS Signature Version 4 using either long-lived IAM user access keys or short-lived credentials from an IAM role/instance profile.
Paginação	token — `ListObjectsV2` returns up to 1,000 keys per call (`MaxKeys`) with `IsTruncated`/`NextContinuationToken`; pass the token back as `continuation-token` to get the next page.
Limite de requisições	3,500 PUT/COPY/POST/DELETE and 5,500 GET/HEAD requests per second per partitioned key prefix, scaling roughly linearly by adding more prefixes
Cursor incremental	LastModified — There is no server-side 'modified since' filter on `ListObjectsV2`; incremental pulls filter the per-object `LastModified` timestamp client-side after listing, or consume S3 Event Notifications for near-real-time capture instead of relisting.
Webhooks	Sim — S3 Event Notifications (ObjectCreated/ObjectRemoved to SNS, SQS, Lambda, or EventBridge)
Exportação em massa	Sim — S3 Inventory (bucket-level object listing exported as CSV, ORC, or Parquet, daily or weekly)
Detecção de exclusões	Sim — requires S3 Versioning; a DELETE writes a delete marker (`x-amz-delete-marker: true`) visible via ListObjectVersions/Inventory, or an `ObjectRemoved:*` event fires in near real time

Referência oficial da API

Compare isto com todas as outras APIs documentadas

Destinos populares para Amazon S3

Escolha um destino abaixo para abrir a pagina de pipeline pronta.

A
Airtable
Destino de planilha relacional para equipes de operações e go-to-market.
Ver pipeline
A
Amazon Athena
SQL serverless sobre tabelas do data lake no S3.
Ver pipeline
A
Amazon DynamoDB
Banco key-value e documental serverless na AWS.
Ver pipeline
A
Amazon QuickSight
BI serverless na AWS com SPICE e analytics embutido.
Ver pipeline
A
Amazon Redshift
Warehouse em escala petabyte na AWS com Spectrum.
Ver pipeline
A
Amazon S3 Data Lake
Zona de landing em object storage para parquet e snapshots.
Ver pipeline
A
Apache Superset
BI open source para exploração SQL, gráficos e publicação de dashboards.
Ver pipeline
A
Arquivos CSV
Destino de arquivos planos para exports e compartilhamento leve.
Ver pipeline
A
Azure Data Lake Storage
Armazenamento ADLS Gen2 para cargas analíticas.
Ver pipeline

Perguntas sobre o conector Amazon S3

Quais dados do Amazon S3 o conector extrai?: 6 objetos: buckets, objects, prefixes, object metadata, versions e storage classes. Cada um vai para a própria tabela com tipos preservados; objetos com histórico (0) são carregados como append-only.
A integração do Amazon S3 é incremental?: Sim. Depois da carga inicial completa, cada execução lê só os registros alterados desde a última marca d'água (updated-at ou timestamp do evento) e aplica upsert ou append conforme o objeto.
Para onde posso carregar os dados do Amazon S3?: Para 43 destinos: bancos relacionais, warehouses, data lakes, planilhas e ferramentas de BI. Cada par Amazon S3 → destino tem a própria página com o mapeamento de objetos para tabelas.

Outras fontes de

Outras fontes da mesma categoria, cada uma com a própria página de conector.

Acesso antecipado

Lance seu pipeline de Amazon S3 com onboarding guiado

Entre na lista de espera para ter acesso prioritário às integrações de Amazon S3 com setup guiado, mapeamento orientado a schema e sync incremental de nível produção.