Conector de origem

Conector Parquet File

Integração do Parquet File com bancos de dados, warehouses e ferramentas de BI

Arquivos Parquet colunares de lakes e exportações. A Datrise captura entidades do Parquet File como row groups, colunas, esquemas, partições, lotes de arquivos e estatísticas de coluna, e entrega modelos normalizados e tipados para reporting em warehouse, atribuicao e fluxos de IA.

Dos 6 objetos, 6 sincronizam com upsert por chave primária e 0 como fluxos append-only, então cada execução incremental move só o que mudou desde a última marca d'água. Cada objeto chega na própria tabela (por exemplo `parquet_file_row_groups`) com esquema derivado da API do Parquet File, não de um CSV, em qualquer um dos 43 destinos suportados.

A Datrise está em acesso antecipado: escolha um destino abaixo para ver o pipeline do Parquet File e entre na lista de espera para receber o conector com onboarding guiado.

Sync incrementalMapeamento orientado a schema43 destinos disponíveis

Quais dados do Parquet File a Datrise extrai

Cada objeto chega na própria tabela tipada. O modo de sync deriva do objeto: objetos de histórico fazem append, o restante faz upsert.

Objeto	Tabela de destino	Modo de sync
row groups	parquet_file_row_groups	Upsert por chave primária, incremental por updated-at
columns	parquet_file_columns	Upsert por chave primária, incremental por updated-at
schemas	parquet_file_schemas	Upsert por chave primária, incremental por updated-at
partitions	parquet_file_partitions	Upsert por chave primária, incremental por updated-at
file batches	parquet_file_file_batches	Upsert por chave primária, incremental por updated-at
column statistics	parquet_file_column_statistics	Upsert por chave primária, incremental por updated-at

Destinos populares para Parquet File

Escolha um destino abaixo para abrir a pagina de pipeline pronta.

A
Airtable
Destino de planilha relacional para equipes de operações e go-to-market.
Ver pipeline
A
Amazon Athena
SQL serverless sobre tabelas do data lake no S3.
Ver pipeline
A
Amazon DynamoDB
Banco key-value e documental serverless na AWS.
Ver pipeline
A
Amazon QuickSight
BI serverless na AWS com SPICE e analytics embutido.
Ver pipeline
A
Amazon Redshift
Warehouse em escala petabyte na AWS com Spectrum.
Ver pipeline
A
Amazon S3 Data Lake
Zona de landing em object storage para parquet e snapshots.
Ver pipeline
A
Apache Superset
BI open source para exploração SQL, gráficos e publicação de dashboards.
Ver pipeline
A
Arquivos CSV
Destino de arquivos planos para exports e compartilhamento leve.
Ver pipeline
A
Azure Data Lake Storage
Armazenamento ADLS Gen2 para cargas analíticas.
Ver pipeline

Perguntas sobre o conector Parquet File

Quais dados do Parquet File o conector extrai?: 6 objetos: row groups, columns, schemas, partitions, file batches e column statistics. Cada um vai para a própria tabela com tipos preservados; objetos com histórico (0) são carregados como append-only.
A integração do Parquet File é incremental?: Sim. Depois da carga inicial completa, cada execução lê só os registros alterados desde a última marca d'água (updated-at ou timestamp do evento) e aplica upsert ou append conforme o objeto.
Para onde posso carregar os dados do Parquet File?: Para 43 destinos: bancos relacionais, warehouses, data lakes, planilhas e ferramentas de BI. Cada par Parquet File → destino tem a própria página com o mapeamento de objetos para tabelas.

Outras fontes de

Outras fontes da mesma categoria, cada uma com a própria página de conector.

Acesso antecipado

Lance seu pipeline de Parquet File com onboarding guiado

Entre na lista de espera para ter acesso prioritário às integrações de Parquet File com setup guiado, mapeamento orientado a schema e sync incremental de nível produção.