Manual File Import | Collect
Capabilities
| Capability | Description |
|---|---|
| File types | CSV, JSON, Parquet |
| Maximum file size | 250MB |
If your file falls outside these limits, the recommended approach is to place it in a storage service such as AWS S3 or Google Drive/Sheets and then create a pipeline from that source.
With manual import, the source is your local device and there is no recurring schedule. The collection runs once.
How to Import
Open Import files in the Collect menu to start.
É necessário preencher as configurações do arquivo que está sendo importado:
Tipos de arquivos aplicáveis ao campo | Nome do campo | Descrição | Exemplo |
|---|---|---|---|
CSV, JSON | Tipo de codificação | Padrão do conjunto de caracteres | UTF-8: |
CSV | Separador | Caractere delimitador das colunas no arquivo | ";" ou "," ou "tab" ou "/" |
CSV | Ativar cabeçalho | O arquivo possui cabeçalho? |
📘
No caso do CSV, a tabela será catalogada adicionando a coluna _processing_timestamp. Dessa forma, em coletas incrementais que os valores sejam sobrescritos, será possível coletar o último valor do registro. Além disso, a coluna com a data de quando o registro foi escrito ajudará nas análises dos dados.