Los archivos llegan a Snowflake a través de un área de almacenamiento, un lugar donde esperan a ser cargados:
- Áreas de almacenamiento internas: tu área de usuario
@~, el área de una tabla @%orders o un área con nombre @landing. Sube archivos a ellas con PUT desde SnowSQL o un controlador.
- Áreas de almacenamiento externas: apuntan a almacenamiento en la nube de tu propiedad: S3, Google Cloud Storage o Azure.
COPY INTO carga los archivos de un área de almacenamiento en una tabla:
COPY INTO raw.orders
FROM @landing/orders/
FILE_FORMAT = (TYPE = CSV SKIP_HEADER = 1)
ON_ERROR = CONTINUE;
Un formato de archivo describe los archivos: CSV, JSON, Parquet, Avro, ORC o XML. ON_ERROR determina qué ocurre con las filas incorrectas; el valor predeterminado de COPY detiene toda la carga. Snowflake recuerda qué archivos ha cargado durante 64 días y los omite, a menos que añadas FORCE = TRUE.
Para los archivos que llegan durante todo el día, Snowpipe carga cada uno en cuestión de minutos desde su llegada, con recursos de cómputo sin servidor. Esta lección trata las decisiones de carga. Las siguientes lecciones sobre áreas de almacenamiento y COPY usan archivos locales de prueba y comprueban las filas cargadas.
Un área de almacenamiento provisional externa sobre un bucket de S3 y, a continuación, los archivos que contiene a la espera de cargarse.