Saltar al contenido

Traducción automática — la versión en portugués es la referencia. Ver en portugués

Actualizado el 2026-10-04

Cloud Firestore — conector

Lee los documentos de una colección de Cloud Firestore (valores tipados desempaquetados) y la lista de colecciones raíz, y carga en la capa Bronze.

En esta página (15)

Lea antes: ../conectores.md (mapa de estados) y fichas.md (índice de las fichas).


Qué es#

Lee los documentos de una colección de Cloud Firestore (valores tipados desempaquetados) y la lista de colecciones raíz, y carga en la capa Bronze.

Modos de ingestión soportados:

  • Nós buscamos — Nosotros buscamos los datos en su fuente.

Para qué sirve#

Traer los datos de Cloud Firestore a su datalake y disponibilizarlos a las capas Bronze/Silver/Gold, a los modelos de BI y al asistente de preguntas en lenguaje natural.

Cuándo usar / cuándo no usar#

Usar cuando necesita consolidar esta fuente en el datalake de forma programada, con aislamiento por workspace.

Recuerde que la primera ejecución con credencial real la acompaña nuestro equipo antes de la liberación completa del conector.

Plan y permisos#

  • Plan: núcleo del producto (los conectores forman parte de todos los planes; el límite es el número de fuentes del plan).
  • Acceso: exige workspace activo — con la suscripción en atraso, suspendida o cancelada, la ejecución queda bloqueada.
  • Desactivación: la ejecución de ingestión puede ser desactivada temporalmente (mantenimiento o incidente). Cuando eso sucede, la pantalla informa que el recurso no está disponible en este momento.

Requisitos previos#

  • Una cuenta Cloud Firestore con acceso a los datos que desea ingerir.
  • En el IAM del proyecto que hospeda Firestore, conceda el rol Cloud Datastore Viewer (roles/datastore.viewer) al correo electrónico de la cuenta de servicio. Indique el ID del proyecto y el nombre de la colección a leer (las subcolecciones aceptan la ruta completa, p. ej.: clientes/abc/pedidos). No pedimos su contraseña de Google.

Credenciales#

Forma de autenticación: Compartir con una conta de servicio: usted comparte el recurso (la planilla) con el correo de la cuenta de servicio, con permiso de Lector. No pedimos su contraseña de Google ni acceso a todo su Drive.

Campos sensibles. Están cifrados (AES-256-GCM) y nunca quedan en el config de la conexión, en la definición del pipeline, en el export o en la DAG. Por defecto el valor cifrado queda en la base; mover la credencial de esta conexión al cofre externo de credenciales es una elección explícita, hecha por conexión después de guardar — ver ../../administracao/credenciais-e-rotacao.md.

  • Chave JSON da conta de serviço (serviceAccountJson)

Los secretos nunca se reexponen y pasan por redacción en todo error/log (token crudo, URL-encoded y en JSON).

Campos del formulario#

CampoRótuloTipoObligatorioObservación
projectIdID do projetotextosimID del proyecto que hospeda el Firestore (banco (default)).
colecaoColeçãotextosimColección cuyos documentos se convierten en la tabla Bronze.
saModeConta de serviçoseleçãonãopadrão: plataforma; opções: plataforma / propria; Con la nuestra, usted solo añade el correo de la cuenta de servicio como lector en el proyecto del Firestore.
serviceAccountJson 🔒Chave JSON da conta de serviçosenha/segredonãosecreto (cifrado; cofre externo opcional); aparece quando saMode = propria

Paso a paso#

  1. No menu Dados → Conexões, use Nova conexão.
  2. Elija Cloud Firestore en el catálogo.
  3. Complete los campos del formulario (vea la tabla arriba).
  4. Use Testar conexão. El resultado viene separado en Conectividade, Autenticação y Listagem/leitura — cada uno con OK, Falló, No aplica o No probado. Una capacidad sin prueba propia para este conector aparece como No aplica, y No aplica nunca cuenta como éxito.
  5. Use Salvar conexão. Guardar NO inicia ninguna ingestión.
  6. En la tarjeta de la conexión, use Montar extração (o vaya a Orquestração → Pipelines y use Conectar fonte). El pipeline apunta a la conexión guardada — la credencial no es copiada.
  7. En la revisión, Publicar (agenda desligada) crea la versión 1 sin ejecutar nada. Después, Ativar agenda y Executar agora son acciones separadas.

Ejemplo — prueba de conexión#

Configuración de ejemplo (todos los valores son ficticios; secretos aparecen enmascarados):

text
# Exemplo sintético (valores fictícios — não são credenciais reais)
projectId = meu-projeto-exemplo
colecao = <colecao>
saMode = plataforma

Resultado esperado#

El Testar conexão retorna la lista de tablas/recursos descubiertos. Tras la primera carga, las filas aparecen en la capa Bronze de su workspace, listas para el pipeline.

Límites y costos#

  • Paginación: tope duro por ejecución (default 10.000 páginas / 5.000.000 líneas); guarda anti-loop.
  • Carga SaaS: default batchSize 5.000, maxRows 200.000 por recurso.
  • Volumen estimado: ~0.3 GB/mes (estimación de catálogo, no medición).
  • **

Seguridad#

  • Alcance por workspace: cada cliente lee y escribe solo en su propio datalake (<prefixo>_bronze / _silver / _gold); nunca hay fuga entre workspaces.
  • Secretos cifrados: el material sensible está cifrado con AES-256-GCM antes de ser grabado. El cofre externo de credenciales es opcional y se conecta por conexión; sin él, el valor cifrado queda en la base. Cambiar el valor aquí NO revoca la credencial en el origen.
  • Redacción: todo error/log pasa por la redacción de secretos (crudo, URL-encoded y en JSON).
  • Producción no simula: un camino que caería en mock activa la guardia de producción (falla explícita en lugar de simular éxito).

Errores comunes#

  • Credencial rechazada (401/403) — el proveedor no aceptó la credencial: expirada, revocada o sin el permiso necesario. Reconecte la fuente (la fuente y el historial se preservan; no recree la fuente).
  • Límite de solicitudes (429) — el proveedor pidió esperar. La extracción respeta Retry-After y reintenta; si se repite, espere y reduzca la frecuencia de la agenda.
  • Recurso no encontrado — verifique el identificador del recurso (cuenta, objeto, informe) y los permisos concedidos.
  • Cursor de paginación trabado — la extracción finaliza cuando el cursor de la API no avanza (guarda anti-loop). Si ocurre en ejecuciones seguidas, abra un ticket con el soporte indicando el conector y el recurso.
  • Ruta de registros vacía — la respuesta llegó sin registros en el lugar esperado. Verifique el recurso seleccionado y los filtros (período, cuenta, status) antes de asumir que no hay datos.

Solución de problemas#

  • Use Testar conexão para aislar problemas de credencial/red antes de programar.
  • Acompañe las ejecuciones en la observabilidade por conector (tasa de error, p50/p95, freshness).
  • Un cambio de esquema en el origen se señala por el schema drift (columna nueva = info; columna removida/tipo cambiado = atención).

Relacionados#


Última revisión: 2026-10-04. Ficha generada automáticamente del catálogo de conectores del producto.

Enlaces relacionados