Saltar al contenido

Traducción automática — la versión en portugués es la referencia. Ver en portugués

Actualizado el 2026-10-04

Elasticsearch — conector

Lee los documentos de un índice de Elasticsearch (hasta 10 000 por sincronización) y la lista de índices del clúster, y carga en la capa Bronze.

En esta página (15)

Lea antes: ../conectores.md (mapa de estados) y fichas.md (índice de las fichas).


Qué es#

Lee los documentos de un índice de Elasticsearch (hasta 10 000 por sincronización) y la lista de índices del clúster, y carga en la capa Bronze.

Modos de ingestión soportados:

  • Nós buscamos — Nós buscamos los datos en su fuente.

Para qué sirve#

Traer los datos de Elasticsearch a su datalake y ponerlos a disposición en las capas Bronze/Silver/Gold, en los modelos de BI y en el asistente de preguntas en lenguaje natural.

Cuándo usar / cuándo no usar#

Use cuando necesita consolidar esta fuente en el datalake de forma programada, con aislamiento por workspace.

Recuerde que la primera ejecución con credencial real la acompaña nuestro equipo antes de la liberación completa del conector.

Plan y permisos#

  • Plano: núcleo del producto (los conectores forman parte de todos los planes; el límite es el número de fuentes del plan).
  • Acceso: requiere workspace activo — con la suscripción en mora, suspendida o cancelada, la ejecución queda bloqueada.
  • Desconexión: la ejecución de ingestión puede ser desactivada temporalmente (mantenimiento o incidente). Cuando esto ocurre, la pantalla informa que el recurso está indisponible en ese momento.

Requisitos previos#

  • Una cuenta Elasticsearch con acceso a los datos que desea ingerir.
  • Indique la URL del clúster (https://host:9200 o el endpoint de Elastic Cloud), el nombre del índice a leer y un usuario con el privilegio read en el índice (y monitor para listar índices). La contraseña se cifra (AES-256-GCM) y nunca se muestra de nuevo. Cada índice lee como máximo 10 000 documentos por sincronización en este Preview.

Credenciales#

Forma de autenticación: Usuario y contraseña (o key y secret) en autenticación Basic.

Campos sensibles. Están cifrados (AES-256-GCM) y nunca quedan en el config de la conexión, en la definición del pipeline, en el export ni en la DAG. Por defecto el valor cifrado queda en la base; mover la credencial de esta conexión al cofre externo de credenciales es una elección explícita, hecha por conexión después de guardar — ver ../../administracao/credenciais-e-rotacao.md.

  • Senha (senha) — Contraseña del usuario nativo (o el secreto de una API key en Basic).

Los secretos nunca se reexhiben y pasan por redacción en cualquier error/log (token crudo, URL-encoded y en JSON).

Campos del formulario#

CampoEtiquetaTipoObligatorioObservación
urlClusterURL del clústertextosíDirección HTTP(S) del clúster o del deployment en Elastic Cloud.
indiceÍndicetextosíNombre del índice (o alias) cuyos documentos pasan a la tabla Bronze.
usuarioUsuariotextosí—
senha 🔒Contraseñasenha/segredosísecreto (cifrado; cofre externo opcional); Contraseña del usuario nativo (o el secreto de una API key en Basic).

Paso a paso#

  1. No menú Dados → Conexões, use Nova conexão.
  2. Elija Elasticsearch en el catálogo.
  3. Complete los campos del formulario (vea la tabla arriba).
  4. Use Testar conexão. El resultado viene separado en Conectividade, Autenticação y Listagem/leitura — cada uno con OK, Falló, No aplica o No probado. Una capacidad sin prueba propia para este conector aparece como No aplica, y No aplica nunca cuenta como éxito.
  5. Use Salvar conexão. Guardar NO inicia ninguna ingestión.
  6. En la tarjeta de la conexión, use Montar extração (o vaya a Orquestração → Pipelines y use Conectar fonte). El pipeline apunta a la conexión guardada — la credencial no se copia.
  7. En la revisión, Publicar (agenda desligada) crea la versión 1 sin ejecutar nada. Luego, Ativar agenda y Executar agora son acciones separadas.

Ejemplo — prueba de conexión#

Configuración de ejemplo (todos los valores son ficticios; los secretos aparecen enmascarados):

text
# Exemplo sintético (valores fictícios — não são credenciais reais)
urlCluster = <urlCluster>
indice = <indice>
usuario = <usuario>
senha = •••••• (cifrado — nunca exibido)

Resultado esperado#

El Testar conexão devuelve la lista de tablas/recursos descubiertos. Tras la primera carga, las filas aparecen en la capa Bronze de su workspace, listas para el pipeline.

Límites y costos#

  • Paginación: techo duro por ejecución (por defecto 10.000 páginas / 5.000.000 filas); guarda anti-loop.
  • Carga SaaS: por defecto batchSize 5.000, maxRows 200.000 por recurso.
  • Volumen estimado: ~0.5 GB/mes (estimación de catálogo, no medición).
  • **

Seguridad#

  • Ámbito por workspace: cada cliente lee y escribe solo en su propio datalake (<prefixo>_bronze / _silver / _gold); nunca hay filtración entre workspaces.
  • Secretos cifrados: el material sensible se cifra con AES-256-GCM antes de ser grabado. El cofre externo de credenciales es opcional y se activa por conexión; sin él, el valor cifrado queda en la base. Cambiar el valor aquí NO revoca la credencial en la fuente.
  • Redacción: todo error/log pasa por redacción de secretos (crudo, URL-encoded y en JSON).
  • Producción no simula: un camino que caería en mock activa la guarda de producción (falla explícita en lugar de simular éxito).

Errores comunes#

  • Credencial rechazada (401/403) — el proveedor no aceptó la credencial: expirada, revocada o sin el permiso necesario. Reconecte la fuente (la fuente y el historial se preservan; no recree la fuente).
  • Límite de solicitudes (429) — el proveedor pidió esperar. La extracción respeta Retry-After y reintenta; si se repite, espere y reduzca la frecuencia de la agenda.
  • Recurso no encontrado — verifique el identificador del recurso (cuenta, objeto, reporte) y los permisos concedidos.
  • Cursor de paginación atascado — la extracción termina cuando el cursor de la API no avanza (guarda anti-loop). Si ocurre en ejecuciones seguidas, abra un ticket con soporte indicando el conector y el recurso.
  • Ruta de registros vacía — la respuesta llegó sin registros en la ubicación esperada. Verifique el recurso seleccionado y los filtros (período, cuenta, estado) antes de asumir que no hay datos.

Solución de problemas#

  • Use Testar conexão para aislar problemas de credencial/red antes de programar.
  • Siga las ejecuciones en la observabilidad por conector (tasa de error, p50/p95, freshness).
  • Un cambio de esquema en la fuente se señala por el schema drift (columna nueva = info; columna removida/tipo cambiado = atención).

Relacionados#


Última revisión: 2026-10-04. Ficha generada automáticamente del catálogo de conectores del producto.

Enlaces relacionados