Análisis de registros personalizado con SQL: Analizar cualquier registro de texto

Conector de carpetas · Registros personalizados

Convierta cualquier registro de texto que describa en Tablas SQL Puedes consultar en cualquier lugar

Dirige el agente de Query Streams a la carpeta. Este lee los archivos de registro en su propio equipo, crea las tablas en una caché local y las mantiene actualizadas a medida que llegan, cambian o desaparecen archivos. Puedes consultarlas desde Excel, Google Sheets, Nova, Claude o la API REST. No se carga ningún archivo ni se convierte ni edita.

Aproximadamente 15 minutos No se necesita programar Los archivos permanecen en tu red. El plan gratuito lo cubre

Lo que obtendrás al final

La carpeta de registro personalizada es para cualquier registro de texto que las tarjetas integradas no conozcan. Describe el formato una vez, o deja que Nova sugiera uno, y cada línea se convierte en una fila en una tabla llamada eventosHasta que definas las columnas, cada fila es la línea. mensaje etiquetado con el Nombre del archivo De dónde proviene. Las líneas cuyo formato no coincide se guardan en una tabla de líneas sin procesar con su correspondiente explicación, por lo que no se pierde nada. Puedes consultar las filas con SQL desde Excel, Google Sheets o un panel de control, mientras que los archivos permanecen en el equipo que ejecuta el Agente.

Las líneas analizadas aterrizan en eventos del conjunto de archivos, o en el Nombre de la tabla Usted eligió. El agente copia las filas en una caché local en el equipo del agente y las sirve como SQL.

Cada conector de carpeta también te ofrece archivos, eventos_de_archivos, directorios, instantáneas_de_directorio y volúmenesy los conectores de registro añaden cursores de registro con la posición de lectura de cada archivo. Siempre ORDENAR POR hora_del_evento.

Donde justifica su coste:

• Consulta el registro de una aplicación interna en una hoja de cálculo sin necesidad de escribir un analizador sintáctico.
• Visualice en un panel de control los errores de los trabajos por lotes nocturnos a partir de un registro de texto plano.
• Mantén el registro de texto de un dispositivo antiguo con capacidad de búsqueda mediante SQL junto con tus otros datos.

Lo que necesitarás

Una cuenta de Query Streams

Los conectores de carpetas están disponibles en todos los planes, incluido el gratuito. El plan gratuito es permanente, no una prueba que caduca. No hay límite en la cantidad de archivos que puede contener una carpeta.

El Agente, versión 2.6.0 o posterior

Instalado en un equipo que pueda abrir la carpeta: el propio servidor de archivos, un equipo de oficina o la máquina en la que se almacenan los archivos. Un agente anterior muestra las tarjetas de carpeta atenuadas con un Agente 2.6.0+ Insignia. Windows, Mac o Linux.

La ruta de la carpeta, tal como la ve el Agente.

Una ruta local o un recurso compartido de red escrito como \\servidor\recurso compartido\carpeta. The Agent runs as a service, so it cannot see drives you mapped at your login (Z: and friends). On Windows it can sign in to a share with a login you store; on Linux or a Mac, mount the share first (Linux under /mnt o /medios de comunicación, a Mac under /Volumes).

Configúralo en cinco pasos.

1. Instale el agente en un ordenador que pueda abrir la carpeta.

   Iniciar sesión, abrir DescargarInstale el Agente para su sistema en el equipo que pueda abrir cualquier archivo de registro de texto que describa: el servidor de archivos o cualquier equipo siempre activo que pueda acceder al recurso compartido. El proceso tarda un minuto y, a partir de entonces, se inicia automáticamente. Necesita la versión 2.6.0 o posterior; la página de descargas siempre tiene la versión más reciente.

   ¿Por qué un programa pequeño en lugar de un controlador? El agente se instala una sola vez en Windows, Mac o Linux (aproximadamente 85 MB en Windows y algo más de 100 MB en Mac y Linux). Abre una conexión cifrada saliente a Query Streams, siendo esta la única ruta de red que necesita: no requiere abrir ningún puerto de entrada ni usar VPN. Lee la carpeta donde se encuentra, por lo que los archivos permanecen en su lugar y solo las filas que devuelve una consulta se transmiten por internet al complemento, navegador o cliente de IA en su equipo.

   La página de descarga muestra Su clave de accesoPégalo en el Agente cuando te lo pida y espera a que aparezca la insignia. Conectado a flujos de consultaEso es lo único que debes hacer en el ordenador del agente; todo lo demás ocurre en tu navegador.

   Si lo deseas, aquí tienes las guías completas: Ventanas, Impermeable, Linux.

2. Apúntalo a cualquier registro de texto que describas.

   Volver a abrir el navegador Datos → Agentes de datos, busque el Agente que acaba de instalar y haga clic en su Agregar conector botón. Abrir el Archivos y carpetas pastilla y elige la Carpeta de registro personalizada tarjeta. ¿No estás seguro de qué tarjeta encaja? Elige Archivos en una carpeta En cambio, el agente analiza la carpeta, indica su contenido en una página de "Lo que encontramos" y abre la tarjeta correspondiente, que ya viene rellenada.

   El mago corre Carpetas → Comprobar → Configuración → Dominio → Revisar. En Carpetas:

   Carpetas raíz

   One path per line, as the Agent’s computer sees it. Each folder shows a status (reachable, denied, missing, unreachable, credentials invalid or not mounted) as soon as you add it. On a Windows Agent a share that needs a login gets one from the folder’s Credential column, stored once per server; on Linux or a Mac, mount the share first.

   Escanear subcarpetas, Profundidad máxima

   Encendido y 8 niveles, por defecto.

   Incluir patrones, excluir patrones

   ¿Qué archivos cuentan? El patrón de inclusión comienza con el glob correcto para esta tarjeta. Un conector lee un tipo de archivo: una carpeta con CSV. y Los archivos Parquet constan de dos conectores en la misma carpeta, uno por tipo.

   Siga los enlaces simbólicos y las uniones.

   Desactivado por defecto. El agente no sigue los accesos directos ni los marcadores de posición en la nube a menos que actives esta opción.

   En el Portal, abra el Agente que puede ver la carpeta y haga clic Agregar conector. Bajo Archivos y carpetas elegir Carpeta de registro personalizadaUna vez creado, aparece en la lista de conectores como Archivos de registro.

   • Agregue la carpeta debajo Carpetas raíz. Escriba un recurso compartido de red como \\servidor\recurso compartido\carpeta, no como una letra de unidad asignada.
   • Colocar Incluir patrones para que coincidan con sus archivos. Los valores predeterminados del controlador de registro son **/*.registro y **/*.TXT.
   • Describe el formato. La carpeta de registro personalizada es la única tarjeta de registro que puede editar: indique dónde se ubica la marca de tiempo en una línea y qué partes se convierten en columnas. O haga clic Deja que Nova te sugiera un formato. que tiene un límite diario.
   • Nombre de la tabla es opcional y por defecto es eventos.
   • Relleno (días) tiene 30 años. Conservar eventos durante N días Conserva todo a menos que lo configures.

   Si su formato es común, la lista también indica: "¿Necesita un tipo de registro que no aparece en la lista? Abra una solicitud de soporte y lo agregaremos en pocos días".

3. Comprueba lo que construirá

   En Controlar El agente lee una muestra de hasta 64 archivos y muestra lo que creará. Todavía no se ha creado nada. El botón dice: Probar la conexión hasta que exista un veredicto, entonces Siguiente; Inténtalo de nuevo Vuelve a ejecutar la muestra después de que hayas cambiado algo. Verás uno de cuatro encabezados:

   Listo para crear

   Todos los archivos muestreados encajan. Los chips que se encuentran debajo indican cuántas carpetas eran accesibles, cuántos archivos y filas hay, y qué tablas existirán.

   Listo, con notas

   Algunos archivos se apartarán o se rechazará la detección de diseño. Un banner ámbar indica exactamente cuál: “{n} de {m} archivo(s) se apartarán” con un Mostrar qué archivos y por qué lista, y “Puedes crearlo de todos modos; el conector seguirá comprobando e informará del motivo en su pestaña Manifiesto”.

   Estos archivos no son de este tipo de registro.

   La muestra no se analizó como el formato de registro de esta tarjeta. Compruebe que ha seleccionado la tarjeta correcta o utilice la Carpeta de registro personalizada tarjeta y describir el formato.

   Un rechazo o archivos reservados nunca te bloquean: haz clic SiguienteFinaliza el asistente y corrige los archivos que falten más tarde. Solo un agente sin conexión o una carpeta faltante detiene el asistente.

   En Controlar, el agente lee una muestra y muestra lo que construirá. Aún no se ha creado nada. Si la muestra no se ajusta al formato que describió, el encabezado dice Estos archivos no son seguido del tipo, y un banner ámbar dice “El análisis del esquema fue rechazado:” con el motivo. Abrir Mostrar qué archivos y por qué para ver el archivo y la cuadrícula de motivos. Ajuste el formato o ajuste Incluir patrones de modo que los archivos sueltos se dejan fuera, entonces Inténtalo de nuevoTambién puedes crearlo de todos modos. El conector sigue volviendo a comprobar e informa del motivo en su Manifiesto pestaña y líneas que no coinciden aterrizan en eventos_raw_lines donde puedes leerlos y perfeccionar el formato.

4. Elige con qué frecuencia escanea y luego créalo.

   Los valores predeterminados en Configuración Adecuado para una carpeta que recibe pocos archivos al día. Cuatro que quizás quieras cambiar:

   Intervalo de escaneo

   Cada hora Por defecto, puede elegir entre cada 5 minutos o diariamente. Cada análisis compara el tamaño y la fecha de modificación para encontrar archivos nuevos, modificados o desaparecidos.

   Monitorear la carpeta para detectar cambios (casi en tiempo real)

   Desactivado por defecto. Activado, el agente reacciona en segundos en discos locales; en recursos compartidos de red, se realiza con el mejor esfuerzo posible y el análisis programado sigue siendo la garantía. Período tranquilo (15 segundos) espera a que termine de escribirse un archivo.

   Actualiza la página antes de responder a una consulta.

   Desactivado por defecto. Activado, una consulta vuelve a escanear primero cuando el último escaneo es anterior a la Ventana de estancamiento (60 segundos), esperando como máximo el Límite de espera de la consulta (5 segundos). Se aplica a personas y complementos, no a sondeos de alertas.

   Cuando un archivo desaparece

   Deja caer sus filas por defecto, o Conservar filas, marcar como eliminadas (lápida). El Relación de guarda de Vanish (0.5) rechaza un escaneo que pierde más de la mitad de los archivos a la vez y mantiene el inventario anterior, que es como se ve un recurso compartido sin conexión.

   Luego elige el Ámbito de los datos las filas cuentan contra, verifique Revisar y haga clic Crear conector. El primer escaneo comienza de inmediato. El conector Manifiesto La pestaña muestra lo que construyó y cualquier archivo que haya guardado.

5. Mira tus mesas

   Abra el conector: el Manifiesto La pestaña enumera las tablas que construyó y la Archivos El cuadro de diálogo muestra todos los archivos de registro con su estado. Generador de consultas Las mismas mesas se encuentran debajo de la conjunto de archivos Esquema. Tres consultas que funcionan desde el primer día:

   Últimas líneas con el archivo del que proceden

   SELECCIONAR event_time, file_name, message DE fileset.events ORDENAR POR event_time DESC LIMIT 100

   Los 100 registros más recientes de todos los archivos de la carpeta. Funciona antes de definir cualquier columna.

   Líneas que mencionan un error, por archivo, en el último día.

   SELECCIONAR nombre_archivo, CONTAR(*) COMO errores DE conjunto_archivos.eventos DONDE mensaje SIGUE '%error%' Y hora_evento >= ahora() - INTERVALO 1 DÍA AGRUPAR POR nombre_archivo ORDENAR POR errores DESC LIMITAR 100

   Una coincidencia de texto en mensajeUna vez que su formato defina una columna de nivel, filtre por esa columna en su lugar.

   Líneas cuyo formato no coincidía, por la razón

   SELECCIONAR razón, CONTAR(*) COMO líneas, MÍN(línea) COMO ejemplo DESDE fileset.events_raw_lines AGRUPAR POR razón ORDENAR POR líneas DESC

   Lecturas eventos_raw_linesUtilice los ejemplos para refinar el formato y, a continuación, guarde el conector y las nuevas muestras del agente.

   Cada conector de carpeta también sirve a las mismas tablas de contabilidad, todas en el conjunto de archivos esquema:

   Mesa	Lo que contiene
   archivos	Cada archivo que se encuentra actualmente en la carpeta: ruta, nombre, extensión, tamaño, fechas de creación y modificación, primera y última vez que se vio. Una vista general archivos_actual, que también guarda archivos que han desaparecido.
   eventos_de_archivos	El historial de cambios: una fila por archivo que apareció, era modificado, desapareció, fue apartado (deriva) o era rechazado, con el tiempo en evento_en, cómo se notó en detectado_por y la razón en detalle.
   directorios, instantáneas_de_directorio, volúmenes	Cantidad y tamaño de las carpetas, cómo crecieron y en qué discos o carpetas compartidas se encuentran sus archivos raíz.
   _archivo_fuente, _row_id	Dos columnas en cada fila de datos: de qué archivo proviene la fila y un ID de fila estable dentro de ese archivo. Agrupar por _archivo_fuente para comparar archivos.

Reaching a file on a network share

The Agent opens files as a background service, not as you, so a file on another computer needs one extra step. Which step depends on the computer the Agent runs on.

If the test cannot get to the share, look for these words in its result: unreachable means the Agent’s computer got no answer from the server. On Linux or a Mac, not mounted means the share still has to be mounted, and that message includes the exact mount command for your server.

When a folder is not reachable

Every folder on the Carpetas step shows a status as soon as you add it. Hover the status to read the Agent’s own message; its first words say which case it is.

Úsalo en todas partes

El conector es una fuente de datos como cualquier otra en Query Streams. Guarde una consulta una vez en el Generador de consultas (el dialecto es DuckDB) y úselo desde:

Excel

El complemento Transmitir una consulta Inserta las filas en una hoja de cálculo y las vuelve a ejecutar con un clic. Ejecutar SQL en Excel.

Hojas de cálculo de Google

El Transmisión de consultas El complemento ocupa la pestaña que usted seleccione. Power Query para Google Sheets.

Claude, Cursor y otros clientes de IA

A través del servidor MCP de Query Streams, Claude conoce el modelo de carpetas, incluyendo _archivo_fuente y eventos_de_archivos. Registros personalizados con Claude a través de MCP.

API REST

Cualquier consulta guardada se convierte en un punto final de solo lectura con su propia clave, en todos los planes. API REST de registros personalizados.

Nova

Pregunte en lenguaje sencillo sobre el plan de negocios; Nova conoce cada carpeta, tabla y columna gracias a sus descripciones integradas.

Automatizaciones

Sincroniza las filas con Airtable, Smartsheet, Baserow, SeaTable o una hoja de cálculo según un cronograma. Guías de automatización.

Las tablas de carpetas también se unen a sus otros conectores: una consulta federada puede coincidir _archivo_fuente nombres o identificadores de pedidos en cualquier registro de texto que describa contra una base de datos en el mismo Agente.

Cómo se muestran los archivos nuevos, modificados y eliminados

Archivos que se apartan

En el paso de verificación y en la pestaña Manifiesto aparecen tres palabras. Significan cosas diferentes:

Apartado (estacionado)

El archivo no coincide con el diseño fijado, o bien es ilegible, está roto, bloqueado o cubierto por una tapa. Es un proceso de todo o nada para cada archivo: un archivo aparcado no aporta ninguna fila. eventos_de_archivos registra un deriva fila cuyo detalle Se especifica el nombre del archivo y de la columna. El archivo se omite mientras su tamaño y fecha de modificación permanezcan iguales, y se vuelve a intentar en cuanto cambien.

Ilegible

El agente no pudo abrir ni analizar el archivo debido a su tipo: no era un libro de trabajo real, estaba bloqueado por otro programa, era un marcador de posición en la nube o contenía bytes indecodificables. Se detiene automáticamente y el resto de la carpeta continúa. Solo una carpeta sin archivos legibles rechaza todo el conjunto.

Rechazado

El agente no pudo fijar ningún diseño, por ejemplo, porque los archivos no coinciden en el tipo de columna. Aún no existe ninguna tabla de datos. eventos_de_archivos obtiene un rechazado discusión con la razón en detalley el Agente vuelve a intentarlo en cada escaneo hasta que se fija un diseño. Corrija o excluya el archivo que menciona y el mensaje desaparecerá.

Dónde mirar: el banner ámbar en Controlar (Mostrar qué archivos y por qué), el conector Manifiesto pestaña después, y para los conectores de registro el Archivos diálogo, que enumera los archivos estacionados con el motivo en último errorEn SQL: SELECCIONAR ruta_relativa, tipo_evento, detalle DE fileset.files_events DONDE tipo_evento EN ('deriva','refused') ORDENAR POR event_at DESC.

Límites que vale la pena conocer

No hay límite de carpetas ni de archivos en el plan. Las filas se contabilizan en su Data Realm como en cualquier otro conector. Valores predeterminados que puede aumentar o disminuir en el conector:

Límites de contenido, que almacenan un archivo en lugar de truncarlo: 2.000.000 de filas o 512 MiB por archivo, 10.000.000 de filas o 2 GiB por escaneo. Una carpeta puede contener como máximo 25 diseños distintos en Una mesa por diseño modo.

Preguntas que hace la gente

• Sistema de archivos
• Carpeta CSV
• Carpeta de parquet
• Carpeta de Excel
• Carpeta SQLite
• Carpeta JSONL
• CSV de múltiples registros
• Registros de máquinas
• Registros del servidor web
• Registros de contenedores
• Registros de la aplicación
• Registros del sistema