Mejorar los tiempos de procesamiento de los archivos de registro con tablas de búsqueda improve-log-file-processing-times-with-lookup-tables

Coloque los datos en los archivos de registro del informe de rendimiento de entrega en tablas que solo contengan ID. Coloque metadatos no ID en tablas de búsqueda independientes para ayudar a reducir el tamaño del archivo y los tiempos de procesamiento.

Los metadatos de archivo de registro aumentan el tamaño del archivo y el tiempo de procesamiento

Un archivo de registro típico utilizado por Delivery Performance El informe suele contener miles de filas y decenas de columnas. Consiste en ID numéricos e información legible en lenguaje natural como nombres de creativos, anunciantes, pedidos de inserción, etc.

Esta información que no es de ID se denomina metadata (es decir, información acerca de otra información) y se escribe en cada fila del archivo de registro.

Sin embargo, la variable Delivery Performance Este informe funciona principalmente con los ID del archivo de registro. Los metadatos son útiles, pero repetitivos. Aumenta el tamaño del archivo y los tiempos de ingesta de datos.

Reducción del tamaño de archivo y reducción del tiempo de procesamiento con tablas de índice

Para ayudar a mejorar el rendimiento, el archivo de datos principal solo debe contener ID. Coloque los metadatos en una tabla de búsqueda (o índice) independiente y vincule esos registros al archivo principal con una variable clave común a ambas.

Cómo reducen el tamaño de archivo las tablas de búsqueda

Supongamos que tiene un archivo de datos similar al de abajo.

ID de usuario
ID de anuncio
Nombre de publicidad
ID de pedido
Nombre del pedido
ID del anunciante
Nombre del anunciante
1
111
Zapata A
456
Zapatillas
27
Empresa A
2
111
Zapata A
456
Zapatillas
27
Empresa A
3
111
Zapata A
456
Zapatillas
27
Empresa A
4
222
Zapato B
789
Senderismo
14
Empresa B
5
222
Zapato B
789
Senderismo
14
Empresa B

Este es el mismo archivo de registro con los metadatos eliminados. El archivo es más pequeño y fácil de procesar cuando solo consta de ID.

ID de usuario
ID de anuncio
ID de pedido
ID del anunciante
1
111
456
27
2
111
456
27
3
111
456
27
4
222
789
14
5
222
789
14

El archivo de búsqueda siguiente contiene los metadatos y se puede vincular de nuevo al archivo principal con el ID de anuncio. Tenga en cuenta el tamaño también. En lugar de repetir cada anunciante varias veces, solo necesita una referencia para cada uno.

ID de anuncio
Nombre de publicidad
Nombre del pedido
Nombre del anunciante
111
Zapata A
Zapatillas
Empresa A
222
Zapato B
Senderismo
Empresa B

Las API pueden eliminar la necesidad de tablas de búsqueda

Si el sistema de servicio de publicidad tiene una API, es posible que no necesite enviar metadatos en un archivo de búsqueda. Es posible que podamos obtener esa información a través de la API. En este caso, los archivos de registro solo deben contener ID. Trabajaremos con usted para determinar si se pueden obtener metadatos a través de una API.

recommendation-more-help
de293fbf-b489-49b0-8daa-51ed303af695