Habilita una caché de Redis en una instancia alojada por el cliente

Looker mantiene una caché como parte de cada instancia. La caché predeterminada de Looker es una solución de almacenamiento en caché personalizada que se basa en varias capas: en la memoria, en el disco local y en el disco remoto. La base de datos interna de Looker se usa como índice que identifica dónde se encuentran los objetos almacenados en caché en el sistema.

Si alojas tu propia instancia de Looker, puedes configurar Looker para que use una caché de Redis alojada por separado. Una caché de Redis puede proporcionar los siguientes beneficios:

  • Recuperación de caché mejorada: La mejora principal será en tiempos de recuperación de caché coherentes. A medida que aumenta la cantidad de nodos en un clúster de Looker, la comunicación entre nodos puede disminuir el rendimiento de la caché. La nueva arquitectura de caché de Redis consolida la caché, lo que da como resultado tiempos de recuperación de caché coherentes sin importar el tamaño de tu clúster de Looker.
  • Menos carga: Además, la caché está en un nivel independiente de tu instancia de Looker, lo que genera menos carga en ella.
  • Escalabilidad: El uso de una caché de Redis también permite que la caché escale de forma independiente de tu instancia de Looker.

Requisitos

Looker es compatible con las versiones 4.0.x y 5.0.x de Redis. Para usar una caché de Redis con Looker, tu instancia de Redis debe cumplir los siguientes requisitos:

  • Se debe poder acceder a la instancia de Redis desde la instancia de Looker.
  • La instancia de Redis no debe ser un clúster; sin embargo, puedes utilizar una configuración principal/réplica para alta disponibilidad.
  • El tamaño de la caché de Redis debe ser aproximadamente igual al tamaño de la caché de Looker. De forma predeterminada, la caché de Looker es de 2 GB por nodo. Por lo tanto, si tienes un clúster de Looker de tres nodos, se recomienda una caché de Redis de 6 GB.
  • La configuración maxmemory-policy de Redis se debe establecer en volatile-lru.
  • Deberás inhabilitar cualquier autenticación de Redis. Todos los datos almacenados en Redis se encriptan en la instancia de Looker antes de enviarse al servidor de Redis.
  • Puedes usar una opción de Redis alojada en una ElastiCache de AWS o en Google MemoryStore, siempre que no sea una configuración de clúster de Redis.

Además, se requiere el sistema de encriptación de GCM de Looker para usar Redis en Looker. Debes actualizar la encriptación de las instancias que usan encriptación heredada antes de habilitar Redis. Si intentas habilitar Redis sin encriptación de GCM, Looker no comenzará y mostrará un mensaje de error similar al siguiente:

2020-01-23 10:28:44.253 -0800 [ERROR|007e4|cache] :: Must enable GCM encryption to use Redis caching

Para obtener instrucciones sobre cómo actualizar de la encriptación heredada a la encriptación de GCM, consulta la página de documentación sobre cómo migrar a la encriptación de GCM AES-256.

Configura una variable de entorno para habilitar la caché de Redis

Para habilitar la caché de Redis, debes configurar la variable de entorno LOOKER_REDIS_CACHE_DISCOVERY de modo que apunte a la URL de conexión de Redis y, luego, reiniciar por completo tu instancia de Looker, incluidos todos los nodos del clúster. Recomendamos que apagues el servidor por completo, modifiques el entorno y las secuencias de comandos de inicio según sea necesario para incluir la variable de entorno y, luego, inicies todos los nodos.

Para cerrar Looker, ejecuta los siguientes comandos en cada nodo:

cd looker
./looker stop

Por ejemplo, si tienes una instancia de Redis local en el mismo host en el puerto predeterminado, configura la variable de entorno LOOKER_REDIS_CACHE_DISCOVERY de la siguiente manera:

export LOOKER_REDIS_CACHE_DISCOVERY=redis://localhost:6379

Luego, reinicia Looker:

./looker start

Verifica que la caché de Redis esté habilitada

Para determinar si tu caché de Redis está habilitada, busca entradas en tu registro de Looker. Debería haber entradas de registro similares a las siguientes:

2021-06-11 16:54:41.532 +0000 [INFO|007e4|RedissonClientPool] :: Creating client for redis://localhost:6379/
...
2021-06-11 16:54:42.802 +0000 [INFO|007e4|cache] :: Creating render_cache DataShelf: redis