Casos de uso de indexación Oak-run.jar

AEM Oak-run admite la indexación de casos de uso en la línea de comandos sin tener que orquestar la ejecución de estos casos de uso a través de la consola JMX de la consola de la interfaz de usuario de JMX.

Las ventajas generales de utilizar el enfoque de comandos oak-run.jar index para administrar índices Oak son las siguientes:

  1. AEM El comando de índice Oak-run proporciona un nuevo conjunto de herramientas de indexación para la versión 6.4 de.
  2. Oak-run reduce el tiempo de reindexación, lo que reduce los tiempos de reindexación en repositorios más grandes.
  3. AEM Oak-run reduce el consumo de recursos durante la reindexación en la, lo que resulta en un mejor rendimiento general del sistema.
  4. Oak-run proporciona una reindexación fuera de banda, lo que admite situaciones en las que la producción debe estar disponible y no puede tolerar el mantenimiento o el tiempo de inactividad que, de lo contrario, se requiere para reindexar.

Las secciones siguientes proporcionarían comandos de ejemplo. El comando de índice Oak-run admite todas las configuraciones de NodeStore y BlobStore. Los ejemplos que se proporcionan a continuación giran en torno a las configuraciones que tienen FileDataStore y SegmentNodeStore.

Caso de uso 1: Comprobación de la coherencia del índice

Este es un caso de uso relacionado con la corrupción del índice. A veces, no era posible determinar cuál de los índices está dañado. Por lo tanto, el Adobe ha proporcionado herramientas que:

  1. Realiza comprobaciones de coherencia de índices en todos los índices y proporciona un informe sobre los índices que son válidos y los que no lo son;
  2. AEM La herramienta se puede utilizar incluso si no se puede acceder a la herramienta a la que se tiene acceso;
  3. Es fácil de usar.

La comprobación de índices corruptos se puede realizar mediante --index-consistency-check operación:

java -jar oak-run*.jar index --fds-path=/path/to/datastore  /path/to/segmentstore/ --index-consistency-check

Esto genera un informe en indexing-result/index-consistency-check-report.txt. Consulte a continuación un ejemplo de informe:

Valid indexes :
        - /content/oak:index/enablementResourceName
        - /oak:index/cqProjectLucene
        - /oak:index/cqTagLucene
        - /oak:index/lucene
        - /oak:index/ntBaseLucene
        - /oak:index/socialLucene
    Invalid indexes :
        - /oak:index/atDamIndex
        - /oak:index/atIndex
        - /oak:index/cqPageLucene
        - /oak:index/damAssetLucene
        - /oak:index/groups
        - /oak:index/slingeventJob
        - /oak:index/users
        - /oak:index/workflowDataLucene
    Ignored indexes as these are not of type lucene:
        - /oak:index/acPrincipalName
        - /oak:index/active

Ventajas

Soporte técnico y el administrador del sistema ahora pueden utilizar esta herramienta para determinar rápidamente qué índices están dañados y luego reindexarlos.

Caso de uso 2: Estadísticas de índice

Para diagnosticar algunos de los casos relacionados con el Adobe de rendimiento de las consultas, a menudo se requería una definición de índice existente, estadísticas relacionadas con el índice de la configuración del cliente. Hasta ahora, esta información estaba dispersa en múltiples recursos. Para facilitar la resolución de problemas, Adobe ha creado herramientas que:

  1. Volcar toda la definición de índice presente en el sistema en un solo archivo JSON;

  2. Volcar estadísticas importantes de los índices existentes;

  3. Volcar contenido de índice para análisis sin conexión;

  4. AEM Se podrá utilizar incluso si no se puede acceder a la

Las operaciones anteriores ahora se pueden realizar mediante los siguientes comandos de índice de operaciones:

  • --index-info - Recopila y descarga varias estadísticas relacionadas con los índices

  • --index-definitions - Recopila y volca definiciones de índice

  • --index-dump : volca el contenido del índice

Vea a continuación un ejemplo de cómo funcionan los comandos en la práctica:

java -jar oak-run*.jar index --fds-path=/path/to/datastore  /path/to/segmentstore/ --index-info --index-definitions --index-dump

Los informes se generarían en indexing-result/index-info.txt y indexing-result/index-definitions.json

Además, se proporcionan los mismos detalles a través de la consola web y formarían parte del zip de volcado de configuración. Se puede acceder a ellos en la siguiente ubicación:

https://serverhost:serverport/system/console/status-oak-index-defn

Ventajas

Esta herramienta permite recopilar rápidamente todos los detalles necesarios relacionados con los problemas de indexación o consulta, así como reducir el tiempo empleado en extraer esta información.

Caso de uso 3: Reindexación

Según la variable escenarios, a veces, se debe realizar una reindexación. Actualmente, la reindexación se realiza configurando la variable reindex marcar como true en el nodo de definición de índice mediante CRXDE o mediante la interfaz de usuario del Administrador de índices. Una vez establecido el indicador, la reindexación se realiza de forma asíncrona.

Algunos puntos a tener en cuenta sobre la reindexación:

  • La reindexación es mucho más lenta en DocumentNodeStore configuraciones comparadas con SegmentNodeStore configuraciones en las que todo el contenido es local;

  • Con el diseño actual, mientras se produce la reindexación, el indexador asíncrono se bloquea y todos los demás índices asíncronos quedan obsoletos y no se actualizan durante la indexación. Debido a esto, si el sistema está en uso, es posible que los usuarios no vean resultados actualizados;

  • AEM La reindexación implica el recorrido de todo el repositorio, lo que puede suponer una carga alta en la configuración de la y, por lo tanto, afectar a la experiencia del usuario final.

  • Para un DocumentNodeStore instalación en la que la reindexación puede llevar una cantidad de tiempo considerable, si la conexión a la base de datos de Mongo falla en mitad de la operación, la indexación tendría que reiniciarse desde cero;

  • A veces, la reindexación puede llevar mucho tiempo debido a la extracción de texto. Esto es específico para configuraciones que tienen muchos archivos de PDF, donde el tiempo empleado en la extracción de texto puede afectar al tiempo de indexación.

Para cumplir estos objetivos, la herramienta de índice oak-run admite diferentes modos de reindexación que pueden utilizarse según sea necesario. El comando oak-run index proporciona las siguientes ventajas:

  • reindexación fuera de banda AEM AEM - la reindexación de oak-run se puede realizar por separado de una configuración de en ejecución y, por lo tanto, minimiza el impacto en la instancia de la que está en uso;

  • reindexación fuera de la ruta : la reindexación se realiza sin afectar a las operaciones de indexación. Esto significa que el indizador asincrónico puede seguir indizando otros índices;

  • Reindexación simplificada para instalaciones de DocumentNodeStore - Para DocumentNodeStore instalaciones, la reindexación se puede realizar con un solo comando que garantiza que la reindexación se realice de la manera más óptima;

  • Admite la actualización de definiciones de índice e introducción de nuevas definiciones de índice

Reindexar: DocumentNodeStore

Para DocumentNodeStore la reindexación de instalaciones se puede realizar mediante un único comando oak-run:

java -jar oak-run*.jar index --reindex --index-paths=/oak:index/lucene --read-write --fds-path=/path/to/datastore mongodb://server:port/aem

Esto ofrece las siguientes ventajas

  • AEM Impacto mínimo en la ejecución de instancias de. AEM La mayoría de las lecturas se pueden realizar desde servidores secundarios y la ejecución de cachés de no se ve afectada negativamente debido a todo el recorrido necesario para la reindexación;
  • Los usuarios también pueden proporcionar un JSON de un índice nuevo o actualizado mediante el --index-definitions-file opción.

Reindexar: SegmentNodeStore

Para SegmentNodeStore la reindexación de instalaciones se puede realizar de una de las siguientes maneras:

Reindexación en línea - SegmentNodeStore

Siga la forma establecida en la que se realiza la reindexación mediante la configuración reindex Indicador.

AEM Reindexación en línea - SegmentNodeStore - Se está ejecutando la instancia de la

Para SegmentNodeStore instalaciones, solo un proceso puede acceder a los archivos de segmentos en modo de lectura y escritura. Debido a esto, algunas operaciones en la indexación de oak-run requieren que se realicen pasos manuales adicionales.

Esto implicaría lo siguiente:

  1. Texto del paso

  2. Conecte el oak-run AEM en el mismo repositorio utilizado por el usuario en modo de solo lectura y realice la indexación. Un ejemplo de cómo lograrlo:

    java -jar oak-run-1.7.6.jar index --fds-path=/Users/dhasler/dev/cq/quickstart/target/crx-quickstart/repository/datastore/ --checkpoint 26b7da38-a699-45b2-82fb-73aa2f9af0e2 --reindex --index-paths=/oak:index/lucene /Users/dhasler/dev/cq/quickstart/target/crx-quickstart/repository/segmentstore/

  3. Finalmente, importe los archivos de índice creados mediante el IndexerMBean#importIndex operación desde la ruta en la que oak-run guardó los archivos de indexación después de ejecutar el comando anterior.

AEM En esta situación, no tiene que detener el servidor de la ni aprovisionar ninguna instancia nueva. Sin embargo, como la indexación implica el recorrido de todo el repositorio, aumentaría la carga de E/S en la instalación, lo que afectaría negativamente al rendimiento del tiempo de ejecución.

AEM Reindexación en línea - SegmentNodeStore - Se cierra la instancia de la

Para SegmentNodeStore instalaciones, la reindexación se puede realizar mediante un único comando oak-run. AEM Sin embargo, la instancia de debe cerrarse.

Puede almacenar en déclencheur la reindexación con el siguiente comando:

java -jar oak-run*.jar index --reindex --index-paths=/oak:index/lucene --read-write --fds-path=/path/to/datastore  /path/to/segmentstore/

La diferencia entre este enfoque y el explicado anteriormente es que la creación de puntos de comprobación y la importación de índices se realizan automáticamente. AEM La desventaja es que debe haber una reducción de la velocidad de la durante el proceso.

Reindexación fuera de banda: SegmentNodeStore

AEM En este caso de uso, puede realizar la reindexación en una configuración clonada para minimizar el impacto en la instancia de la instancia en ejecución:

  1. Cree un punto de comprobación mediante una operación JMX. Para ello, vaya a la Consola JMX y buscar CheckpointManager. A continuación, haga clic en createCheckpoint(long p1) operación con un valor alto para la caducidad en segundos (por ejemplo, 2592000).

  2. Copie el crx-quickstart carpeta a un equipo nuevo

  3. Realizar reindexación mediante el comando oak-run index

  4. AEM Copiar los archivos de índice generados en el servidor de

  5. Importar los archivos de índice mediante JMX.

En este caso de uso, se supone que el almacén de datos es accesible en otra instancia, lo que puede no ser posible si FileDataStore se coloca en una solución de almacenamiento basada en la nube como EBS. Esto excluye el escenario donde FileDataStore también se clona. Si la definición del índice no realiza la indexación de texto completo, acceda a DataStore no es obligatorio.

Caso de uso 4: Actualización de definiciones de índice

Actualmente, puede enviar cambios de definición de índice mediante Índice de garantía de ACS paquete. Esto permite enviar las definiciones de índice mediante el paquete de contenido, que posteriormente requiere que se reindexe mediante la configuración de reindex marcar como true.

Esto funciona bien en instalaciones más pequeñas en las que la reindexación no tarda mucho tiempo. Sin embargo, en el caso de repositorios grandes, la reindexación se realiza en un período de tiempo considerablemente mayor. Para estos casos, ahora podemos utilizar la herramienta de índice oak-run.

Oak-run ahora admite el suministro de definiciones de índice en formato JSON y la creación de índices en modo fuera de banda donde no se realizan cambios en una instancia activa.

El proceso a tener en cuenta para este caso de uso es:

  1. Un desarrollador actualizaría las definiciones de índice en una instancia local y, a continuación, generaría un archivo JSON de definición de índice a través del --index-definitions opción

  2. El JSON actualizado se envía entonces al administrador del sistema

  3. El administrador del sistema sigue el método fuera de banda y prepara el índice para una instalación diferente

  4. AEM Una vez finalizado este proceso, los archivos de índice generados se importan en una instalación en ejecución de la.

En esta página