Descarregamento de Tarefas offloading-jobs
Introdução introduction
O descarregamento distribui tarefas de processamento, totalizando instâncias de Experience Manager em uma topologia. Com a descarga, você pode usar instâncias Experience Manager específicas para executar tipos específicos de processamento. O processamento especializado permite maximizar o uso dos recursos disponíveis do servidor.
A descarga é baseada na variável Descoberta do Apache Sling e recursos do Sling JobManager. Para usar a descarga, você adiciona Experience Manager clusters a uma topologia e identifica os tópicos de trabalho que o cluster processa. Os clusters são compostos de uma ou mais instâncias de Experience Manager, de modo que uma única instância é considerada um cluster.
Para obter informações sobre como adicionar instâncias a uma topologia, consulte Administração de topologias.
Distribuição de trabalho job-distribution
O Sling JobManager e o JobConsumer permitem a criação de tarefas que são processadas em uma topologia:
- Gerenciador de tarefas: Um serviço que cria empregos para tópicos específicos.
- JobConsumer: Um serviço que executa tarefas de um ou mais tópicos. Vários serviços JobConsumer podem ser registrados para o mesmo tópico.
Quando o JobManager cria um trabalho, a estrutura Offloading seleciona um cluster Experience Manager na topologia para executar o trabalho:
- O cluster deve incluir uma ou mais instâncias que estejam executando um JobConsumer que esteja registrado para o tópico de trabalho.
- O tópico deve ser ativado para pelo menos uma instância no cluster.
Consulte Configurar o consumo de tópico para obter informações sobre como refinar a distribuição de tarefas.
Quando a estrutura de Descarregamento seleciona um cluster para executar um trabalho e o cliente é composto por várias instâncias, a Distribuição do Sling determina qual instância no cluster executa o trabalho.
Cargas da tarefa job-payloads
A estrutura de Descarregamento oferece suporte a cargas de trabalho que associam tarefas a recursos no repositório. As cargas de trabalho são úteis quando as tarefas são criadas para recursos de processamento e a tarefa é descarregada para outro computador.
Após a criação de um trabalho, a carga fica somente garantida na instância que cria o trabalho. Ao descarregar o trabalho, os agentes de replicação garantem que a carga seja criada na instância que eventualmente consuma o trabalho. Quando a execução do trabalho é concluída, a replicação inversa faz com que a carga seja copiada de volta para a instância que criou o trabalho.
Administração de topologias administering-topologies
As topologias são Experience Manager clusters vagamente acoplados que estão participando da descarga. Um cluster consiste em uma ou mais instâncias do servidor Experience Manager (uma única instância é considerada um cluster).
Cada instância do Experience Manager executa os seguintes serviços relacionados à descarga:
- Serviço de descoberta: Envia solicitações para um Conector de topologia para unir a topologia.
- Conector de topologia: Recebe as solicitações de associação e aceita ou recusa cada solicitação.
O Serviço de Descoberta de todos os membros da topologia aponta para o Conector de Topologia em um dos membros. Nas seções a seguir, esse membro é conhecido como membro raiz.
Cada cluster na topologia contém uma instância reconhecida como líder. O líder do cluster interage com a topologia em nome dos outros membros do cluster. Quando o pontilhado deixa o cluster, um novo pontilhado do cluster é automaticamente escolhido.
Exibição da topologia viewing-the-topology
Use o Navegador de topologia para explorar o estado da topologia em que a instância do Experience Manager está participando. O Navegador de topologia mostra os clusters e instâncias da topologia.
Para cada cluster, você vê uma lista de membros do cluster que indica a ordem em que cada membro se juntou ao cliente e qual membro é o Líder. A propriedade Current indica a instância que você está administrando no momento.
Para cada instância no cluster, você pode ver várias propriedades relacionadas à topologia:
- Uma lista de permissões de tópicos para o consumidor de emprego da instância.
- Os endpoints expostos para conexão com a topologia.
- Os tópicos da tarefa para os quais a instância está registrada para descarregamento.
- Os tópicos da tarefa que a instância processa.
-
Usando a interface de toque, clique na guia Ferramentas. (http://localhost:4502/tools.html)
-
Na área Operações de Granite, clique em Descarregar navegador.
-
No painel de navegação, clique em Navegador de topologia.
Os clusters que participam da topologia aparecem.
-
Clique em um cluster para ver uma lista das instâncias no cluster e sua ID, o status Atual e o status Líder.
-
Clique em uma ID de instância para ver as propriedades mais detalhadas.
Você também pode usar o Console da Web para exibir informações de topologia. O console fornece mais informações sobre os clusters de topologia:
- Qual instância é a instância local.
- Os serviços do Conector de Topologia que essa instância usa para se conectar à topologia (de saída) e aos serviços que se conectam a essa instância (de entrada).
- Altere o histórico das propriedades de topologia e instância.
Use o procedimento a seguir para abrir a página Gerenciamento de Topologia do Console da Web:
-
Abra o Console da Web em seu navegador. (http://localhost:4502/system/console)
-
Clique em Principal > Gerenciamento de topologia.
Configuração da Associação de Topologia configuring-topology-membership
O Apache Sling Resource-Based Discovery Service é executado em cada instância para controlar como as instâncias do Experience Manager interagem com uma topologia.
O Serviço de descoberta envia solicitações POST periódicas (heartbeats) para os serviços do Conector de topologia para estabelecer e manter conexões com a topologia. O serviço Topology Connector mantém uma lista de permissões de endereços IP ou nomes de host que têm permissão para ingressar na topologia:
- Para unir uma instância a uma topologia, especifique o URL do serviço Topology Connector do membro raiz.
- Para permitir que uma instância participe de uma topologia, adicione a instância à lista de permissões do serviço Topology Connector do membro raiz.
Use o Console da Web ou um nó sling:OsgiConfig para configurar as seguintes propriedades do serviço org.apache.sling.discovery.impt.Config :
Use o procedimento a seguir para conectar uma instância do CQ ao membro raiz de uma topologia. O procedimento aponta a instância para o URL do Conector de Topologia do membro de topologia raiz. Execute esse procedimento em todos os membros da topologia.
- Abra o Console da Web em seu navegador. (http://localhost:4502/system/console)
- Clique em Principal > Gerenciamento de topologia.
- Clique em Configurar serviço de descoberta.
- Adicione um item à propriedade Topology Connector URLs e especifique o URL do serviço Topology Connector do membro de topologia raiz. O URL está no formato https://rootservername:4502/libs/sling/topology/connector.
Execute o procedimento a seguir no membro raiz da topologia. O procedimento adiciona os nomes dos outros membros da topologia à lista de permissões do Serviço de Descoberta.
- Abra o Console da Web em seu navegador. (http://localhost:4502/system/console)
- Clique em Principal > Gerenciamento de topologia.
- Clique em Configurar serviço de descoberta.
- Para cada membro da topologia, adicione um item à propriedade de lista de permissões Topology Connector e especifique o nome do host ou endereço IP do membro da topologia.
Configurar o consumo de tópico configuring-topic-consumption
Use o Navegador de descarga para configurar o consumo de tópico para as instâncias de Experience Manager na topologia. Para cada instância, é possível especificar os tópicos que ela consome. Por exemplo, para configurar sua topologia de forma que somente uma instância consuma tópicos de um tipo específico, desative o tópico em todas as instâncias, exceto uma.
As tarefas são instâncias de quantidade distribuída que têm o tópico associado habilitado usando a lógica de round robin.
-
Usando a interface de toque, clique na guia Ferramentas. (http://localhost:4502/tools.html)
-
Na área Operações de Granite, clique em Descarregar navegador.
-
No painel de navegação, clique em Descarregar navegador.
Os tópicos de descarregamento e as instâncias do servidor que podem consumir os tópicos são exibidos.
-
Para desativar o consumo de um tópico para uma instância, abaixo do nome superior, clique em Desativar ao lado da instância.
-
Para configurar todo o consumo de tópico para uma instância, clique no identificador de instância abaixo de qualquer tópico.
-
Clique em um dos seguintes botões ao lado de um tópico para configurar o comportamento de consumo para a instância e, em seguida, clique em Salvar:
- Ativado: Essa instância consome trabalhos desse tópico.
- Desativado: Essa instância não consome trabalhos desse tópico.
- Exclusivo: Essa instância consome trabalhos somente desse tópico.
Observação: Quando você seleciona Exclusivo para um tópico, todos os outros tópicos são automaticamente definidos como Desativado.
Consumidores de Trabalho Instalados installed-job-consumers
Várias implementações do JobConsumer são instaladas com o Experience Manager. Os tópicos para os quais esses JobConsumers estão registrados são exibidos no Navegador de Descarregamento. Os tópicos adicionais que aparecem são aqueles que JobConsumers personalizados registraram. A tabela a seguir descreve o JobConsumers padrão.
Desativar e ativar tópicos para uma instância disabling-and-enabling-topics-for-an-instance
O serviço Apache Sling Job Consumer Manager fornece propriedades de lista de permissões e lista de bloqueios de tópicos. Configure essas propriedades para ativar ou desativar o processamento de tópicos específicos em uma instância do Experience Manager.
Observação: Se a instância pertencer a uma topologia, você também poderá usar o Navegador de descarga em qualquer computador na topologia para ativar ou desativar os tópicos.
A lógica que cria a lista de tópicos ativados primeiro permite todos os tópicos que estão na lista de permissões e depois remove os tópicos que estão na lista de bloqueios.Por padrão, todos os tópicos são ativados (o valor da lista de permissões é *
) e nenhum tópico estiver desativado (a lista de bloqueios não tem valor).
Use o Console da Web ou um sling:OsgiConfig
para configurar as seguintes propriedades. Para sling:OsgiConfig
, o PID do serviço Gerenciador de Consumidores de Trabalho é org.apache.sling.event.impl.jobs.JobConsumerManager.
Criando Agentes De Replicação Para Descarregamento creating-replication-agents-for-offloading
A estrutura de descarregamento usa a replicação para transportar recursos entre o autor e o trabalhador. A estrutura de descarregamento cria agentes de replicação automaticamente quando as instâncias se juntam à topologia. Os agentes são criados com valores padrão. Você deve alterar manualmente a senha usada pelos agentes para autenticação.
Crie os agentes de replicação que transportam cargas de trabalho entre instâncias para descarregamento. A ilustração a seguir mostra os agentes necessários para descarregar do autor para uma instância de trabalho. O autor tem uma ID do Sling de 1 e a instância do trabalhador tem uma ID do Sling de 2:
Essa configuração requer os três agentes a seguir:
- Um agente de saída na instância do autor que é replicado para a instância do trabalhador.
- Um agente reverso na instância do autor que puxa da caixa de saída na instância do trabalhador.
- Um agente de caixa de saída na instância do trabalhador.
Esse esquema de replicação é semelhante ao usado entre instâncias de autor e publicação. No entanto, para a situação de descarregamento, todas as instâncias envolvidas são instâncias de criação.
Como nomear os agentes de replicação para descarregamento naming-the-replication-agents-for-offloading
Use um formato específico para a variável Nome propriedade dos agentes de replicação para que a estrutura de descarregamento use automaticamente o agente correto para instâncias de trabalho específicas.
Nomear o agente de saída na instância do autor:
offloading_<slingid>
, onde <slingid>
é a ID do Sling da instância do trabalhador.
Exemplo: offloading_f5c8494a-4220-49b8-b079-360a72f71559
Nomear o agente reverso na instância do autor:
offloading_reverse_<slingid>
, onde <slingid>
é a ID do Sling da instância do trabalhador.
Exemplo: offloading_reverse_f5c8494a-4220-49b8-b079-360a72f71559
Nomear a caixa de saída na instância do trabalhador:
offloading_outbox
Criação do agente de saída creating-the-outgoing-agent
-
Crie um Agente de replicação sobre o autor. (Consulte o documento para agentes de replicação). Especifique qualquer Título. O Nome deve seguir a convenção de nomenclatura.
-
Crie o agente usando as seguintes propriedades:
table 0-row-2 1-row-2 2-row-2 3-row-2 4-row-2 5-row-2 6-row-2 Propriedade Valor Configurações > Tipo de serialização Padrão Transporte >URI de transporte https:// <ip of target instance>
:<port>
/bin/receive?sling:authRequestLogin=1
Transporte > Transportar usuário Usuário de replicação na instância de destino Transporte >Transporte de senha Senha do usuário de replicação na instância de destino Estendido > Método HTTP POST Triggers > Ignorar padrão Verdadeiro
Criação do agente reverso creating-the-reverse-agent
-
Crie um Agente de replicação inversa sobre o autor. (Consulte o documento para agentes de replicação.) Especifique qualquer Título. O Nome deve seguir a convenção de nomenclatura.
-
Crie o agente usando as seguintes propriedades:
table 0-row-2 1-row-2 2-row-2 3-row-2 4-row-2 5-row-2 Propriedade Valor Configurações > Tipo de serialização Padrão Transporte >URI de transporte https:// <ip of target instance>
:<port>
/bin/receive?sling:authRequestLogin=1
Transporte > Transportar usuário Usuário de replicação na instância de destino Transporte >Transporte de senha Senha do usuário de replicação na instância de destino Estendido > Método HTTP GET
Criação do agente de caixa de saída creating-the-outbox-agent
-
Crie um Agente de replicação na instância do trabalhador. (Consulte o documento para agentes de replicação.) Especifique qualquer Título. O Nome deve ser
offloading_outbox
. -
Crie o agente usando as seguintes propriedades.
table 0-row-2 1-row-2 2-row-2 3-row-2 Propriedade Valor Configurações > Tipo de serialização Padrão Transporte >URI de transporte repo://var/replication/outbox Acionador > Ignorar padrão Verdadeiro
Encontrar a ID do Sling finding-the-sling-id
Obtenha a ID do Sling de uma instância do Experience Manager usando um dos seguintes métodos:
- Abra o Console da Web e, nas Configurações do Sling, encontre o valor da propriedade do Sling ID (http://localhost:4502/system/console/status-slingsettings). Esse método é útil se a instância ainda não fizer parte da topologia.
- Use o navegador Topologia se a instância já fizer parte da topologia.
Descarregamento do processamento de ativos DAM offloading-the-processing-of-dam-assets
Configure as instâncias de uma topologia para que instâncias específicas executem o processamento em segundo plano de ativos que são adicionados ou atualizados no DAM.
Por padrão, o Experience Manager executa o fluxo de trabalho do Ativo de atualização do DAM quando um ativo do DAM é alterado ou um é adicionado ao DAM. Altere o comportamento padrão para que o Experience Manager execute o fluxo de trabalho DAM Update Asset Offloader . Esse workflow gera um trabalho do JobManager que tem um tópico de com/adobe/granite/workflow/offloading
. Em seguida, configure a topologia para que a tarefa seja descarregada em um trabalhador dedicado.
O procedimento a seguir assume as seguintes características para a topologia de descarregamento:
- Uma ou mais instâncias do Experience Manager são instâncias de criação com as quais os usuários interagem para adicionar ou atualizar ativos do DAM.
- Os usuários não interagem diretamente com uma ou mais instâncias do Experience Manager que processam os ativos do DAM. Essas instâncias são dedicadas ao processamento em segundo plano de ativos do DAM.
-
Em cada instância do Experience Manager, configure o Serviço de descoberta para que ele aponte para o Conector de topologia raiz. (Consulte Configuração da Associação de Topologia.)
-
Configure o Conector de Topografia raiz para que as instâncias de conexão estejam na lista de permissões.
-
Abra o navegador de descarga e desative o
com/adobe/granite/workflow/offloading
tópico sobre as instâncias com as quais os usuários interagem para fazer upload ou alterar ativos do DAM. -
Em cada instância com a qual os usuários interagem para fazer upload ou alterar ativos do DAM, configure inicializadores de fluxo de trabalho para usar o fluxo de trabalho de Descarregamento de ativo de atualização do DAM :
- Abra o console Fluxo de trabalho .
- Clique na guia Iniciador.
- Localize as duas configurações do Iniciador que executam o fluxo de trabalho do Ativo de atualização do DAM . Um tipo de evento de configuração do iniciador é Nó criado e o outro tipo é Nó modificado.
- Altere ambos os tipos de evento para que eles executem o fluxo de trabalho Descarregamento de ativo de atualização do DAM. (Para obter informações sobre configurações do iniciador, consulte Iniciando Workflows Quando Os Nós Mudam.)
-
Nas instâncias que executam o processamento em segundo plano de ativos do DAM, desative os inicializadores do fluxo de trabalho que executam o fluxo de trabalho do Ativo de atualização do DAM .
Leitura adicional further-reading
Além dos detalhes apresentados nesta página, você também pode ler o seguinte:
- Para obter informações sobre o uso de APIs Java para criar tarefas e consumidores de tarefas, consulte Criação e consumo de trabalhos para descarregamento.
- Para obter diretrizes gerais e práticas recomendadas para descarregamento de ativos, consulte Diretrizes gerais e práticas recomendadas para descarregamento de ativos.
- Para saber como desativar a criação automática de agentes de descarga, consulte Desativação do Gerenciamento Automático de Agentes.