Dados do Google Analytics presos na fila de mensagens inativas do Qpidd

Você está lendo a documentação do Apigee Edge.
Acesse a documentação da Apigee X. info

Sintoma

Os dados de análise estão faltando na interface do Edge porque o servidor Qpidd não transfere mensagens de análise para o PostgreSQL. No Edge, o componente edge-qpid-server corresponde ao servidor Qpidd.

O Qpidd mantém duas filas para cada grupo de análise:

• ax-q-axgroup001-consumer-group-001

  Essa fila contém mensagens de análise enviadas dos processadores de mensagens e roteadores. As mensagens são extraídas daqui pelo edge-qpid-server, que as analisa e as insere no PostgreSQL. Depois que as mensagens são processadas, elas são removidas da fila.

• ax-q-axgroup001-consumer-group-001-dl

  Essa fila é a de mensagens inativas. Ele atua como o destino de mensagens que edge-qpid-server não conseguiu processar e, portanto, não quer mais receber. Normalmente, esse campo é preenchido quando a contagem máxima de entrega é excedida ou se o PostgreSQL rejeitou a inserção de novos dados devido a erros de execução.

Mensagem de erro

A causa principal pode ser devido a vários erros de tempo de execução do componente edge-qpid-server. Normalmente, se o edge-qpid-server receber um erro de execução do PostgreSQL, ele vai criar a fila de mensagens não entregues se ela ainda não existir e enviar a seguinte mensagem para lá:

yyyy-MM-dd HH:mm:ss,SSS ax-q-axgroup001-consumer-group-001-persistpool-thread-6 WARN c.a.a.m.MessageConsumer - MessageConsumer.process() : Sending message batch to the DLQ.

Causas possíveis

Etapas comuns do diagnóstico

Execute o comando a seguir para conferir as estatísticas da fila do Qpidd:

qpid-stat -q

A saída retorna o conjunto de filas registradas no broker. Se a fila com o nome que termina em "-dl" tiver mensagens, significa que há mensagens presas na fila de mensagens inativas.

Queues
  queue                                     dur  autoDel  excl  msg   msgIn  msgOut  bytes  bytesIn  bytesOut   cons  bind
  ========================================================================================================================
  ax-q-axgroup-001-consumer-group-001       Y                   0     185    185     0       13.8m   13.8m      6      2
  ax-q-axgroup-001-consumer-group-001-dl    Y                   0     70     70      0        3.9m    3.9m      0      2

Causa: mensagens presas na fila de mensagens inativas do qpidd

Diagnóstico

Essa condição pode acontecer nos seguintes cenários:

1. Um upgrade ocorreu no passado, e o PostgreSQL ficou inativo durante esse período.
2. Uma interrupção temporária do PostgreSQL devido a problemas de rede.
3. O edge-qpid-server tentou enviar uma mensagem ao PostgreSQL, mas ele retornou um erro de execução.

Resolução

1. Anote o nome das filas nas Etapas comuns de diagnóstico. Exemplo:

   • ax-q-axgroup-001-consumer-group-001
   • ax-q-axgroup-001-consumer-group-001-dl

2. Execute o comando qpid-tool para inserir um prompt qpid interativo:

   qpid-tool

   Esse comando retorna o seguinte:

   Management Tool for QPID
   qpid:

3. Execute list broker para receber uma lista de corretores ativos:

   list broker

   Esse comando retorna o seguinte:

   Object Summary:
   ID   Created   Destroyed  Index
   =======================================
   125  21:00:00  -          amqp-broker

   Em que a coluna ID especifica o ID do corretor.

4. Anote o ID do corretor. No exemplo, é 125.

5. Execute o comando a seguir para mover as mensagens da fila de mensagens não entregues de volta para a fila real:

   call 125 queueMoveMessages ax-q-axgroup-001-consumer-group-001-dl ax-q-axgroup-001-consumer-group-001 100000 {}

   Esse comando retorna o seguinte:

   OK (0) - {}

   Se não houver saída, não havia nada a fazer, ou seja, nenhuma mensagem para mover. Se você não encontrar OK(0), entre em contato com o suporte do Apigee Edge.

6. Saia do terminal qpid-tool.

   quit

7. Aguarde 5 minutos e execute as etapas de diagnóstico novamente em Etapas comuns de diagnóstico. Verifique se as mensagens na fila real estão sendo processadas e se a contagem de mensagens de carta morta permanece em 0.

Se o problema persistir, vá para a próxima seção.

É necessário coletar informações de diagnóstico

Se o problema persistir mesmo depois de seguir as instruções acima, colete as seguintes informações de diagnóstico. Entre em contato e compartilhe com o suporte do Apigee Edge:

• Registros do Qpidd: /opt/apigee/var/log/apigee-qpidd/apigee-qpidd.log
• Registros do PostgreSQL: /opt/apigee/var/log/apigee-postgresql/apigee-postgresql.log
• Registros do servidor edge-qpid: /opt/apigee/var/log/edge-qpid-server/logs/system.log
• Registros do servidor edge-postgres:/opt/apigee/var/log/edge-postgres-server/logs/system.log

• Estatísticas da fila do Qpidd:

  qpid-stat -q

• Grupo do Google Analytics retornado pelo seguinte comando curl:

  curl -u sysadminEmail:password http://mgmt:8080/v1/analytics/groups/ax