Брокера брокера KAFKA Неверный запрос типа 18 и неправильный тип запроса 16

Система:
Тип EC2 Тип: m5.2xlarge
ОС: Ubuntu 14.04.5 LTS
Версия ядра: 4.4.0-1022-aws
vCPU: 8 ядер
Память: 32Gib

Версия Java: 1.8.0_171

Мы запускаем KAFKA в режиме кластера с двумя брокерами kafka (10.0.51.1 и 10.0.51.2) и тремя узлами zookeeper. Я хотел обновить экземпляр AWS EC2, поэтому я запустил sudo apt-get update и sudo apt-get upgrade и установил ядро linux-aws. После изменения типа экземпляра я начал получать следующую ошибку в моем 10.0.51.2 kafka borker:

18/06/08 07:03:50 52902420 [kafka-network-thread-9092-0] ERROR kafka.network.Processor - Closing socket for /10.0.51.1 because of error
kafka.common.KafkaException: Wrong request type 18
    at kafka.api.RequestKeys$.deserializerForKey(RequestKeys.scala:64)
    at kafka.network.RequestChannel$Request.<init>(RequestChannel.scala:50)
    at kafka.network.Processor.read(SocketServer.scala:450)
    at kafka.network.Processor.run(SocketServer.scala:340)
    at java.lang.Thread.run(Thread.java:748)
18/06/08 07:03:50 52902571 [kafka-network-thread-9092-2] ERROR kafka.network.Processor - Closing socket for /10.0.51.1 because of error
kafka.common.KafkaException: Wrong request type 16
    at kafka.api.RequestKeys$.deserializerForKey(RequestKeys.scala:64)
    at kafka.network.RequestChannel$Request.<init>(RequestChannel.scala:50)
    at kafka.network.Processor.read(SocketServer.scala:450)
    at kafka.network.Processor.run(SocketServer.scala:340)
    at java.lang.Thread.run(Thread.java:748)

Эта ошибка возникает только у 1 брокера. Но мой кластер KAFKA работает, я могу потреблять и производить из всех тем.

Любая помощь будет оценена по достоинству.

Благодарю.

Ответы

Ответ 1

Клиент отправил ApiVersionsRequest (код запроса 18) и ListGroupsRequest (код запроса 16). см. исходный код

Вероятно, не все брокеры/потребители/производители используют одну и ту же версию после обновления. Можете ли вы проверить и в случае выровнять версии? новые клиенты должны иметь возможность общаться с более старой версией, поэтому, вероятно, библиотека, используемая в вашем коде, старше.