在使用Avro C和librdkafka消费者实现时,如果始终获取字段解析值为NULL,可能是由于以下原因:
检查Avro模式是否正确:确保您提供的Avro模式与生产者使用的模式匹配。如果模式不匹配,消费者可能无法正确解析数据。
检查消费者配置:确保您的消费者配置正确设置了Avro的序列化和反序列化处理程序。
avro_consumer_config_set_key_schema(consumer_config, key_schema);
avro_consumer_config_set_value_schema(consumer_config, value_schema);
检查消费者代码中的字段解析方式:在消费者代码中,使用avro_value_get方法来获取字段值。确保您正确指定了字段的路径和类型。
const char* field_value;
size_t field_size;
avro_value_t field_value_avro;
avro_value_get_by_name(&record_value_avro, "field_name", &field_value_avro, NULL);
avro_value_get_string(&field_value_avro, &field_value, &field_size);
printf("Field value: %.*s\n", (int)field_size, field_value);
检查消费者是否正确配置了librdkafka的配置项:确保您正确配置了auto.offset.reset选项,以指定消费者在启动时如何处理已提交的偏移量。您可以将其设置为earliest以从最早的可用偏移量开始消费。
rd_kafka_conf_set(consumer_conf, "auto.offset.reset", "earliest", errstr, sizeof(errstr));
检查消费者是否正确提交偏移量:确保您的消费者正确提交了已处理的消息的偏移量,以便在下次启动时从正确的位置继续消费。
rd_kafka_commit_message(consumer->rk, message, 0);
这些是一些可能导致始终获取字段解析值为NULL的常见问题和解决方法。您可以根据具体情况进行调试和修复。