«apache-kafka» etiketlenmiş sorular

Mesajlaşma için apache kafka kullanıyorum. Üreticiyi ve tüketiciyi Java'da uyguladım. Bir konudaki mesaj sayısını nasıl alabiliriz?

93 java  messages  apache-kafka 

Kapalı . Bu soruya daha çok odaklanılması gerekiyor . Şu anda cevapları kabul etmiyor. Bu soruyu geliştirmek mi istiyorsunuz? Soruyu, yalnızca bu gönderiyi düzenleyerek tek bir soruna odaklanacak şekilde güncelleyin . 4 ay önce kapalı . Bu soruyu geliştirin Redis, tıpkı Kafka gibi gerçek zamanlı pub-sub olarak kullanılabilir. Hangisini ne …

91 redis  apache-kafka  publish-subscribe 

Her çalıştırmadan önce bir konudaki tüm verileri veya konuyu silmenin bir yolu var mı? KafkaConfig.scala dosyasını değiştirerek logRetentionHours ? Tüketici okur okumaz mesajların silinmesinin bir yolu var mı? Verileri bir yerden almak ve tüketicinin tükettiği belirli bir konuya göndermek için üreticileri kullanıyorum, her çalıştırmada o konudaki tüm verileri silebilir miyim? …

89 apache-kafka  apache-zookeeper 

Kapalı . Bu sorunun daha fazla odaklanması gerekiyor . Şu anda cevapları kabul etmiyor. Bu soruyu geliştirmek ister misiniz? Soruyu, yalnızca bu yayını düzenleyerek tek bir soruna odaklanacak şekilde güncelleyin . 3 gün önce kapalı . Bir veri mühendisi iş görüşmesine gittim. Görüşmeci bana bir soru sordu. Bana biraz durum …

20 apache-spark  apache-kafka  stream-processing 

Sürekli FETCH_SESSION_ID_NOT_FOUND alıyorum. Neden olduđundan emin deđilim. Burada kimse bana sorunun ne olduğunu ve tüketiciler ve brokerlar üzerindeki etkisi ne olacak lütfen. Kafka Sunucu Günlüğü: INFO [2019-10-18 12:09:00,709] [ReplicaFetcherThread-1-8][] org.apache.kafka.clients.FetchSessionHandler - [ReplicaFetcher replicaId=6, leaderId=8, fetcherId=1] Node 8 was unable to process the fetch request with (sessionId=258818904, epoch=2233): FETCH_SESSION_ID_NOT_FOUND. INFO [2019-10-18 …

11 apache-kafka 

Confluent.Kafka .NET istemci sürüm 1.3.0 kullanıyorum. Belgeleri takip ediyorum : var consumerConfig = new ConsumerConfig { BootstrapServers = "server1, server2", AutoOffsetReset = AutoOffsetReset.Earliest, EnableAutoCommit = true, EnableAutoOffsetStore = false, GroupId = this.groupId, SecurityProtocol = SecurityProtocol.SaslPlaintext, SaslMechanism = SaslMechanism.Plain, SaslUsername = this.kafkaUsername, SaslPassword = this.kafkaPassword, }; using (var consumer = new …

10 c#  apache-kafka  kafka-consumer-api 

Biri konu dinlemek için ve diğeri web uç noktası için iki işlevi ile basit bir uygulama var. Sunucu tarafında olay akışı (SSE) yani metin / olay akışı oluşturmak istiyorum, böylece istemci sonunda EventSource kullanarak dinleyebilir. Şimdi, her fonksiyon kendi işini yapıyor için aşağıdaki kodu var: import faust from faust.web import …

9 python  python-3.x  apache-kafka  aiohttp  faust