kafkaListener

编码技巧——@KafkaListener的使用

；理想的做法是单独维护kafka的consumer配置，在定义consumer的bean时，指定topic和group，仅实现消费逻辑；从kafka-clients的2.2.4版本开始，可以直接使用@KafkaListener
七海健人·2023-04-18 08:41

spring-Kafka中的@KafkaListener深入源码解读

目录前言一、总体流程二、源码解读1、postProcessAfterInitialization1.1、processKafkaListener1.2、processListener1.3、registerEndpoint1.4、startIfNecessary2、afterSingletonsInstantiated2.1、afterPropertiesSet2.2、registerAllEnd
·2023-04-12 01:37

Spring Boot 中使用@KafkaListener并发批量接收消息的完整代码

kakfa是我们在项目开发中经常使用的消息中间件。由于它的写性能非常高，因此，经常会碰到读取Kafka消息队列时拥堵的情况。遇到这种情况时，有时我们不能直接清理整个topic，因为还有别的服务正在使用该topic。因此只能额外启动一个相同名称的consumer-group来加快消息消费（如果该topic只有一个分区，再启动一个新的消费者，没有作用）。完整的代码在这里，欢迎加星号、fork。官方文档
·2023-04-10 01:37

如何动态加载@KafkaListener的topics

问题来源我司最近刚重构完，终于有时间去偿还欠下的技术债了。最先准备改造的就是将一些原本应该异步执行而因重构时间紧而被迫同步执行的方法，通过消息队列异步化。在原来的老项目中，我们使用的是kafka。因此我们对kafka的熟悉程度远胜于其他消息队列，也正因此，我们在新系统中依然采用了kafka作为我们的消息队列中间件。而摆在我们面前的问题是，该如何在SpringBoot环境下集成kafka呢？spri
逍遥jc·2023-03-14 02:12

springboot 整合kafka 消费异常 数据回滚

1.入口@KafkaListener(topics={"TRADE_SYNCHRONIZE_2200C"})publicvoidTradeSynchronizeConsumer(ConsumerRecorddata
幸福来得很突然·2023-02-28 07:13

使用Spring-kafka的@KafkaListener报错信息Listener method could not be invoked with the incoming message

使用Spring-kafka的@KafkaListener报错信息Listenermethodcouldnotbeinvokedwiththeincomingmessage问题背景报错原因解决办法问题背景先说一下背景
我叫CJJ·2023-02-04 17:20

springboot+kafka中@KafkaListener动态指定多个topic问题

目录说明总结一下大家问的最多的一个问题终极方法思路实现代码总结说明本项目为springboot+kafak的整合项目，故其用了springboot中对kafak的消费注解@KafkaListener首先
·2022-12-28 15:51

spring-kafka之@KafkaListener单条或批量处理消息

文章目录消息监听容器1、KafkaMessageListenerContainer2、ConcurrentMessageListenerContainer@KafkaListener底层监听原理SpringBoot
柏油·2022-07-21 12:53

spring-Kafka之@KafkaListener深入解读

文章目录前言一、总体流程二、源码解读1、postProcessAfterInitialization1.1、processKafkaListener1.2、processListener1.3、registerEndpoint1.4、startIfNecessary2、afterSingletonsInstantiated2.1、afterPropertiesSet2.2、registerAllE
柏油·2022-07-21 12:23

使用spring boot 整合kafka,延迟启动消费者

springboot整合kafka,延迟启动消费者springboot整合kafka的时候一般使用@KafkaListener来设置消费者，但是这种方式在spring启动的时候就会立即开启消费者。
·2022-03-08 13:33

Spring 对Apache Kafka的支持与集成

SpringKafka通过@KafkaListener注解，带来了一个简单而典型的Spring模板编程模型，它还带有一个KafkaTemplate和消息驱动的POJO。
liululee·2020-12-08 09:41

Spring 对Apache Kafka的支持与集成

SpringKafka通过@KafkaListener注解，带来了一个简单而典型的Spring模板编程模型，它还带有一个KafkaTemplate和消息驱动的POJO。
liululee·2020-11-26 19:59

spring-kafka从配置文件中读取订阅主题topic，需要将注解值分割成数组

正常的kafka订阅姿势是@KafkaListener(topics={“cat,dog”})假设你在application.properties中定义topicName=cat,dog然后在程序中使用
weixin_37962804·2020-09-16 19:04

Spring Boot 中使用@KafkaListener批量接收消息ack

2019独角兽企业重金招聘Python工程师标准>>>之前介绍了如何在SpringBoot中集成Kafka,但是默认情况下，@KafkaListener都是一条一条消费，如果想要一次消费一个批量的话，我们都知道
weixin_34347651·2020-08-22 14:55

kafka多线程并发消费，批量消费

注：上篇博客说了怎么搭建kafka集群，并实现springboot集成kafka实现消息单条消费，但是如果有场景需要批量消费，那么就需要对消费者进行配置了，并可以实现并发消费，即多个KafkaListener
xr不经意·2020-08-22 11:05

Spring for Apache Kafka 2.4.4

它还支持带有@KafkaListener注释和“侦听器容器”的消息驱动pojo。这些库促进了依赖注入和声明性的使用。
咔啡·2020-08-18 10:40

springboot kafka @KafkaListener 动态指定topics

@Configuration@Slf4jpublicclassKafkaConfigimplementsInitializingBean{@OverridepublicvoidafterPropertiesSet()throwsException{StringtopicName=wireTopics();System.setProperty("topicName",topicName);log.i
星雨心梦·2020-08-16 04:43

@KafkaListener 动态指定topic

背景:使用@org.springframework.kafka.annotation.KafkaListener的时候,kafka的topic可以自行设定，但是有种需求是，在启动之前，是不知道需要监听哪个
雾夜幽竹·2020-08-16 04:36

kafka动态配置topic

 之前使用@org.springframework.kafka.annotation.KafkaListener这个注解的时候，是在yml文件中配置，然后使用@KafkaListener(topics=
Oo。°ºO·2020-08-16 03:19

kafka动态创建消费者（实时更新topic和servers）

一、疑问描述spring-kafka通过@KafkaListener的方式配置订阅的topic，通过@Configuration配置创建kafkaListenerContainerFactory。
紫霖ty·2020-08-16 03:31

用@KafkaListener批量接收消息

之前介绍了如何在SpringBoot中集成Kafka,但是默认情况下，@KafkaListener都是一条一条消费，如果想要一次消费一个批量的话，我们都知道，在kafka原生的API可以通过poll(num
will的猜想·2020-08-16 02:45

spring-kafka使消费者动态订阅新增的topic

对其的包装API，即spring-kafka，同其它包装API一样（如JdbcTemplate、RestTemplate、RedisTemplate等等），KafkaTemplate是其生产者核心类，KafkaListener
DayDayUp丶·2020-08-16 01:22

2020年最新版的spring-kafka 整合消费者端代码实践---采用原始的方式，非@KafkaListener注解监听方式

spring-kafka整合消费端代码1.pom文件依赖4.0.0org.springframework.bootspring-boot-starter-parent2.3.0.RELEASEcom.spring.shiroshiro-springboot0.0.1-SNAPSHOTshiro-springbootDemoprojectforSpringBoot1.8org.springframe
smile__tiger·2020-08-16 01:43

KafkaListener的各种操作

文章目录@KafkaListener的各种操作多线程和单线程消费容器工厂ConcurrentKafkaListenerContainerFactory批量消息消费和单条消息消费代码参考@KafkaListener
学圆惑边·2020-08-16 00:19

SpringBoot中@KafkaListener原理

先上流程图：在我们的SpringBoot工程中，只需在方法中注解@KafkaListener(topics={”demo_topic_01“})即可实现对该topic的监听我们知道，kafka的consumer
雪落南城·2020-08-15 23:00

SpringBoot中使用@KafkaListener如何动态指定topic

背景:在公司的SpringBoot项目中使用注解@org.springframework.kafka.annotation.KafkaListener的时候，kafka的topic可以使用注解中的topics
彧卿丶·2020-08-15 21:30

springboot+kafka中@KafkaListener如何动态指定多个topic

springboot+kafka中@KafkaListener如何动态指定多个topic说明：本项目为springboot+kafak的整合项目，故其用了springboot中对kafak的消费注解@KafkaListener
Forward233·2020-08-15 21:19

kafka中的@KafkaListener如何动态获得topic

我的天啊，经过几天奋战，终于解决这个大坑，我一定要写个博客纪念一下。首先，引入依赖：org.springframework.kafkaspring-kafka很重要，一定要看好，依赖困扰了我很久其次写一个KafkaTopicConfig类，继承InitializingBean，重写afterPropertiesSet()方法。我的如下：```java@Configurationpublicclas
ming_zi_hao_nan_a·2020-08-15 21:56

Kafka动态关闭、开启监听

publicstaticfinalStringKAFKA_LISTENER_ID="KAFKA_ID";@KafkaListener(id=KAFKA_LISTENER_ID,topics="XXXX"
Little Programmer·2020-08-15 02:35

@KafkaListener注解学习

本文只是介绍一下@KafkaListener的工作流程，并不详细深入。
爱思考的实践者·2020-08-09 20:39

kafka消费端在springboot项目中简单注释使用方法

一、@KafkaListener注解使用方式spring-kafka使用基于@KafkaListener注解，@KafkaListener使用方式如下。
小屁孩~~·2020-07-28 06:29

如何在Spring Boot v2.x 中 操作kafka (kafka v1.1.0)

springbootapplication.properties中配置生产者和消费者的基本信息，然后springboot启动后会创建KafkaTemplate对象，这个对象可以用来发送消息到Kafka，然后用@KafkaListener
大树叶·2020-07-11 02:04

spring-kafka之KafkaListener注解深入解读

本文主要讲述的spring-kafka框架的kafkaListener注解的深入解读和使用案例。解读源码解读@Target({ElementTy
一直孤独的程序猿·2020-07-09 12:35

@KafkaListener注解解密

本文会介绍一下@KafkaListener的工作流程，但是不会详细深入。
_laomei_·2020-07-08 07:51

Spring Boot 中使用@KafkaListener并发批量接收消息

kakfa是我们在项目开发中经常使用的消息中间件。由于它的写性能非常高，因此，经常会碰到Kafka消息队列拥堵的情况。遇到这种情况时，有时我们不能直接清理整个topic，因为还有别的服务正在使用该topic。因此只能额外启动一个相同名称的consumer-group来加快消息消费（如果该topic只有一个分区，实际上再启动一个新的消费者，没有作用）。完整的代码在这里，欢迎加星号、fork。官方文档
russle·2020-07-08 04:17

Spring Boot整合Kafka的简单用例(@KafkaListener注解)

第一步、启动zookeeperserver和kafkaserver启动zookeeperserver：bin/zookeeper-server-start.shconfig/zookeeper.properties启动两个kafkaserver：bin/kafka-server-start.shconfig/server-1.properties；bin/kafka-server-start.sh
原来丨·2020-07-07 22:04

Kafka发布订阅模式和手动提交模式

@KafkaListener(topics="liuzq.test.kafka.topic",groupId="1")publicvoidtest1(ConsumerRecordrecord,Acknowledgmentack
刘赵强·2020-07-04 22:28

@KafkaListener通过配置加载多个topic

接到领导的一个需求，希望封装一下kafka的消费者，可以从配置读取topic进行消费；一开始首先想到的是用javakafka的高阶api手工根据topic创建消费者，一个topic创建一个消费者，依赖zookeeper完成kafka内部的balance和其他管理。后来领导又提出不要依赖zookeeper，之前老是rebalance失败。调研了一下，手工实现类似springkafka的kafkaLi
傻大喵·2020-07-02 12:21

spring boot整合kafka @KafkaListener日志输出dead for group解决办法

问题：2018-09-0611:43:41.508|-INFO[org.springframework.kafka.KafkaListenerEndpointContainer#1-7-C-1]org.apache.kafka.clients.consumer.internals.AbstractCoordinator[600]-|MarkingthecoordinatorJPCDH2:9092(
xiaoliuyiting·2020-06-30 00:41

spring boot kafka 支持批量操作

看了下代码，springboot是1.5.13.RELEASE版本，kafka使用的是springboot的自动配置，@KafkaListener每次处理一条数据，每次逻辑中存在多次数据库操作。
这是一个懒人·2020-06-25 04:46

spring-kafka通过@KafkaListener实现消费者监听流程分析

首先通过@EnableKafka注解，注入KafkaBootstrapConfiguration类@Target(ElementType.TYPE)@Retention(RetentionPolicy.RUNTIME)@Documented@Import(KafkaBootstrapConfiguration.class)public@interfaceEnableKafka{}注入KafkaLi
码拉松·2020-06-23 15:17

spring-kafka之KafkaListener注解深入解读

本文主要讲述的spring-kafka框架的kafkaListener注解的深入解读和使用案例。解读源码解读@Target({ElementTy
Enast·2020-05-29 15:00

Spring Boot 中使用@KafkaListener并发批量接收消息

转自：https://blog.csdn.net/russle/article/details/81258590kakfa是我们在项目开发中经常使用的消息中间件。由于它的写性能非常高，因此，经常会碰到Kafka消息队列拥堵的情况。遇到这种情况时，有时我们不能直接清理整个topic，因为还有别的服务正在使用该topic。因此只能额外启动一个相同名称的consumer-group来加快消息消费（经测试
不1见2不3散4·2020-02-22 09:58

Spring-Kafka（六）—— @KafkaListener的花式操作

消息监听对于Kafka中Topic的数据消费，我们一般都选择使用消息监听器进行消费，怎么把消息监听器玩出花来呢，那就得看看它所实现的功能了。Spring-Kafka中消息监听大致分为两种类型，一种是单条数据消费，一种是批量消费；两者的区别只是在于监听器一次性获取消息的数量。GenericMessageListener是我们实现消息监听的一个接口，向上扩展的接口有非常多，比如：单数据消费的Messa
海苔胖胖·2019-12-27 17:38

Spring-Kafka（十）—— ConsumerAwareErrorHandler异常处理器

首先，KafkaListener要做的事只是监听Topic中的数据并消费，如果在KafkaListener中还需要对异常进
海苔胖胖·2019-12-19 18:00

2019-12-19 spring中 注解使用变量实现动态配置

在注解中使用变量会遇到问题因为注解中的变量不能是@Value注解的好像是final什么的记不清了如@KafkaListener(topics="A",groupId="topicGroupId")@Scheduled
感恩_0096·2019-12-19 18:02

springboot+kafka中@KafkaListener如何动态指定多个topic

springboot+kafka中@KafkaListener如何动态指定多个topic说明：本项目为springboot+kafak的整合项目，故其用了springboot中对kafak的消费注解@KafkaListener
Forward_233·2019-12-17 07:27

Spring-Kafka（八）—— KafkaListener定时启动（禁止自启动）

定时启动的意义何在如果只学习技术不讨论其应用范围那就是在耍流氓啊，为了不做那个流氓，我还是牺牲一下色相吧在这里我举一个定时启动的应用场景：比如现在单机环境下，我们需要利用Kafka做数据持久化的功能，由于用户活跃的时间为早上10点至晚上12点，那在这个时间段做一个大数据量的持久化可能会影响数据库性能导致用户体验降低，我们可以选择在用户活跃度低的时间段去做持久化的操作，也就是晚上12点后到第二条的早
海苔胖胖·2019-12-12 09:40

记一次线上Kafka数据丢失-消息send成功，所有消费者没有拉取到该消息

Listener的记录@Log4j2@ComponentpublicclassRepaySuccessListener{@AutowiredprivateOrderServiceorderService;@KafkaListener
雪落南城·2019-07-12 15:28

Springboot2（30）集成kafka--详细讲解@KafkaListener

源码地址springboot2教程系列写性能非常高，因此，经常会碰到Kafka消息队列拥堵的情况经测试，如果该topic只有一个分区，实际上再启动一个新的消费者，没有作用。ConcurrentKafkaListenerContainerFactory并且设置了factory.setConcurrency(4);（我的topic有4个分区，为了加快消费将并发设置为4，也就是有4个KafkaMessa
大神，快来碗里·2018-12-30 20:16
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他