教学文库网 - 权威文档分享云平台
您的当前位置:首页 > 精品文档 > 高等教育 >

Spark整合kafka0.10.0新特性(一)(2)

来源:网络收集 时间:2026-09-11
导读: 不为空 * */ def onStart(currentOffsets: ju.Map[TopicPartition, jl.Long]): Consumer[K, V] } /** * Subscribe to a collection of topics. * @param topics collection of topics to subscribe * @param kafkaP

不为空 * */

def onStart(currentOffsets: ju.Map[TopicPartition, jl.Long]): Consumer[K, V] } /**

* Subscribe to a collection of topics.

* @param topics collection of topics to subscribe * @param kafkaParams Kafka

*

* configuration parameters to be used on driver. The same params will be used on executors,

* with minor automatic modifications applied. * Requires \

* with Kafka broker(s) specified in host1:port1,host2:port2 form.

* @param offsets: offsets to begin at on initial startup. If no offset is given for a * TopicPartition, the committed offset (if applicable) or kafka param * auto.offset.reset will be used. *

* 订阅一组topic消息 *kafkaParams参数:

*配置参数将会在driver上使用,并且相同参数也会发送到executor上使用,在executor上可能略微的配置修改

*通知需要设置bootstrap.servers指定broker *

*offsets参数:

* offsets伴随着startup开始,如果对于TopicPartition没有指定offset, * 提交的offset或auto.offset.reset将会被使用 * * */

private case class Subscribe[K, V](

topics: ju.Collection[jl.String],

Spark整合kafka0.10.0新特性(一)(2).doc 将本文的Word文档下载到电脑,方便复制、编辑、收藏和打印
本文链接:https://www.jiaowen.net/wendang/613066.html(转载请注明文章来源)
Copyright © 2020-2025 教文网 版权所有
声明 :本网站尊重并保护知识产权,根据《信息网络传播权保护条例》,如果我们转载的作品侵犯了您的权利,请在一个月内通知我们,我们会及时删除。
客服QQ:78024566 邮箱:78024566@qq.com
苏ICP备19068818号-2
Top
× 游客快捷下载通道(下载后可以自由复制和排版)
VIP包月下载
特价:29 元/月 原价:99元
低至 0.3 元/份 每月下载150
全站内容免费自由复制
VIP包月下载
特价:29 元/月 原价:99元
低至 0.3 元/份 每月下载150
全站内容免费自由复制
注:下载文档有可能出现无法下载或内容有问题,请联系客服协助您处理。
× 常见问题(客服时间:周一到周五 9:30-18:00)