Linux 安装 Apache Kafka

这篇具有很好参考价值的文章主要介绍了Linux 安装 Apache Kafka。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、安装

  1. 下载kafka,下载地址,只是使用的话下载 Binary 版本就行。
    Linux 安装 Apache Kafka,Apache,linux,apache,kafka

  2. 解压

tar -xzf kafka_2.12-2.6.1.tgz -C /data/

-C : 指定解压目录

  1. 需要安装并且启动 Zookeeper

  2. 进入Kafka目录,启动kafka,启动后日志参考下图

cd /data/kafa/
nohup bin/kafka-server-start.sh config/server.properties > kafka.log 2>&1 &

Linux 安装 Apache Kafka,Apache,linux,apache,kafka

  1. 停止kafka
bin/kafka-server-stop.sh

如果你以后台方式启动 Kafka,并且在启动时使用了 nohup :

  • 使用 ps 命令查找 Kafka 进程的 PID:ps aux | grep kafka
  • 使用 kill 命令停止 Kafka 进程:kill -TERM <Kafka-PID>

请确保在停止 Kafka 之前,你已经停止了任何依赖于 Kafka 的其他服务,例如 Zookeeper(如果你在使用的话)

二、测试

  1. 进入Kafka目录,创建Topic
bin/kafka-topics.sh --create --topic test-topic --bootstrap-server localhost:9092 --partitions 1 --replication-factor 1

Linux 安装 Apache Kafka,Apache,linux,apache,kafka

  1. 生产者测试:
bin/kafka-console-producer.sh --topic test-topic --bootstrap-server localhost:9092

Linux 安装 Apache Kafka,Apache,linux,apache,kafka

  1. 消费者测试
bin/kafka-console-consumer.sh --topic test-topic --bootstrap-server localhost:9092 --from-beginning

Linux 安装 Apache Kafka,Apache,linux,apache,kafka

  1. 验证消息传递

在生产者终端中输入一些消息后,你应该能够在消费者终端中看到这些消息。这表明 Kafka 成功启动,并且生产者和消费者能够正常工作。文章来源地址https://www.toymoban.com/news/detail-797074.html

到了这里,关于Linux 安装 Apache Kafka的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Apache Flink 和 Apache Kafka 两者之间的集成架构 Flink and Apache Kafka: A Winning Partnership

    作者:禅与计算机程序设计艺术 Apache Flink 和 Apache Kafka 是构建可靠、高吞吐量和低延迟的数据管道(data pipeline)的两个著名的开源项目。2019年4月,两者宣布合作共赢。在这次合作中,Apache Kafka 将提供强大的消息存储能力、Flink 将作为一个分布式数据流处理平台来对其进行

    2024年02月11日
    浏览(52)
  • Apache Kafka - 重识Kafka生产者

    Kafka 生产者是 Apache Kafka 中的一个重要组件,它负责将数据发送到 Kafka 集群中。在实时数据处理和流式处理应用程序中,Kafka 生产者扮演着非常重要的角色。 这里我们将介绍 Kafka 生产者的概念、工作原理以及如何使用 Kafka 生产者。 Kafka 生产者是一种用于将数据发送到 Kafk

    2024年02月05日
    浏览(42)
  • Apache Kafka - 构建数据管道 Kafka Connect

    Kafka Connect 是一个工具,它可以帮助我们将数据从一个地方传输到另一个地方。比如说,你有一个网站,你想要将用户的数据传输到另一个地方进行分析,那么你可以使用 Kafka Connect 来完成这个任务。 Kafka Connect 的使用非常简单。它有两个主要的概念 :source 和 sink 。Source 是

    2024年02月15日
    浏览(45)
  • Apache Kafka实战:超越数据边界-Apache Kafka在大数据领域的崭新征程【上进小菜猪大数据】

    上进小菜猪,沈工大软件工程专业,爱好敲代码,持续输出干货。 本文将介绍Apache Kafka在大数据领域的应用及其重要性,并提供一些代码实例来帮助读者更好地理解和应用Apache Kafka。文章主要包括以下几个方面:Apache Kafka的基本概念、Kafka在大数据处理中的角色、Kafka的架构

    2024年02月05日
    浏览(50)
  • 什么是Apache Kafka?

    Apache Kafka是一个开源的分布式事件流平台,用于高性能、可扩展和持久化的数据传输。它最初由LinkedIn公司开发,并于2011年贡献给Apache软件基金会,成为一个顶级开源项目。 Kafka的设计目标是提供一种可靠、高吞吐量的消息传递系统,以满足实时数据流处理和事件驱动架构的

    2024年02月15日
    浏览(39)
  • Apache Kafka Learning

    目录 一、Kafka 1、Message Queue是什么? 2、Kafka 基础架构 3、Kafka安装 4、Offset自动控制 5、Acks Retries 6、幂等性 7、事务控制 8、数据同步机制 9、Kafka-Eagle 二、Maven项目测试 1、Topic API 2、生产者消费者         Kafka是由Apache软件基金会开发的一个开源流处理平台,由 Scala和Ja

    2024年02月14日
    浏览(43)
  • Apache Kafka - 流式处理

    Kafka被广泛认为是一种强大的消息总线,可以可靠地传递事件流,是流式处理系统的理想数据来源。 流式处理系统通常是指一种处理实时数据流的计算系统,能够对数据进行实时的处理和分析,并根据需要进行相应的响应和操作 。与传统的批处理系统不同,流式处理系统能够

    2024年02月10日
    浏览(49)
  • Apache Kafka学习

    目录 一、简介 1.概念: 2.kafka四大API: 3.Kafka消费模式 4.Kafka的基础架构 5.kafka文件存储方式 二、特性 三、优点 1.解耦 2.异步处理 3.流量削峰 4.数据持久化 5.顺序保证 6.可恢复性 四、名词解释 五、QA Q:如何保证数据高可靠、不丢失? A:数据丢失的原因 解决方案 producer 生产消

    2024年02月09日
    浏览(40)
  • Apache Kafka 入门教程

    Apache Kafka 是由 Apache 软件基金会开发的一个开源流处理平台,用于处理实时的大规模数据流。Kafka 的目标是为了处理活跃的流式数据,包括传感器数据,网站日志,应用程序内部的消息,等等。它可以处理成千上万的消息,并让你迅速地处理和存储这些消息。在 Kafka 中,生产

    2024年02月15日
    浏览(51)
  • Spring for Apache Kafka Deep Dive – Part 2: Apache Kafka and Spring Cloud Stream

    On the heels of part 1 in this blog series, Spring for Apache Kafka – Part 1: Error Handling, Message Conversion and Transaction Support, here in part 2 we’ll focus on another project that enhances the developer experience when building streaming applications on Kafka: Spring Cloud Stream. We will cover the following in this post: Overview of Spring Clo

    2024年02月19日
    浏览(44)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包