首页 > Python资料 博客日记
Python向kafka发消息
2024-11-03 17:30:03Python资料围观30次
Python资料网推荐Python向kafka发消息这篇文章给大家,欢迎收藏Python资料网享受知识的乐趣
后端研发可以提供一个向kafka发消息的接口,用requests向接口post消息就行:
import requests
import json
import time
now = int(time.time())
n = 10
while n > 0:
tt = now - n * 60
data = {
"queue": "alarm-dog-alarm-dog-test",
"payload": "{\"test\":80,\"notice_time\":%d}" % tt
}
header = {"Content-Type": "application/json"}
res = requests.post(url="http://10.90.100.130:8088/v1/kafka/send", headers=header, data=json.dumps(data))
print(res.status_code)
print(res.content)
n -= 1
如果没有提供接口,可以借助python-kafka库连接kafka,模拟生产者向kafka发消息:
同步发送消息:
from kafka import KafkaProducer
import json
# 创建一个KafkaProducer实例,指定Kafka服务器地址
producer = KafkaProducer(bootstrap_servers='http://10.90.100.130:8088')
# 要发送的消息内容
message = {'test': 80, 'notice_time': 5}
# 将消息转换为JSON字符串格式(也可以是其他格式,如纯文本)
message_json = json.dumps(message)
# 发送消息到指定的Kafka主题,这里主题名称是'my_topic'
producer.send('alarm-dog-alarm-dog-test', value=message_json.encode('utf - 8'))
# 确保所有消息都已发送
producer.flush()
# 关闭生产者连接
producer.close()
异步发送消息
from kafka import KafkaProducer
import json
import time
# 创建一个KafkaProducer实例,设置异步发送和回调函数
producer = KafkaProducer(bootstrap_servers='http://10.90.100.130:8088',
acks='all',
retries=3,
value_deliver_callback=lambda m: print(f"消息已发送到主题{m.topic()},分区{m.partition()}"))
# 要发送的消息内容
message = {'test': 80, 'notice_time': 6}
message_json = json.dumps(message)
# 异步发送消息到'my_topic'主题
future = producer.send('alarm-dog-alarm-dog-test', value=message_json.encode('utf - 8'))
try:
record_metadata = future.get(timeout=10)
print(f"消息已发送到主题{record_metadata.topic()},分区{record_metadata.partition()},偏移量{record_metadata.offset()}")
except Exception as e:
print(f"发送消息时出错: {e}")
# 关闭生产者连接
producer.close()
版权声明:本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:jacktools123@163.com进行投诉反馈,一经查实,立即删除!
标签:
相关文章
最新发布
- 【Python】selenium安装+Microsoft Edge驱动器下载配置流程
- Python 中自动打开网页并点击[自动化脚本],Selenium
- Anaconda基础使用
- 【Python】成功解决 TypeError: ‘<‘ not supported between instances of ‘str’ and ‘int’
- manim边学边做--三维的点和线
- CPython是最常用的Python解释器之一,也是Python官方实现。它是用C语言编写的,旨在提供一个高效且易于使用的Python解释器。
- Anaconda安装配置Jupyter(2024最新版)
- Python中读取Excel最快的几种方法!
- Python某城市美食商家爬虫数据可视化分析和推荐查询系统毕业设计论文开题报告
- 如何使用 Python 批量检测和转换 JSONL 文件编码为 UTF-8
点击排行
- 版本匹配指南:Numpy版本和Python版本的对应关系
- 版本匹配指南:PyTorch版本、torchvision 版本和Python版本的对应关系
- Python 可视化 web 神器:streamlit、Gradio、dash、nicegui;低代码 Python Web 框架:PyWebIO
- 相关性分析——Pearson相关系数+热力图(附data和Python完整代码)
- Python与PyTorch的版本对应
- Anaconda版本和Python版本对应关系(持续更新...)
- Python pyinstaller打包exe最完整教程
- Could not build wheels for llama-cpp-python, which is required to install pyproject.toml-based proj