基于python实现MQTT发布订阅过程原理解析
mqtt简介
mqtt 全称为 message queuing telemetry transport(消息队列遥测传输)是一种基于发布/订阅范式的“轻量级”消息协议。该协议构建于tcp/ip协议上。
mqtt协议是轻量、简单、开放和易于实现的,这些特点使它适用范围非常广泛。在很多情况下,包括受限的环境中,如:机器与机器(m2m)通信和物联网(iot)。
其在,通过卫星链路通信传感器、偶尔拨号的医疗设备、智能家居、及一些小型化设备中已广泛使用。
mqtt特点
1、使用发布/订阅消息模式,提供一对多的消息发布,解除应用程序耦合。该协议需要客户端和服务端,而协议中主要有三种身份:发布者(publisher)、代理(broker,服务器)、订阅者(subscriber)。其中,消息的发布者和订阅者都是客户端,消息代理是服务器,而消息发布者可以同时是订阅者,实现了生产者与消费者的脱耦;
2、对负载内容屏蔽的消息传输;
3、使用 tcp/ip 提供网络连接;
4、有三种消息发布服务质量:
- “至多一次”,消息发布完全依赖底层 tcp/ip 网络。会发生消息丢失或重复。这一级别可用于如下情况,环境传感器数据,丢失一次读记录无所谓,因为不久后还会有第二次发送。
- “至少一次”,确保消息到达,但消息重复可能会发生。
- “只有一次”,确保消息到达一次。这一级别可用于如下情况,在计费系统中,消息重复或丢失会导致不正确的结果。
5、小型传输,开销很小(固定长度的头部是 2 字节),协议交换最小化,以降低网络流量;
6、使用 last will 和 testament 特性通知有关各方客户端异常中断的机制。
原理
mqtt协议有三种身份:发布者、代理、订阅者,发布者和订阅者都为客户端,代理为服务器,同时消息的发布者也可以是订阅者(为了节约内存和流量发布者和订阅者一般都会定义在一起)。
mqtt传输的消息分为主题(topic,可理解为消息的类型,订阅者订阅后,就会收到该主题的消息内容(payload))和负载(payload,可以理解为消息的内容)两部分。
1.mqtt协议实现方式
实现mqtt协议需要客户端和服务器端通讯完成,在通讯过程中,mqtt协议中有三种身份:发布者(publish)、代理(broker)(服务器)、订阅者(subscribe)。其中,消息的发布者和订阅者都是客户端,消息代理是服务器,消息发布者可以同时是订阅者。
mqtt传输的消息分为:主题(topic)和负载(payload)两部分:
(1)topic,可以理解为消息的类型,订阅者订阅(subscribe)后,就会收到该主题的消息内容(payload);
(2)payload,可以理解为消息的内容,是指订阅者具体要使用的内容。
2.网络传输与应用消息
mqtt会构建底层网络传输:它将建立客户端到服务器的连接,提供两者之间的一个有序的、无损的、基于字节流的双向传输。
当应用数据通过mqtt网络发送时,mqtt会把与之相关的服务质量(qos)和主题名(topic)相关连。
3.mqtt客户端
一个使用mqtt协议的应用程序或者设备,它总是建立到服务器的网络连接。客户端可以:
(1)发布其他客户端可能会订阅的信息;
(2)订阅其它客户端发布的消息;
(3)退订或删除应用程序的消息;
(4)断开与服务器连接。
4.mqtt服务端
mqtt服务器以称为"消息代理"(broker),可以是一个应用程序或一台设备。它是位于消息发布者和订阅者之间,它可以:
(1)接受来自客户的网络连接;
(2)接受客户发布的应用信息;
(3)处理来自客户端的订阅和退订请求;
(4)向订阅的客户转发应用程序消息。
5.mqtt协议中的订阅、主题、会话
一、订阅(subscription)
订阅包含主题筛选器(topic filter)和最大服务质量(qos)。订阅会与一个会话(session)关联。一个会话可以包含多个订阅。每一个会话中的每个订阅都有一个不同的主题筛选器。
二、会话(session)
每个客户端与服务器建立连接后就是一个会话,客户端和服务器之间有状态交互。会话存在于一个网络之间,也可能在客户端和服务器之间跨越多个连续的网络连接。
三、主题名(topic name)
连接到一个应用程序消息的标签,该标签与服务器的订阅相匹配。服务器会将消息发送给订阅所匹配标签的每个客户端。
四、主题筛选器(topic filter)
一个对主题名通配符筛选器,在订阅表达式中使用,表示订阅所匹配到的多个主题。
五、负载(payload)
消息订阅者所具体接收的内容。
6.mqtt协议中的方法
mqtt协议中定义了一些方法(也被称为动作),来于表示对确定资源所进行操作。这个资源可以代表预先存在的数据或动态生成数据,这取决于服务器的实现。通常来说,资源指服务器上的文件或输出。主要方法有:
(1)connect。等待与服务器建立连接。
(2)disconnect。等待mqtt客户端完成所做的工作,并与服务器断开tcp/ip会话。
(3)subscribe。等待完成订阅。
(4)unsubscribe。等待服务器取消客户端的一个或多个topics订阅。
(5)publish。mqtt客户端发送消息请求,发送完成后返回应用程序线程。
7.应用场景
因为它传输消息具有异步性(发布订阅模式),同时该协议本身的轻量特定,因此可用于轻量级应用,
可作为物联网的通信组件使用,例如树莓派上完全可以搭建一个mqtt服务器,当未来智能家居全面普及的时候,
家居中的消息通讯都可用此实现,如智能冰箱温度检测,房间温度检测等信息都能通过mqtt去实现,遥感数据、
汽车检测数据、智能家居、智慧城市、医疗医护都具有应用场景。
客户端
#!/usr/bin/env python # encoding: utf-8 """ @version: v1.0 @author: w_h_j @license: apache licence @contact: 415900617@qq.com @software: pycharm @file: clicentmqtttest.py @time: 2019/2/22 14:19 @describe: mqtt客户端 """ import json import sys import os import paho.mqtt.client as mqtt import time sys.path.append(os.path.abspath(os.path.dirname(__file__) + '/' + '..')) sys.path.append("..") task_topic = 'test' # 客户端发布消息主题 client_id = time.strftime('%y%m%d%h%m%s', time.localtime(time.time())) """ client_id是连接到代理。如果client_id的长度为零或为零,则行为为由使用的协议版本定义。如果使用mqtt v3.1.1, 那么一个零长度的客户机id将被发送到代理,代理将被发送为客户端生成一个随机变量。如果使用mqtt v3.1,那么id将是 随机生成的。在这两种情况下,clean_session都必须为true。如果这在这种情况下不会产生valueerror。 注意:一般情况下如果客户端服务端启用两个监听那么客户端client_id 不能与服务器相同,如这里用时间"20190222142358"作为它的id, 如果与服务器id相同,则无法接收到消息 """ client = mqtt.client(client_id, transport='tcp') client.connect("127.0.0.1", 1883, 60) # 此处端口默认为1883,通信端口期keepalive默认60 client.loop_start() def clicent_main(message: str): """ 客户端发布消息 :param message: 消息主体 :return: """ time_now = time.strftime('%y-%m-%d %h-%m-%s', time.localtime(time.time())) payload = {"msg": "%s" % message, "data": "%s" % time_now} # publish(主题:topic; 消息内容) client.publish(task_topic, json.dumps(payload, ensure_ascii=false)) print("successful send message!") return true if __name__ == '__main__': msg = "我是一条测试数据!" clicent_main(msg) client
服务端
#!/usr/bin/env python # encoding: utf-8 """ @version: v1.0 @author: w_h_j @license: apache licence @contact: 415900617@qq.com @software: pycharm @file: servermqtttest.py @time: 2019/2/22 14:35 @describe: mqtt 服务端 """ import json import sys import os import time import paho.mqtt.client as mqtt sys.path.append(os.path.abspath(os.path.dirname(__file__) + '/' + '..')) sys.path.append("..") report_topic = 'test' # 主题 def on_connect(client, userdata, flags, rc): print('connected to mqtt with resurt code ', rc) client.subscribe(report_topic) # 订阅主题 def on_message(client, userdata, msg): """ 接收客户端发送的消息 :param client: 连接信息 :param userdata: :param msg: 客户端返回的消息 :return: """ print("start server!") payload = json.loads(msg.payload.decode('utf-8')) print(payload) def server_conenet(client): client.on_connect = on_connect # 启用订阅模式 client.on_message = on_message # 接收消息 client.connect("127.0.0.1", 1883, 60) # 链接 # client.loop_start() # 以start方式运行,需要启动一个守护线程,让服务端运行,否则会随主线程死亡 client.loop_forever() # 以forever方式阻塞运行。 def server_stop(client): client.loop_stop() # 停止服务端 sys.exit(0) def server_main(): client_id = time.strftime('%y%m%d%h%m%s', time.localtime(time.time())) client = mqtt.client(client_id, transport='tcp') server_conenet(client) if __name__ == '__main__': # 启动监听 server_main() server
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。