首页 / PYTHON / Python学习日记(三十一) 黏包问题

Python学习日记(三十一) 黏包问题

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Python学习日记(三十一) 黏包问题，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含6539字，纯文字阅读大概需要10分钟。

内容图文

            import
             subprocess

res = subprocess.Popen(‘dir‘,shell=True,stdout=subprocess.PIPE,stderr=subprocess.PIPE)
print(‘Stdout:‘,res.stdout.read().decode(‘gbk‘))
print(‘Stderr:‘,res.stderr.read().decode(‘gbk‘))

PIPE把输出的东西装到一个‘水管‘里,如果在windows中的编码格式是gbk,执行结果:

            Stdout:  驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录

2019/09/16  13:48    <DIR>          .
2019/09/16  13:48    <DIR>          ..
2019/09/16  13:47    <DIR>          .idea
2019/09/16  13:46                21 Client1.py
2019/09/16  13:42                 0 Client2.py
2019/09/16  13:48               207 Sever1.py
2019/09/16  01:41                70 time_test.py
2019/09/14  23:51    <DIR>          venv
               4 个文件            298 字节
               4 个目录 45,863,636,992 可用字节

Stderr:

在这里也可以使用os.popen()但是它会不管正确和错误的结果都放在一起,而用subprocess能够分别拿到正确和错误的信息

基于TCP实现的黏包

Sever:

            import
             socket
sk = socket.socket()
sk.bind((‘127.0.0.1‘,8092))
sk.listen()
conn,addr = sk.accept()
while True:
    cmd = input(‘<<<‘)
    conn.send(cmd.encode(‘gbk‘))
    ret = conn.recv(1024).decode(‘gbk‘)
    print(ret)
conn.close()
sk.close()

Client:

            import
             socket

            import
             subprocess
sk = socket.socket()
sk.connect((‘127.0.0.1‘,8092))
while True:
    cmd = sk.recv(1024).decode(‘gbk‘)
    ret = subprocess.Popen(cmd,shell=True,stdout=subprocess.PIPE,stderr=subprocess.PIPE)
    std_out = ‘stdout:‘ + (ret.stdout.read()).decode(‘gbk‘)
    std_err = ‘stderr:‘ + (ret.stderr.read()).decode(‘gbk‘)
    print(std_out)
    print(std_err)
    sk.send(std_out.encode(‘gbk‘))
    sk.send(std_err.encode(‘gbk‘))
sk.close()

执行结果:

Sever:

<<<dir;ls
stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录


<<<ipconfig
stderr:找不到文件

<<<

Client:

            stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录


stderr:找不到文件

stdout:
Windows IP 配置


以太网适配器 Bluetooth 网络连接 2:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

以太网适配器 本地连接:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

无线局域网适配器 无线网络连接:

   连接特定的 DNS 后缀 . . . . . . . : 
   本地链接 IPv6 地址. . . . . . . . : fe80::8c6:36a9:6fa6:8018%14
   IPv4 地址 . . . . . . . . . . . . : 192.168.43.216
   子网掩码  . . . . . . . . . . . . : 255.255.255.0
   默认网关. . . . . . . . . . . . . : 192.168.43.1

隧道适配器 本地连接* 3:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

stderr:

当我们在sever端输入dir;ls命令时,只有stdout的结果跑出来,而当我们输入ipconfig这个命令时,系统将上一次dir;ls未执行完的stderr的结果给跑出来。像这样没有接受完全或者接受多了的就是黏包现象。

TCP会有黏包现象但是它不丢包。

基于UDP实现的黏包

Sever:

            import
             socket
sk = socket.socket(type=socket.SOCK_DGRAM)
sk.bind((‘127.0.0.1‘,8092))
msg,addr = sk.recvfrom(10240)

while 1:
    cmd = input(‘<<<‘)
    if cmd == ‘q‘:
        break
    sk.sendto(cmd.encode(‘gbk‘),addr)
    msg,addr = sk.recvfrom(10240)
    print(msg.decode(‘gbk‘))

sk.close()

Client:

            import
             socket

            import
             subprocess
sk = socket.socket(type=socket.SOCK_DGRAM)
addr = (‘127.0.0.1‘,8092)
sk.sendto(‘Start‘.encode(‘utf-8‘),addr)
while 1:
    cmd,addr = sk.recvfrom(10240)
    ret = subprocess.Popen(cmd.decode(‘gbk‘),shell=True,stderr=subprocess.PIPE,stdout=subprocess.PIPE)
    std_out = ‘Stdout:‘ + (ret.stdout.read()).decode(‘gbk‘)
    std_err = ‘Stderr:‘ + (ret.stderr.read()).decode(‘gbk‘)
    print(std_out)
    print(std_err)
    sk.sendto(std_out.encode(‘gbk‘),addr)
    sk.sendto(std_err.encode(‘gbk‘),addr)
sk.close()

执行结果:

Sever:

<<<dir;ls
Stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录


<<<dir
Stderr:找不到文件

<<<ipconfig
Stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录

2019/09/16  14:43    <DIR>          .
2019/09/16  14:43    <DIR>          ..
2019/09/16  14:37    <DIR>          .idea
2019/09/16  14:43               553 Client1.py
2019/09/16  13:42                 0 Client2.py
2019/09/16  14:43               306 Sever1.py
2019/09/16  01:41                70 time_test.py
2019/09/14  23:51    <DIR>          venv
               4 个文件            929 字节
               4 个目录 45,855,449,088 可用字节

<<<pwd
Stderr:
<<<ip
Stdout:
Windows IP 配置


以太网适配器 Bluetooth 网络连接 2:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

以太网适配器 本地连接:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

无线局域网适配器 无线网络连接:

   连接特定的 DNS 后缀 . . . . . . . : 
   本地链接 IPv6 地址. . . . . . . . : fe80::8c6:36a9:6fa6:8018%14
   IPv4 地址 . . . . . . . . . . . . : 192.168.43.216
   子网掩码  . . . . . . . . . . . . : 255.255.255.0
   默认网关. . . . . . . . . . . . . : 192.168.43.1

隧道适配器 本地连接* 3:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

<<<

Client:

            Stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录


Stderr:找不到文件

Stdout: 驱动器 C 中的卷是 系统
 卷的序列号是 85C0-669A

 C:\Users\Administrator\PycharmProjects\Internet_program 的目录

2019/09/16  14:43    <DIR>          .
2019/09/16  14:43    <DIR>          ..
2019/09/16  14:37    <DIR>          .idea
2019/09/16  14:43               553 Client1.py
2019/09/16  13:42                 0 Client2.py
2019/09/16  14:43               306 Sever1.py
2019/09/16  01:41                70 time_test.py
2019/09/14  23:51    <DIR>          venv
               4 个文件            929 字节
               4 个目录 45,855,449,088 可用字节

Stderr:
Stdout:
Windows IP 配置


以太网适配器 Bluetooth 网络连接 2:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

以太网适配器 本地连接:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

无线局域网适配器 无线网络连接:

   连接特定的 DNS 后缀 . . . . . . . : 
   本地链接 IPv6 地址. . . . . . . . : fe80::8c6:36a9:6fa6:8018%14
   IPv4 地址 . . . . . . . . . . . . : 192.168.43.216
   子网掩码  . . . . . . . . . . . . : 255.255.255.0
   默认网关. . . . . . . . . . . . . : 192.168.43.1

隧道适配器 本地连接* 3:

   媒体状态  . . . . . . . . . . . . : 媒体已断开
   连接特定的 DNS 后缀 . . . . . . . : 

Stderr:
Stdout:
Stderr:‘pwd‘ 不是内部或外部命令，也不是可运行的程序
或批处理文件。

Stdout:
Stderr:‘ip‘ 不是内部或外部命令，也不是可运行的程序
或批处理文件。

可以看出UDP不会有黏包现象,会产生丢包现象,没发完就不发了,不完整也不可靠。

黏包成因

TCP协议的数据传送

拆包机制

当发送端缓冲区的长度大于网卡的MTU时,TCP会将这次发送的数据拆成几个数据包发送出去。MTU是Maximum Transmission Unit的缩写,意思是网络上传送最大数据包,MTU是字节单位,大部分网络设备的MTU都是1500.如果本机的MTU比网关的MTU大,大的数据包就会被拆开来传送,这样会产生很多数据包碎片,增加丢包率,降低网络速度。

在正常情况下它的拆包可理解为:

技术分享图片

面向流的通信特点和Nagle算法

TCP(transport control protocol,传输控制协议),是面向连接的,面向流的,提供高可靠性的服务。收发两端(客户端和服务端)都要有一一成对的socket,因此发送端为了将多个发往接收端的包,更有效地发往对方,使用了优化算法(Nagle算法),将多次间隔较小且数据量小的数据,合并成一个大的数据块,然后进行封包。这样接收端就难于分辨出来了,必须提供科学的拆包机制。即面向流的通信是无消息保护边界的。

对于空消息:TCP是基于数据流的,于是收发消息不能为空,这就需要在客户端和服务端都添加空消息的处理机制,防止程序卡住,而UDP协议是基于数据报的,即便是你输入的是空内容(直接回车),也可以被发送,UDP协议会帮你封装上消息然后发出去。

可靠黏包的TCP协议:TCP协议数据不会丢,没有收完包,就会下次接收,会继续上次继续接受。

基于tcp协议特点的黏包现象成因

技术分享图片

当我们在socket服务端发送值1、2,然后根据优化算法,它会把1先放到这个缓存当中等一等,然后再把2一起封装起来,然后再发出去,因此我们看到的就是黏包现象

这种现象的表面现象是两个send太近且发送的消息太短

发送端可以使1K1K地发送数据,而接收端的应用程序可以两K两K地提走数据,当然也有可能一次提走3K或6K数据,或者一次只提走几个字节的数据。也就是说,应用程序所看到的数据是一个整体,或者说是一个流(stream),一条消息有多少字节对应程序是不可见的,因此TCP协议是面向流的协议,这也是容易出现黏包问题的原因。而UDP协议是面向消息的协议,每个UDP段都是一条消息,应用程序必须以消息单位提取数据,不能一次提取任意字节的数据,这一点和TCP是很不同的。

解决黏包的方法

...

原文：https://www.cnblogs.com/Fantac/p/11527758.html

内容总结

以上是互联网集市为您收集整理的Python学习日记(三十一) 黏包问题全部内容，希望文章能够帮你解决Python学习日记(三十一) 黏包问题所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1302470.html

来源：【匿名】

【上一篇】Python自动化运维学习笔记【下一篇】浅谈PHP运行Python脚本的方法

更多 ►

【Python学习日记(三十一) 黏包问题】教程文章相关的互联网学习教程文章

Python学习二【代码】

最近写了一点Python代码，作为一个java程序员，面对Python这么便捷的语言不禁有点激动。不过呢，有时候也会遇到一些无法理解的东西。例如：er = [[1,2,3],[4,5,6],[7,8,9]] print(er)#此处有一处莫名奇妙的错误，如果print(er)这条语句前面有空格的话，#则会报错"unexpected indent",若去掉空格则运行成功#暂时还不了解python的运行机制 cols = [row[1] for row in er]#解释一下“row[1] for row in er” 的意思#row[1] 为第1行应...

Python学习---Python的异步---asyncio模块(no-http)【代码】【图】

Asyncio进行异步IO请求操作：1. @asyncio.coroutine 装饰任务函数2. 函数内配合yield from 和装饰器@asyncio.coroutine 配合使用【固定格式】3. loop = asyncio.get_event_loop()loop.run_until_complete(asyncio.gather(*tasks)) # 接受异步IO的任务并异步执行任务实例一：异步IO：协程机制 + 回调函数import asyncio@asyncio.coroutine # 装饰任务函数 def func1():print(‘before...func1......‘)# yield from 和装饰器@asy...

Python 学习笔记02【控制流】

2.1 布尔值（首字符大写）TrueFalse2.2 比较操作符操作符含义==等于，用于比较!=不等于>大于<小于<=小于等于>=大于等于2.3 布尔操作符andornot2.4 混合布尔和比较操作符>>> (4>8) and (5>0)False2.5 控制流的元素控制条件代码块所仅增加，代码块开始代码块可以包含其他代码块缩进为零，或减少为外面包围代码块的缩进，代码块结束2.7 控制流语句2.7.1 if 语句if 控制条件 :　　if子句2.7.2 else语句else ：　　else子句2.7.3 elif ...

python学习之继承和多态【代码】

#!/home/miao/python python3 # -*- coding: utf-8 -*-‘这是关于继承和多态‘class Parent(object):def__init__(self,name,age):self.__name = nameself.age = agedef get_name(self):print(self.__name)def set_name(self,name):self.__name = namedef run(self):print(‘dad running...‘)class ChildOne(Parent):def run(self):print(‘child running...‘) #这里类ChildOne从父类中继承了其中的函数定义，这是自己定义的一种...

PYTHON学习0033：函数---装饰器---2019-6-26

软件开发原则：1、封闭：已经实现的功能代码块不应该被修改。2、开放：对现有功能的扩展开放。由于此内容重实际操作，难以文字表述，相关内容查询以下链接：https://www.cnblogs.com/alex3714/articles/5765046.html原文：https://blog.51cto.com/13543767/2413733

Python学习笔记：time模块的使用【代码】

在使用python的过程中，很多情况下会使用到日期时间，在Python的自建函数中，包含time模块，用来处理与日期时间相关的功能。1、time.time()　　time()：不能传参数　　用来获取时间戳（即：从1970年1月1日 00：00：00到现在时间的秒数）2、time.localtime()　　localtime()：　　默认获取当前时间的信息，返回格式为元组　　也可以指定具体的时间戳　　如：time.localtime()　　返回当前的时间信息：　　timestr=time.struct_time(...

Python学习笔记21：file【图】

原文：https://www.cnblogs.com/chickenwrap/p/10166394.html

[Python学习]Python学习资料汇总

Python其实很简单，入门+提高看一些简单的教程就能学会，这里列出一些比较好的资料：廖雪峰博客https://www.liaoxuefeng.com/wiki/0014316089557264a6b348958f449949df42a6d3a2e542c000传智播客教程http://ccszt.com.cn/python/原文：https://www.cnblogs.com/DarrenChan/p/10204497.html

selenium+python学习——弹出框【代码】【图】

1、alert警告框以百度搜索设置为例，在进行搜索设置后点击“保存设置”按钮，弹出alert对话框，如下图所示：实现代码：from selenium import webdriver import time as t from selenium.webdriver.support.select import Select from selenium.webdriver.common.keys import Keys from selenium.webdriver.common.action_chains import ActionChains from selenium.webdriver.support.wait import WebDriverWait from selenium....

python学习之-os和sys模块

import sysprint(sys.argv) #默认获取当前文件的路径import osos.getcwd() 获取当前工作目录，即当前python脚本工作的目录路径 os.chdir("dirname") 改变当前脚本工作目录；相当于shell下cd os.curdir 返回当前目录: (‘.‘) os.pardir 获取当前目录的父目录字符串名：(‘..‘) os.makedirs(‘dirname1/dirname2‘) 可生成多层递归目录 os.removedirs(‘dirname1‘) 若目录为空，则删除，并递归到上一级目录，如若也为空...

python学习笔记【图】

类的定义：pass关键字：什么也不做类的方法：python类的方法定义中，每个方法的第一个参数是self,表明该方法调用时不需要实参实例的创建：如: 对象的初始化方法_init_()：1.当类被调用后，python将创建实例对象2.创建完对象后，Python自动调用的第一个方法为_init_()3.实例对象作为方法的第一个参数(self)被传递进去，调用类创建实例对象时的参数都传给_init_()类属性：Control->Button->BitmapButtonpython支持多继承python中的重...

Python学习-baseNo.1

一、简介：python:脚本语言、解释型语言运维人员必备语言，目前应用领域非常广泛，未来前景广阔。缩进是python语法中很重要的一点。 python3是未来的发展趋势二、python安装： windows： 1、下载安装包： https://www.python.org/downloads/ 2、安装：默认安装路径：C:\python2.7 3、配置环境变量【右键计算机】--》【属性】--》【高级系统设置】--》【高级】--》【环境变量】--》【在第二个内容框...

【转】Python3学习笔记（urllib模块的使用）【代码】

原文地址：https://www.cnblogs.com/Lands-ljk/p/5447127.html1.基本方法urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)- url: 需要打开的网址- data：Post提交的数据- timeout：设置网站的访问超时时间直接用urllib.request模块的urlopen（）获取页面，page的数据格式为bytes类型，需要decode（）解码，转换成str类型。1 from urllib...

Python学习记录（四）

1、字典（内部项没有顺序） P78 　　字典的键可以是数字、字符串、元组2、创建字典和使用　　（1）创建字典　　　　>>> dict = {‘yilia‘:"123", "mac": "234", "joice":"eeee"} 　　　　>>> dict 　　　　{‘yilia‘: ‘123‘, ‘mac‘: ‘234‘, ‘joice‘: ‘eeee‘} 　　　　dict函数创建：通过映射其它字典或者（键，值）这项的序列建立字典　　　　　　>>> item = [(‘name‘, ‘yilia‘), (‘phone‘, "1...

Python学习经验汇总

@解决excel中sheet为中文提示acii乱码问题workbook = xlwt.Workbook(encoding = ‘utf-8‘) #encoding 引入编码sheet = workbook.add_sheet(key,cell_overwrite_ok=True)@python学习经验-http://mp.weixin.qq.com/s/uLKHMaKPoetprAmdHho09A-知识点了解了如何检验？向别人解释清楚了才算-有效学习方法？自己造轮子或者看开源代码github-造轮子前提是，有助于解决工作中问题、做有意义的项目@报错提示说明urllib2.URLError: <url...

首页 / PYTHON / Python学习日记(三十一) 黏包问题

Python学习日记(三十一) 黏包问题

内容导读

内容图文

内容总结

内容备注

内容手机端

【Python学习日记(三十一) 黏包问题】教程文章相关的互联网学习教程文章

PYTHON学习 - 相关标签

PYTHON - 技术教程分类

PYTHON - 最新教程

PYTHON - 最热教程