博客
关于我
Python 解决粘包的问题
阅读量:753 次
发布时间:2019-03-23

本文共 2589 字,大约阅读时间需要 8 分钟。

为了更好地微调客户端和服务器代码,提高其连接的稳定性和兼容性,可以按照以下步骤进行优化:

客户端代码优化:

  • 数据接收优化:客户端改用逐次接收数据的方式,以确保完整性。修改代码如下:
    # client.pyimport socketimport structphone = socket.socket(socket.AF_INET, socket.SOCK_STREAM)phone.connect(('127.0.0.1', 9909))while True:    cmd = input('> : ').strip()    if not cmd:        continue    phone.send(cmd.encode('utf-8'))    header = struct.pack('i', (len(cmd.encode('utf-8')) + 1024))  # 预留头信息    phone.send(header)    total_size = header[3]  # 获取大小    recv_data = b''    recv_size = 0    while recv_size < total_size:        res = phone.recv(1024)        if not res:            break        recv_data += res        recv_size += len(res)    print(recv_data.decode('utf-8'), end='\n')phone.close()
  • 2. ** socket 设置优化**:设置socket选项,使其在多次连接时更稳定,调整socket选项:   ```python   phone.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)   phone.bind(('0.0.0.0', 9909))

    服务端代码优化:

  • SSL/TLS 配置:建议为通信加密,提高安全性:
    # server.pyimport socketimport subprocessimport structphone = socket.socket(socket.AF_INET, socket.SOCK_STREAM)phone.bind(('0.0.0.0', 9909))phone.listen(5)print('Starting...')while True:    conn, client_addr = phone.accept()    client_addr_str = str(client_addr)    print(f'Connected by {client_addr_str}')    with conn:        while True:            try:                cmd = conn.recv(8096).decode('utf-8')                if not cmd:                    break                obj = subprocess.Popen(                    cmd, shell=False, stdout=subprocess.PIPE,                    stderr=subprocess.PIPE,                    text=True                )                stdout = obj.stdout.read()                stderr = obj.stderr.read()                header = struct.pack('i', len(stdout) + len(stderr))                conn.sendall(header)                conn.sendall(stdout.encode('utf-8') + stderr.encode('utf-8'))            except ConnectionResetError:                breakphone.close()
  • 2. **线程管理优化**:使用with语句确保socket及相关资源自动释放,避免资源泄漏:   ```python   with conn:       # 处理连接逻辑
    1. 命令安全处理:限制命令执行权限,避免恶意攻击:

      max_cmd_len = 1024if len(cmd) > max_cmd_len:    cmd = cmd[:max_cmd_len]obj = subprocess.Popen(    cmd,    shell=False,    stderr=subprocess.PIPE,    stdout=subprocess.PIPE,    text=True)
    2. 数据发送优化:防止数据丢包,使用sendall:

      conn.sendall(header)conn.sendall(stdout + stderr)
    3. 模型示例调整

      • 确保在网络环境中,双方都具有访问所用端口的权限。
      • 部分环境下,较高的socket选项设置有助于连接稳定性。
      • 增加错误处理机制,如超时设置:
        phone.setsocketoption(socket.SOL_SOCKET, socket.SO_KEEPALIVE, 600)

      本地测试建议

    4. netcat 测试连接:
      nc -zvz 127.0.0.1 9909
    5. 检查防火墙设置,判断端口是否开启。
    6. 查看网络设备(如路由器)是否阻止该端口的流量。
    7. 总结:通过以上优化措施,客户端/服务器代码应能更加稳定可靠,适用于更广泛的用途。建议进行逐步测试,确保每个部分正常工作后再整合运行。如有继续问题,请详细记录日志和错误信息,供进一步分析。

    转载地址:http://xdyzk.baihongyu.com/

    你可能感兴趣的文章
    NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表或全表增量同步_实现指定整库同步_或指定数据表同步配置_04---大数据之Nifi工作笔记0056
    查看>>
    NIFI1.23.2_最新版_性能优化通用_技巧积累_使用NIFI表达式过滤表_随时更新---大数据之Nifi工作笔记0063
    查看>>
    NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_根据binlog实现数据实时delete同步_实际操作04---大数据之Nifi工作笔记0043
    查看>>
    NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置binlog_使用处理器抓取binlog数据_实际操作01---大数据之Nifi工作笔记0040
    查看>>
    NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_实现数据插入数据到目标数据库_实际操作03---大数据之Nifi工作笔记0042
    查看>>
    NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_生成插入Sql语句_实际操作02---大数据之Nifi工作笔记0041
    查看>>
    NIFI从MySql中离线读取数据再导入到MySql中_03_来吧用NIFI实现_数据分页获取功能---大数据之Nifi工作笔记0038
    查看>>
    NIFI从MySql中离线读取数据再导入到MySql中_不带分页处理_01_QueryDatabaseTable获取数据_原0036---大数据之Nifi工作笔记0064
    查看>>
    NIFI从MySql中离线读取数据再导入到MySql中_无分页功能_02_转换数据_分割数据_提取JSON数据_替换拼接SQL_添加分页---大数据之Nifi工作笔记0037
    查看>>
    NIFI从PostGresql中离线读取数据再导入到MySql中_带有数据分页获取功能_不带分页不能用_NIFI资料太少了---大数据之Nifi工作笔记0039
    查看>>
    nifi使用过程-常见问题-以及入门总结---大数据之Nifi工作笔记0012
    查看>>
    NIFI分页获取Mysql数据_导入到Hbase中_并可通过phoenix客户端查询_含金量很高的一篇_搞了好久_实际操作05---大数据之Nifi工作笔记0045
    查看>>
    NIFI分页获取Postgresql数据到Hbase中_实际操作---大数据之Nifi工作笔记0049
    查看>>
    NIFI同步MySql数据_到SqlServer_错误_驱动程序无法通过使用安全套接字层(SSL)加密与SQL Server_Navicat连接SqlServer---大数据之Nifi工作笔记0047
    查看>>
    Nifi同步过程中报错create_time字段找不到_实际目标表和源表中没有这个字段---大数据之Nifi工作笔记0066
    查看>>
    NIFI大数据进阶_FlowFile拓扑_对FlowFile内容和属性的修改删除添加_介绍和描述_以及实际操作---大数据之Nifi工作笔记0023
    查看>>
    NIFI大数据进阶_FlowFile生成器_GenerateFlowFile处理器_ReplaceText处理器_处理器介绍_处理过程说明---大数据之Nifi工作笔记0019
    查看>>
    NIFI大数据进阶_Json内容转换为Hive支持的文本格式_操作方法说明_01_EvaluteJsonPath处理器---大数据之Nifi工作笔记0031
    查看>>
    NIFI大数据进阶_Kafka使用相关说明_实际操作Kafka消费者处理器_来消费kafka数据---大数据之Nifi工作笔记0037
    查看>>
    NIFI大数据进阶_Kafka使用相关说明_实际操作Kafka生产者---大数据之Nifi工作笔记0036
    查看>>