TCP/IP网络编程之数据包协议
一、概要
在了解了网络字节序之后,接下来就是要讲最最重点的消息协议。数据包是什么呢,数据包可以理解为两个人讲电话说的每一句话的内容。通过大家约定好的方式去理解。达到只有接听电话两个人才懂的东西。在程序中如何体现出来呢,那么接着往下看。
技术交流QQ群:580749909 欢迎交流有问必答,文章尾有个人的微信公众号有兴趣的小伙伴多多关注。
二、简介

消息数据包主要是以二进制数组的形式存在,主要分为4个部分。
校验位:校验是否是双方约定好的“暗号”,如果校验位都不通过就没必要再继续往下解析节约处理时间。
消息头:是描述整个消息长度以及其它附加信息。
消息体:描述消息的具体内容,比如说想获取“股票历史行情数据”这些具体想得到的内容序列化之后存放在消息体中。
消息尾:通常用来描述整个消息的结束,主要还是需要看应用场景消息尾可以不需要。
三、主要内容
代码设计层面来说大致是基于以上的路线来走,首先我们脑子里有一个概念
1.消息是一个整体,这个整体分为四个部分(校验位、消息头、消息体、消息尾)
2.实际传输时以byte数组(二进制)的形式进行传递,将要写入的内容转换为字节按照顺序依次写入数组。解析同样按照这个规则解析再转为具体内容。
3.数据格式,上一条提到了二进制形式传递那怎么把你要传的数据以一种标准的方式发送出去呢。这里举例几种数据格式json 还有 protobuf。推荐用protobuf序列化速度快数据包压缩的体积更小。
4.大端小端的约定,服务方和客户方约好我们传输写入字节序的大小端。推荐统一用大端。
5.代码设计
6.数据包的读取顺序,是从校验位依次往后读取至消息尾。
四、代码设计
第一步,声明一个接口来定义数据包基础结构。
public interface IPacket
{
byte[] Serialize(); void Deserialize(ref byte[] data);
}
第二步,分别定义响应(Respone)和请求(Request)数据包结构
响应(Respone)
public class RpcRespone<TMessage> : IPacket
where TMessage : IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头18个字节
/// </summary>
public RespHeader Header { get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[+Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + RespHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , RespHeader.Length);
Header = new RespHeader();
Header.Deserialize(ref header);
var body = BytesReader.ReadBuffer(ref data, + RespHeader.Length, Length - RespHeader.Length);
var json = Encoding.UTF8.GetString(body);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class ReqHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个byte表示uid
/// </summary>
public long Uid { get; set; } /// <summary>
/// 8个byte表示是requestId
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 1个bit表示是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 2个byte表示commandId
/// </summary>
public short CommandId { get; set; } /// <summary>
/// 2个byte表示扩展位1的长度
/// </summary>
public short Ext1 { get; set; } /// <summary>
/// 2个byte表示扩展位2的长度
/// </summary>
public short Ext2 { get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[]; try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(Uid, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
BytesWriter.Write(Ext2, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
Uid = BytesReader.ReadInt64(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
Ext2 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Request Header Exception. {0}", ex.Message);
}
}
}
请求(Request)
public class RpcRequest<TMessage> : IPacket
where TMessage : class, IMessage
{
/// <summary>
/// 4个byte表示package长度
/// </summary>
public int Length { get; private set; } /// <summary>
/// package头24个字节
/// </summary>
public ReqHeader Header{ get; set; } /// <summary>
/// package内容
/// </summary>
public TMessage Body { get; set; } public byte[] Serialize()
{
var header = Header.Serialize();
Length += header.Length; byte[] body = null;
var json = JsonConvert.SerializeObject(Body);
if (json != null)
{
body = Encoding.UTF8.GetBytes(json);
Length += body.Length;
} var package = new byte[ + Length];
BytesWriter.Write(Length, ref package, ); //length
BytesWriter.Write(header, ref package, ); //header
if (body != null)
{
BytesWriter.Write(body, ref package, + ReqHeader.Length); //body
} return package;
} public void Deserialize(ref byte[] data)
{
try
{
Length = BytesReader.ReadInt32(ref data, ); var header = BytesReader.ReadBuffer(ref data, , ReqHeader.Length);
Header = new ReqHeader();
Header.Deserialize(ref header); var body = BytesReader.ReadBuffer(ref data, + ReqHeader.Length, Length - ReqHeader.Length);
var json = Encoding.UTF8.GetString(body);
//LogHepler.Log.DebugFormat("JsonConvert Deserialize. Id:[{0}] body:[{1}]", Header.RequestId, json);
Body = JsonConvert.DeserializeObject<TMessage>(json);
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("JsonConvert Deserialize. {0}", ex.Message);
}
}
}
public class RespHeader : IPacket
{
public const int Length = ; /// <summary>
/// 包头标志,用于校验
/// </summary>
public byte Checkbit { get; set; } /// <summary>
/// 8个字节,请求ID
/// </summary>
public long RequestId { get; set; } /// <summary>
/// 4个字节,返回结果状态码
/// </summary>
public int Code { get; set; } /// <summary>
/// 1个字节,是否加密
/// </summary>
public bool IsEncrypt { get; set; } /// <summary>
/// 4个字节,命令ID
/// </summary>
public short CommandId { get;set; } /// <summary>
/// 2个字节,扩展参数
/// </summary>
public short Ext1{get; set; } public byte[] Serialize()
{
Checkbit = Header.Checkbit;
var header = new byte[];
try
{
BytesWriter.Write(Checkbit, ref header, );
BytesWriter.Write(RequestId, ref header, );
BytesWriter.Write(Code, ref header, );
BytesWriter.Write(IsEncrypt, ref header, );
BytesWriter.Write(CommandId, ref header, );
BytesWriter.Write(Ext1, ref header, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Serialize Respone Header Exception. {0}", ex.Message);
} return header;
} public void Deserialize(ref byte[] data)
{
try
{
Checkbit = BytesReader.ReadByte(ref data, );
RequestId = BytesReader.ReadInt64(ref data, );
Code = BytesReader.ReadInt32(ref data, );
IsEncrypt = BytesReader.ReadBool(ref data, );
CommandId = BytesReader.ReadInt16(ref data, );
Ext1 = BytesReader.ReadInt16(ref data, );
}
catch (Exception ex)
{
LogHepler.Log.ErrorFormat("Deserialize Respone Header Exception. {0}", ex.Message);
}
}
}
以上基本是数据包的设计思路和代码设计的实现。后面会专门写博客专门讲解实战应用。

TCP/IP网络编程之数据包协议的更多相关文章
- TCP/IP网络编程之套接字类型与协议设置
套接字与协议 如果相隔很远的两人要进行通话,必须先决定对话方式.如果一方使用电话,另一方也必须使用电话,而不是书信.可以说,电话就是两人对话的协议.协议是对话中使用的通信规则,扩展到计算机领域可整理为 ...
- 浅谈TCP/IP网络编程中socket的行为
我认为,想要熟练掌握Linux下的TCP/IP网络编程,至少有三个层面的知识需要熟悉: 1. TCP/IP协议(如连接的建立和终止.重传和确认.滑动窗口和拥塞控制等等) 2. Socket I/O系统 ...
- TCP/IP网络编程系列之四(初级)
TCP/IP网络编程系列之四-基于TCP的服务端/客户端 理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流的 ...
- TCP/IP网络编程之多播与广播
多播 多播方式的数据传输是基于UDP完成的,因此,与UDP服务端/客户端的实现非常接近.区别在于,UDP数据传输以单一目标进行,而多播数据同时传递到加入(注册)特定组的大量主机.换言之,采用多播方式时 ...
- TCP/IP网络编程之套接字的多种可选项
套接字可选项进而I/O缓冲大小 我们进行套接字编程时往往只关注数据通信,而忽略了套接字具有的不同特性.但是,理解这些特性并根据实际需要进行更改也十分重要.之前我们写的程序在创建好套接字后都是未经特别操 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(二)
回声客户端问题 上一章TCP/IP网络编程之基于TCP的服务端/客户端(一)中,我们解释了回声客户端所存在的问题,那么单单是客户端的问题,服务端没有任何问题?是的,服务端没有问题,现在先让我们回顾下服 ...
- TCP/IP网络编程之基于TCP的服务端/客户端(一)
理解TCP和UDP 根据数据传输方式的不同,基于网络协议的套接字一般分为TCP套接字和UDP套接字.因为TCP套接字是面向连接的,因此又称为基于流(stream)的套接字.TCP是Transmissi ...
- 【TCP/IP网络编程】:09套接字的多种可选项
本篇文章主要介绍了套接字的几个常用配置选项,包括SO_SNDBUF & SO_RCVBUF.SO_REUSEADDR及TCP_NODELAY等. 套接字可选项和I/O缓冲大小 前文关于套接字的 ...
- UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数
UNIX环境高级编程——TCP/IP网络编程 常用网络信息检索函数 gethostname() getppername() getsockname() gethostbyname() ...
随机推荐
- 《Python与量化投资:从基础到实战》PDF高清完整版-PDF|网盘下载附提取码
本书主要讲解如何利用Python进行量化投资,包括对数据的获取.整理.分析挖掘.信号构建.策略构建.回测.策略分析等.本书也是利用Python进行数据分析的指南,有大量的关于数据处理分析的应用,并将重 ...
- 区块链钱包开发 - USDT - 一、Omni本地钱包安装
背景 Tether(USDT)中文又叫泰达币,是一种加密货币,是Tether公司推出的基于稳定价值货币美元(USD)的代币Tether USD,也是目前数字货币中最稳定的币,USDT目前发行了两种代币 ...
- Swap常用操作与性能测试
Swap分区通常被称为交换分区,这块儿分区位于硬盘的某个位置,当系统内存(物理内存)不够用的时候,如果开启了交换分区,部分内存里面暂时不用的数据就会Swap out(换出)到这块儿分区:当系统要使用这 ...
- [转]new一个对象的过程中发生了什么?
来自:沉默哥 | 公号 :程序员小乐 链接:cnblogs.com/JackPn/p/9386182.html Java在new一个对象的时候,会先查看对象所属的类有没有被加载到内存,如果没有的话,就 ...
- 3月21日考试 题解(数据结构+区间DP+贪心)
前言:T3写挂了,有点难受. --------------- T1 中位数 题意简述:给你一段长度为$n$的序列,分别输出$[1,2k-1]$的中位数$(2k-1\leq n)$. --------- ...
- Improving RGB-D SLAM in dynamic environments: A motion removal approach
一.贡献 (1)提出一种针对RGB-D的新的运动分割算法 (2)运动分割采用矢量量化深度图像 (3)数据集测试,并建立RGB-D SLAM系统 二.Related work [1]R.K. Namde ...
- 自定制格式化方式format
自定制格式化方式format # x='{0}{0}{0}'.format('dog') # # print(x) # class Date: # def __init__(self,year,mon ...
- intellij idea springboot无法读取配置文件的解决方法
问题描述 Spring Boot项目中运行之后,出现如下的错误: *************************** APPLICATION FAILED TO START *********** ...
- cudnn加速计算
cudnn加速运算 torch.backends.cudnn.enabled = True torch.backends.cudnn.benchmark = True 第一句话是说,使用的是非确定性算 ...
- C#LeetCode刷题之#605-种花问题( Can Place Flowers)
问题 该文章的最新版本已迁移至个人博客[比特飞],单击链接 https://www.byteflying.com/archives/3724 访问. 假设你有一个很长的花坛,一部分地块种植了花,另一部 ...