2014-12-27 01:00:23 +08:00
|
|
|
|
KCP - A Fast and Reliable ARQ Protocol
|
2014-12-30 17:22:33 +08:00
|
|
|
|
======================================
|
2014-12-27 00:46:34 +08:00
|
|
|
|
|
2014-12-27 00:58:34 +08:00
|
|
|
|
# 简介
|
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
KCP是一个快速可靠协议,能以比 TCP浪费10%-20%的带宽的代价,换取平均延迟降低 30%-40%,且最大延迟降低三倍的传输效果。纯算法实现,并不负责底层协议(如UDP)的收发,需要使用者自己定义下层数据包的发送方式,以 callback的方式提供给 KCP。 连时钟都需要外部传递进来,内部不会有任何一次系统调用。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
整个协议只有 ikcp.h, ikcp.c两个源文件,可以方便的集成到用户自己的协议栈中。也许你实现了一个P2P,或者某个基于 UDP的协议,而缺乏一套完善的ARQ可靠协议实现,那么简单的拷贝这两个文件到现有项目中,稍微编写两行代码,即可使用。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
# 技术特性
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
TCP是为流量设计的(每秒内可以传输多少KB的数据),讲究的是充分利用带宽。而 KCP是为流速设计的(单个数据包从一端发送到一端需要多少时间),以10%-20%带宽浪费的代价换取了比 TCP快30%-40%的传输速度。TCP信道是一条流速很慢,但每秒流量很大的大运河,而KCP是水流湍急的小激流。KCP有正常模式和快速模式两种,通过以下策略达到提高流速的结果:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### RTO翻倍vs不翻倍:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
TCP超时计算是RTOx2,这样连续丢三次包就变成RTOx8了,十分恐怖,而KCP启动快速模式后不x2,只是x1.5(实验证明1.5这个值相对比较好),提高了传输速度。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### 选择性重传 vs 全部重传:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
TCP丢包时会全部重传从丢的那个包开始以后的数据,KCP是选择性重传,只重传真正丢失的数据包。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### 快速重传:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
发送端发送了1,2,3,4,5几个包,然后收到远端的ACK: 1, 3, 4, 5,当收到ACK3时,KCP知道2被跳过1次,收到ACK4时,知道2被跳过了2次,此时可以认为2号丢失,不用等超时,直接重传2号包,大大改善了丢包时的传输速度。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### 延迟ACK vs 非延迟ACK:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
TCP为了充分利用带宽,延迟发送ACK(NODELAY都没用),这样超时计算会算出较大 RTT时间,延长了丢包时的判断过程。KCP的ACK是否延迟发送可以调节。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### UNA vs ACK+UNA:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
ARQ模型响应有两种,UNA(此编号前所有包已收到,如TCP)和ACK(该编号包已收到),光用UNA将导致全部重传,光用ACK则丢失成本太高,以往协议都是二选其一,而 KCP协议中,除去单独的 ACK包外,所有包都有UNA信息。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
#### 非退让流控:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
KCP正常模式同TCP一样使用公平退让法则,即发送窗口大小由:发送缓存大小、接收端剩余接收缓存大小、丢包退让及慢启动这四要素决定。但传送及时性要求很高的小数据时,可选择通过配置跳过后两步,仅用前两项来控制发送频率。以牺牲部分公平性及带宽利用率之代价,换取了开着BT都能流畅传输的效果。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
# 基本使用
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
1. 创建 KCP对象:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
```cpp
|
|
|
|
|
// 初始化 kcp对象,conv为一个表示会话编号的整数,和tcp的 conv一样,通信双
|
|
|
|
|
// 方需保证 conv相同,相互的数据包才能够被认可,user是一个给回调函数的指针
|
|
|
|
|
ikcpcb *kcp = ikcp_create(conv, user);
|
|
|
|
|
```
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
2. 设置回调函数:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
```cpp
|
|
|
|
|
// KCP的下层协议输出函数,KCP需要发送数据时会调用它
|
|
|
|
|
// buf/len 表示缓存和长度
|
|
|
|
|
// user指针为 kcp对象创建时传入的值,用于区别多个 KCP对象
|
|
|
|
|
int udp_output(const char *buf, int len, ikcpcb *kcp, void *user)
|
|
|
|
|
{
|
|
|
|
|
....
|
|
|
|
|
}
|
|
|
|
|
// 设置回调函数
|
|
|
|
|
kcp->output = udp_output;
|
|
|
|
|
```
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
3. 循环调用 update:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
```cpp
|
|
|
|
|
// 以一定频率调用 ikcp_update来更新 kcp状态,并且传入当前时钟(毫秒单位)
|
|
|
|
|
// 如 10ms调用一次,或用 ikcp_check确定下次调用 update的时间不必每次调用
|
|
|
|
|
ikcp_update(kcp, millisec);
|
|
|
|
|
```
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
4. 输入一个下层数据包:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 17:59:54 +08:00
|
|
|
|
```cpp
|
|
|
|
|
// 收到一个下层数据包(比如UDP包)时需要调用:
|
|
|
|
|
ikcp_input(kcp, received_udp_packet, received_udp_size);
|
|
|
|
|
```
|
2014-12-30 18:28:31 +08:00
|
|
|
|
处理了下层协议的输出/输入后 KCP协议就可以正常工作了,使用 ikcp_send 来向
|
|
|
|
|
远端发送数据。而另一端使用 ikcp_recv(kcp, ptr, size)来接收数据。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
|
2014-12-30 17:22:33 +08:00
|
|
|
|
# 协议配置
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
协议默认模式是一个标准的 ARQ,需要通过配置打开各项加速开关:
|
|
|
|
|
|
|
|
|
|
1. 工作模式:
|
2014-12-30 22:31:53 +08:00
|
|
|
|
```cpp
|
|
|
|
|
int ikcp_nodelay(ikcpcb *kcp, int nodelay, int interval, int resend, int nc)
|
|
|
|
|
```
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2014-12-30 22:31:53 +08:00
|
|
|
|
> nodelay :是否启用 nodelay模式,0不启用;1启用。
|
|
|
|
|
> interval :协议内部工作的 interval,单位毫秒,比如 10ms或者 20ms
|
|
|
|
|
> resend :快速重传模式,默认0关闭,可以设置2(2次ACK跨越将会直接重传)
|
|
|
|
|
> nc :是否关闭流控,默认是0代表不关闭,1代表关闭。
|
|
|
|
|
> 普通模式:`ikcp_nodelay(kcp, 0, 40, 0, 0);
|
|
|
|
|
> 极速模式: ikcp_nodelay(kcp, 1, 10, 2, 1);
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
2. 最大窗口:
|
2014-12-30 22:31:53 +08:00
|
|
|
|
```cpp
|
|
|
|
|
int ikcp_wndsize(ikcpcb *kcp, int sndwnd, int rcvwnd);
|
|
|
|
|
```
|
2015-05-29 11:07:14 +08:00
|
|
|
|
该调用将会设置协议的最大发送窗口和最大接收窗口大小,默认为32. 这个可以理解为 TCP的 SND_BUF 和 RCV_BUF,只不过单位不一样 SND/RCV_BUF 单位是字节,这个单位是包。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
3. 最大传输单元:
|
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
纯算法协议并不负责探测 MTU,默认 mtu是1400字节,可以使用ikcp_setmtu来设置该值。该值将会影响数据包归并及分片时候的最大传输单元。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
|
|
|
|
4. 最小RTO:
|
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
不管是 TCP还是 KCP计算 RTO时都有最小 RTO的限制,即便计算出来RTO为40ms,由于默认的 RTO是100ms,协议只有在100ms后才能检测到丢包,快速模式下为30ms,可以手动更改该值:
|
2014-12-30 22:31:53 +08:00
|
|
|
|
```cpp
|
|
|
|
|
kcp->rx_minrto = 10;
|
|
|
|
|
```
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
# 更多内容
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:48:02 +08:00
|
|
|
|
协议的使用和配置都是很简单的,大部分情况看完上面的内容基本可以使用了。如果你需要进一步进行精细的控制,比如改变 KCP的内存分配器,或者你需要更有效的大规模调度 KCP链接(比如 3500个以上),或者如何更好的同 TCP结合,那么可以继续延伸阅读:
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:48:02 +08:00
|
|
|
|
- [Wiki Home](https://github.com/skywind3000/kcp/wiki)
|
2015-05-29 11:45:54 +08:00
|
|
|
|
- [KCP 最佳实践](https://github.com/skywind3000/kcp/wiki/KCP-Best-Practice)
|
2015-05-29 11:54:23 +08:00
|
|
|
|
- [同现有TCP服务器集成](https://github.com/skywind3000/kcp/wiki/Cooperate-With-Tcp-Server)
|
2015-05-29 11:45:54 +08:00
|
|
|
|
- [传输数据加密](https://github.com/skywind3000/kcp/wiki/Network-Encryption)
|
2016-02-18 22:12:54 +08:00
|
|
|
|
- [应用层流量控制](https://github.com/skywind3000/kcp/wiki/Flow-Control-for-Users)
|
|
|
|
|
- [性能评测](https://github.com/skywind3000/kcp/wiki/KCP-Benchmark)
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2015-05-29 11:07:14 +08:00
|
|
|
|
# 相关应用
|
2015-05-29 11:08:20 +08:00
|
|
|
|
|
2015-05-29 12:49:37 +08:00
|
|
|
|
- [dog-tunnel](https://github.com/vzex/dog-tunnel): GO开发的网络隧道,使用 KCP极大的改进了传输速度,并移植了一份 GO版本 KCP
|
2016-02-18 22:12:54 +08:00
|
|
|
|
- [lua-kcp](https://github.com/linxiaolong/lua-kcp):KCP的 Lua扩展,用于 Lua服务器
|
|
|
|
|
- [asio-kcp](https://github.com/libinzhangyuan/asio_kcp): 使用 KCP的完整 UDP网络库,完整实现了基于 UDP的链接状态管理,会话控制,KCP协议调度等,可直接使用的用户库。
|
2014-12-27 00:58:34 +08:00
|
|
|
|
|
2016-02-18 22:12:54 +08:00
|
|
|
|
# 性能比较
|
|
|
|
|
|
2016-02-18 22:26:05 +08:00
|
|
|
|
如果不丢包那么 KCP和 TCP性能差不多,KCP不会有任何优势,但是网络会卡,造成卡的原因就是丢包和抖动,有同学在内网这样好的环境下没有用任何丢包模拟直接跑,跑出来的数据是差不多的,但是放到公网上,放到3G/4G网络情况下,差距就很明显了,公网在高峰期有平均接近10%的丢包,wifi/3g/4g下更糟糕,这正是造成各种网络卡顿的元凶。
|
|
|
|
|
|
2016-02-18 22:12:54 +08:00
|
|
|
|
感谢 [asio-kcp](https://github.com/libinzhangyuan/asio_kcp) 的作者 [zhangyuan](https://github.com/libinzhangyuan) 对 KCP 与 enet, udt做过的一次横向评测,结论如下:
|
|
|
|
|
|
2016-02-18 22:15:54 +08:00
|
|
|
|
- ASIO-KCP has good performace in wifi and phone network(3G, 4G).
|
|
|
|
|
- Extra using 20% ~ 50% network flow for speed improvement.
|
2016-02-18 22:12:54 +08:00
|
|
|
|
- The kcp is the first choice for realtime pvp game.
|
|
|
|
|
- The lag is less than 1 second when network lag happen. 3 times better than enet when lag happen.
|
|
|
|
|
- The enet is a good choice if your game allow 2 second lag.
|
|
|
|
|
- UDT is a bad idea. It always sink into badly situation of more than serval seconds lag. And the recovery is not expected.
|
|
|
|
|
- enet has the problem of lack of doc. And it has lots of functions that you may intrest.
|
|
|
|
|
kcp's doc is chinese.
|
|
|
|
|
Good thing is the function detail which is writen in code is english. And you can use asio_kcp which is a good wrap.
|
|
|
|
|
- The kcp is a simple thing. You will write more code if you want more feature.
|
|
|
|
|
- UDT has a perfect doc. UDT may has more bug than others as I feeling.
|
|
|
|
|
|
|
|
|
|
具体见:[横向比较](https://github.com/libinzhangyuan/reliable_udp_bench_mark/blob/master/bench_mark.md) 和 [这里](https://github.com/skywind3000/kcp/wiki/KCP-Benchmark)。截取一段在网络糟糕时,asio-kcp/enet的延迟数据:
|
|
|
|
|
|
|
|
|
|
```cpp
|
|
|
|
|
worst network lag happen:
|
|
|
|
|
asio: 10:51.21
|
|
|
|
|
291 295 269 268 231 195 249 230 225 204
|
|
|
|
|
|
|
|
|
|
enet: 10:51.21
|
|
|
|
|
1563 1520 1470 1482 1438 1454 1412 1637 1588 1540
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
我当年主要测试了 KCP和 TCP/UDT的比较,扫了一眼 libenet觉得协议实现中规中矩,缺乏很多现代传输协议的技术,所以并没有详细测试。而 asio-kcp的作者同时给出了KCP/enet/udt三者的详细比较,为更多犹豫选择使用那一套的人提供了更多指引。
|
2014-12-30 22:31:53 +08:00
|
|
|
|
|
|
|
|
|
|
2014-12-30 22:35:10 +08:00
|
|
|
|
# 欢迎捐赠
|
2014-12-30 22:31:53 +08:00
|
|
|
|
|
2014-12-30 22:38:15 +08:00
|
|
|
|
![欢迎使用支付宝对该项目进行捐赠](https://raw.githubusercontent.com/skywind3000/kcp/master/donation.png)
|
2014-12-30 22:35:10 +08:00
|
|
|
|
|
2014-12-30 22:36:09 +08:00
|
|
|
|
欢迎使用支付宝手扫描上面的二维码,对该项目进行捐赠。捐赠款项将用于改进 KCP性能以及
|
|
|
|
|
后续持续优化。
|
2015-12-25 10:48:00 +08:00
|
|
|
|
|
|
|
|
|
|
|
|
|
|
欢迎关注
|
|
|
|
|
|
|
|
|
|
blog: http://www.skywind.me
|
2015-12-25 10:48:48 +08:00
|
|
|
|
|
2015-12-25 10:48:00 +08:00
|
|
|
|
zhihu: https://www.zhihu.com/people/skywind3000
|
|
|
|
|
|