基于汇编的 C/C++ 协程(用于服务器)的实现

本篇文章,是 对c++/c++ 协程的实现。我们需要实现这两个目标:

有同步式服务器编程的顺序思路,便于功能设计和代码调试——我使用了 libco 中的协程部分

有异步 I/O 的性能——我使用了 libevent 中的 event I/O     apache php mysql

结构上,就是将 libco 和 libevent 两者的功能结合起来,所以我把我的工程,命名为 libcoevent,意为 “基于 libevent 的同步协程服务器编程框架”。名字中 co 的意思并不代表 libco,而是 coroutine。

编程语言上,我选择的是 C++,主要是因为 libco 只支持基于 x86 或 x64 架构的 Linux,而这样的架构,基本上都是 PC 机,或者是资源不缺、性能也不错的嵌入式系统,上 C++ 完全没有问题。本文解释代码实现的原理。

立即学习“C++免费学习笔记(深入)”;

如果要使用该工程,请在链接选项中加入 -lco -levent -lcoevent 三个选项。

类关系及基本功能

类关系

类继承关系

类的基本继承关系图如下:

1.png

在实际调用中,只有处于继承关系树的叶子结点上的类才会被实际使用到,其他类均视为虚类。

类从属关系

各类的实例在程序运行中是有从属关系的,除了作为顶层的 Base 类之外,其他树叶类都需依附于其他的类所在的运行环境中才能执行。从属关系图如下:

2.png

Base 类提供最基本的运行环境,并管理 Server 对象;

Procedure 对象管理 Client 对象。在图中体现为 ServerSession 对象均管理 Client 对象。

Server 对象由应用程序创建并初始化到 Base 对象中运行。当服务器结束或当其从属的 Base 对象销毁时,可配置自动销毁 Server 对象。

Session 对象由处于会话模式(session mode)的 Server 对象自动创建,并调用应用程序指定的程序入口运行;当会话结束时(函数调用 return)或其从属的 Server 对象服务结束时,由 Server 对象自动销毁。

Client 对象由应用程序调用 Procedure 对象的接口创建,用于与第三方服务交互。应用程序可提前调用接口要求销毁 Client 对象,也可以待 Procedure 服务结束时自动统一销毁。

Base 和 Event 类

1.png

Base 类用于运行 libcoevent 的各个服务。每个 Base 类的实例应对应着一个线程,所有的服务以协程的方式在 Base 实例中运行。从上图可知,Base 类包含一个 libevent 库的 event_base 对象和本协程库的一系列 Event 对象。

1.png

Event 类其实是借用了 libevent 的 struct event 名称,因为每一个 Event 类的实例,对应着 libevent 的一个 event 对象。我们需要关注的重点,是 ProcedureClient 类。

Procedure 类

Procedure 类有两个关键特点:

每个对象都拥有一个 libco 协程,即拥有自己独立的上下文信息,可以用于编写一个独立的服务器过程(procedure);

Procesure 的子类可以创建 Client 对象与第三方服务器通信和交互。

Procedure 类拥有两个子类,分别是 ServerSession

Server 类

Server 类由应用程序创建并初始化到 Base 对象中运行。Server 类有三个子类:

SubRoutine:实际上不作为任何服务器程序,但提供了最基本的 sleep() 函数,并支持 Procedure 类的创建 Client 对象的功能,因此应用程序可以用来作为临时创建或常驻的内部程序来使用。

UDPServer:应用程序创建并初始化 UDPServer 对象后,程序会自动绑定到一个数据报 socket 接口上。应用可以通过在网络接口中收发数据包来实现网络服务。UDPServer 同时提供普通模式会话模式

TCPServer:应用程序创建并初始化 TCPPServer 对象后,程序会自动绑定并监听流 socket。TCPServer 只支持会话模式

所谓的 “普通模式”,也就是应用程序注册 Server 对象的入口函数,并且由应用程序操作 Server 对象的行为。

所谓的 “会话模式”,指的是 UDPServer 或 TCPServer 对象,在接收到传入数据后,自动区分客户端,并单独创建 Session 对象进行处理。每个 Session 对象只服务于一个客户端。

Session 类

Session 对象不能由应用主动创建,而是由处于会话模式的 Server 类自动按需创建。Session 对象的特点是,只能与单一一个客户端(相比起 UDPServer 对象而言)进行通信,因此没有 send() 函数,只有 reply()

在头文件 coevent.h 声明的 Session 类及其子类均为纯虚类,目的是防止应用程序显式地构建 Session 对象并隐藏实现细节。

Client 类

Client 对象由 Procedure 对象创建,并且由 Procedure 对象进行回收。Client 对象的作用是主动向远程服务器发起通信。由于从客户-服务结构的角度,这个动作属于客户端,所以命名为 Client。

DNSClient

Client 的子类中比较特别的是 DNSClient 类,这个类的存在是为了解决在异步 I/O 中的 getaddrinfo() 阻塞问题。DNSClient 的实现原理请参见代码和我之前的文章《DNS 报文结构和个人 DNS 解析代码实现》。

而对于 DNSClient 类而言,具体实现原理,就是封装了一个 UDPClient 对象,通过该对象完成 DNS 报文的收发,并在类中实现报文的解析。

UDPServer——基于 libevent 的协程实现

UDPServer 类普通模式的原理,就是一个非常典型的基于 libevent 的同步协程服务器框架。其代码实现中,核心功能就是以下几个函数:

_libco_routine(),协程的入口函数,使用这个函数,转化成为 liboevent 的统一服务入口函数

_libevent_callback()libevent 时间回调函数,在这个函数里,实现协程上下文的恢复。

UDPServer::recv_in_timeval(),数据接收函数,在这个函数中,实现关键的数据等待功能,同时实现了协程上下文的保存

上述三个函数的代码总量,加上空行也不超过 200 行,我相信还是很容易看明白的。以下具体解释实现原理:

libco 协程接口

正如前文所说,我使用的是 libco 作为协程库。协程对于应用程序是透明的,但是对于库的实现而言,这才是核心。

下面解释一下 libco 的协程功能所提供的几个接口(libco 的文档数量简直 “感人”,这也是网上经常被吐槽的……):

创建和销毁协程

Libco 使用结构体 struct stCoRoutine_t * 保存协程,通过调用 co_create() 可以创建协程对象;使用 co_release() 销毁协程资源。

进入协程

创建了协程之后,调用 co_resume() 可以从协程函数的开头开始执行协程。

暂停协程

当协程到了需要交出 CPU 使用权的时候,可以调用 co_yield() 释放协程、切换掉上下文。调用之后,上下文会恢复到上一个调用 co_resume() 的协程中。调用 co_yield() 的位置可以视为一个 “断点”。

恢复协程

恢复协程和创建协程所用的函数都是 co_resume(),调用该函数,将当前堆栈切换为指定协程的上下文,协程会从上文提到的 “断点” 恢复执行。

协程调度实现

从上一小节可以看到,我们使用到的 libco 协程功能函数中,虽然包含了协程的切换函数,但什么时候切换、切换之后 CPU 如何分配,这是我们需要实现并封装起来的工作。

创建和销毁协程的时机,自然就是在 UDPServer 类初始化和析构的时候。下文重点解析进入、暂停和恢复协程的操作:

进入协程

进入 / 恢复协程的代码,是在 _libevent_callback() 中,有这么一行:

// handle control to user applicationco_resume(arg->coroutine);

如果当前协程还没有被执行过,那么执行了这句代码之后,程序会切换到创建 libco 协程时指定的协程函数开始执行。对于 UDPServer,也就是 _libco_routine() 函数。这个函数非常简单,只有三行:

static void *_libco_routine(void *libco_arg){    struct _EventArg *arg = (struct _EventArg *)libco_arg;    (arg->worker_func)(arg->fd, arg->event, arg->user_arg);    return NULL;}

通过传入参数,将 libco 回调函数转换为应用程序指定的服务器函数执行。

但是如何实现第一次的 libevent 回调呢?这还是很简单的,只需要在调用 libevent 的 event_add()时,将超时时间设置为 0 即可,这会导致 libevent 事件立即超时。通过这个机制,我们也就实现了在 Base 运行之后立即执行各 Procedure 服务函数的目的。

暂停和恢复协程

在什么时候调用 co_yield是本协程实现的重点,调用 co_yield 的位置,是一个可能会导致上下文切换的地方,也是将异步编程框架转换为同步框架的关键技术点。这里可以参照 UDPServerrecv_in_timeval() 函数。函数的基本逻辑如下:

1.png

其中最重要的分支,就是对 libevent 事件标志的判断;而最重要的逻辑,就是 event_add()co_yield() 函数的调用。函数片段如下:

struct timeval timeout_copy;timeout_copy.tv_sec = timeout.tv_sec;timeout_copy.tv_usec = timeout.tv_usec;    ...event_add(_event, &timeout_copy);co_yield(arg->coroutine);

这里,我们把 co_yield() 函数理解为一个断点,当程序执行到这里的时候,CPU 的使用权会被交出,程序回到调用 co_resume() 的上一级函数手中。这个 “上一级函数” 究竟是哪里呢?实际上就是前文提到的 _libevent_callback() 函数。

_libevent_callback() 的角度来看,程序会从 co_resume() 函数返回,并且继续往下执行。此时我们可以这么理解:协程的调度,实际上是借用了 libevent来进行的。这里我们要关注一下 co_resume() 上方的几句:

// switch into the coroutineif (arg->libevent_what_ptr) {    *(arg->libevent_what_ptr) = (uint32_t)what;}

这里将 libevent 事件 flag 值传递给了协程,而这是前文进行事件判断的重要依据。当时间到来,_libevent_callback() 会在下面调用 co_resume() 的位置,将 CPU 使用权交回给协程。

销毁协程

除了 ci_yield() 之外,协程函数调用 return 也会导致从 co_resume() 返回,所以在 _libevent_callback() 中,我们还需要判断协程是否已经结束。如果协程结束,那么就应当销毁相关的协程资源了。参见 if (is_coroutine_end(arg->coroutine)) {...} 条件体内的代码。

会话模式(Session Mode)

在本工程的实现中,提供了被称为 “会话模式” 的一个服务器设计模式。会话模式指的是 UDPServer 或 TCPServer 对象,在接收到传入数据后,自动区分客户端,并单独创建 Session 对象进行处理。每个 Session 对象只服务于一个客户端。

对于 TCPServer 而言,实现上述的功能比较简单,因为监听一个 TCP socket 之后,当有传入连接的时候,只要调用 accept(),就可以获得一个新的文件描述符,为这个文件描述符创建一个新的 Server 的子类就行了——这就是 TCPSession 类。

但是 UDPServer 就比较麻烦了,因为 UDP 不能这么做。我们只能自行实现所谓的 session。

UDPSession 实现

设计目标

我们需要实现 UDPSession 类的如下效果:

类调用 recv 函数时,只会接收到对应的远程客户端发来的数据

类调用 send 函数(实际实现是 reply())时,可以使用 UDPServer 的端口进行回复

recv()

在工程中,UDPSession 是抽象类,实际实现是 UDPItnlSession。但是准确而言,UDPItnlSession 的实现,密切依赖于 UDPServer。这一部分,可以参照 UDPServer_session_mode_worker() 函数中的 do-while() 循环体代码。程序思路如下:

UDPServer 维护一个 UDPSession 字典,以远程 IP + 端口名的组合作为 key。

当数据到来时,判断远程 IP + 端口的组合是否在字典中,如果在,那么就把数据复制给对应的 session;如果不存在,则创建 session

复制数据的代码,参见 UDPItnlSession 类的 forward_incoming_data() 函数实现。

reply()

发送数据其实就很简单,直接对 UDPServer 的 fd 进行 sendto() 就可以了。

quit

对于 session mode 的 Server 对象,代码中提供了一个可以由其 session 调用的、要求 server 退出并销毁资源的函数:quit_session_mode_server()。实现原理是向 server 触发一个 EV_SIGNAL 事件。对于普通的 I/O 事件而言,这是不应当出现的,我们这里活用来作为退出信号。如果 server 发现了这个信号,则触发退出逻辑。

应用示例

本工程的示例代码分为 server 和 client 两部分,其中 server 用到了 libcoevent,而 client 只是使用 Python 写的简单程序。本文就不说明 client 部分的代码了。

Server 的代码,分别针对 Server 类的三个子类做了应用示例。使用了包括空行、调试语句、错误判断等在内的逻辑,仅使用不到 300 行,就实现了一个过程和两个服务。应该说,逻辑还是很清晰的,而且也节省了大量代码。

SubRoutine

通过函数 _simple_test_routine(),展示了一个一次性的线性网络逻辑。程序中,routine 首先创建了一个 DNSClient 对象,向默认域名服务器请求了一个域名,然后 connect() 该服务器的 80 端口。成功后,直接返回。

这个函数展示了 SubRoutine 的使用场景,以及 Client 对象的使用方法,特别是 DNSClient 的简易使用方法。

UDPServer

UDPServer 的入口函数是 _udp_session_routine(),功能是为客户端提供域名查询服务。Clients 发送一段字符串作为待查询域名,然后 server 通过 DNSClient 对象请求后,将查询结果返回给客户端。

这个函数展示了 UDPSession 对象和 DNSClient 的(比较复杂和完整的)使用方法。

TCPServer

入口函数是 _tcp_session_routine(),逻辑比较简单,主要是展示 TCPSession 的用法。

后记

原理上,libcoevent 已经开发完了,实现了必须的功能,完全可以用来编写服务器程序。当然由于这是初版,所以很多代码看起来还是有点乱。这个库的意义在于,可以从教学角度,仔细地说明 C/C++ 协程更为本源的实现原理,也可以作为一个可用的协程服务器库来使用。

欢迎读者针对这个库多多批判,也欢迎读者提出新需求——比如我就决定加几个需求,算是 TODO 吧:

实现 HTTPServer,作为 TCPServer 的子类,提供 HTTP fcgi 服务;

实现 SSLClient 的类,处理对外的 SSL 请求。

相关文章:

C#网络编程系列文章(八)之UdpClient实现同步UDP服务器

C语言实现php服务器

相关视频:

C# 教程

以上就是基于汇编的 C/C++ 协程(用于服务器)的实现的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1432836.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月17日 08:39:47
下一篇 2025年12月17日 08:40:01

相关推荐

  • C++ 布尔类型和引用的用法详解

    1、布尔类型 c++kquote>C++中的布尔类型C++在C语言的基本类型系统之上增加了boolC++中的bool可取的值只有true和false理论上bool之占用一个字节注意:true代表真值,编译器内部用1来表示false代表非真值, 编译器内部用0来表示C语言中:用整型值来代替boo…

    2025年12月17日
    000
  • C++引用的意义与引用的本质

    1、引用的意义 引用作为变量别名而存在,因此在一些场合可以替代指针,引用相对于指针来说具有更好的可读性和实用性 // swap函数的实现对比void swap(int& a, int& b){ int t = a; a = b; b = t;}void swap(int* a, in…

    2025年12月17日
    000
  • 第一章C++:函数返回值、GNU编译器命令

    c++bce3b83f770dfdf50c5dae0e4360a>函数返回值 返回值类型必须和函数的返回类型相同 对于main函数,返回值必须是int型。大多数系统中,main函数的返回值是一个状态指示器。返回值为0表示main函数成功执行完毕;返回非零表示有错误出现。 GNU编译器命令 vi…

    好文分享 2025年12月17日
    000
  • 第二章C++:变量和基本类型

    c++bce3b83f770dfdf50c5dae0e4360a>介绍语言的基本知识和标准库 第二章 变量和基本类型 一些语言,如smalltalk和python等,在程序运行时检查数据类型;与之相反,c++是一种静态数据类型语言,它的类型检查发生在编译时。 – 内置类型(buil…

    好文分享 2025年12月17日
    000
  • 第三章C++:字符串string、向量vector和数组

    第二章介绍内置类型,本章介绍抽象数据类型库。  – 其中string和vector是两种最重要的标准库类型,前者支持可变长字符串,后者表示可变长的集合。 – 还有一种标准库类型是迭代器,它是string和vector的配套类型,常被用于访问string中的字符和vector中…

    好文分享 2025年12月17日
    000
  • 利用Unity脚本自定义分辨率实现相机截一张高清截图

    最近做项目的时候需要在游戏里截一张高清截图,研究了一下写成脚本,方便以后使用。脚本可以自定义分辨率,用相机截高清截图。可以用代码动态截图,也可以在编辑模式下截图。注意截图宽高比要正确,宽高比不正确时可能会出问题。 截图效果: 脚本:CameraCapture.cs using UnityEngine…

    2025年12月17日
    000
  • 技术解答CSV 文件的一个 .NET 库:CsvHelper 中文文档

    csvhelper 是读写 csv 文件的一个 .net 库。可以通过 visual studio 的包管理器下载 csvhelper。自动映射定义:没有提供映射文件的情况下,默认为自动映射,自动映射会按顺序依次映射到类的属性中去。 GitHub 地址 读取 读取所有的记录 var csv = ne…

    好文分享 2025年12月17日
    000
  • 简要分析Unity计时器脚本Timer的用法(附代码)

    计时器效果图: Timer用法:第一种:脚本加到物体上,勾选”自动计时”。第二种:脚本加到物体上,调用timer.start()方法启动。第三种:代码中动态添加Timer脚本。 using UnityEngine;public class TimerTest : MonoBe…

    2025年12月17日
    000
  • 常见的C++中const常量用法分析讲解

    先对c++语言中的const和c++中的const进行讲解,前者const修饰的变量不是真的常量,它只是告诉编译器该变量不能出现在赋值符号的左边。后者c++在c的基础上对const进行了进化处理。 1、C语言中的const: const修饰的变量是只读的,本质还是变量 const修饰的局部变量在栈上…

    好文分享 2025年12月17日
    000
  • 深入理解C#设计模式之策略模式 角色具体案例分享

    策略模式(Stragety Pattern) 策略模式属于行为型模式,它定义了一系列的算法,并将每一个算法封装起来,而且使他们可以相互替换,让算法独立于使用它的客户而独立变化。 使用策略模式可以把行为和环境分割开来。环境类负责维持和查询行为类,各种算法则在具体策略类中提供。 角色: 1、抽象策略(S…

    2025年12月17日
    000
  • 最新使用C#生成二维码方案,详解及实例 ( QRCoder )

    不知道大家有制作多二维码吗?本篇文章我将给大家介绍如何用c#生成二维码,先说一下生成二维码需要的三个类qrcodegenerator、qrcodedata、qrcode。供后面好理解。他们的 职责 分别是什么呢?qrcodegenerator :用来通过指定的方式生成二维码存储的数据对象,也就是 q…

    2025年12月17日 好文分享
    000
  • 精选的这19道C/C+面试题,你能答对多少呢? – 个人文章 思否

    c++和c++的区别?答:c++在c的基础上增添类,c是一个结构化语言,它的重点在于算法和数据结构。软件工程师的面试,套路都差不多,这一次约到的问题,下次你可能还会遇到。 问1:请用简单的语言告诉我C++ 是什么? 答:C++是在C语言的基础上开发的一种面向对象编程语言,应用广泛。C++支持多种编程…

    好文分享 2025年12月17日
    000
  • 最新总结C语言中关于指针等相关理解和使用事宜

    定义:指针是一个变量,其值是另一个变量的地址,地址代表的是在内存中的位置。需要记住的是,数组变量本身就是一个指针。 地址的类型 地址是存在类型的,是不是感觉好奇怪,指针不是代表一个地址的吗,地址还有类型吗?看一个例子: int *ip; /* 一个整型的指针 */double *dp; /* 一个 …

    好文分享 2025年12月17日
    000
  • 详细介绍C# 中 ASP.NET Web API 的 ROC

    web api 是一个 面向资源(ROC)  通过 HTTP协议动词来修改资源状态的可自我寄宿(SelfHost)的接口今天 seaconch 的主要目的是实现一个简单的 ASP.NET Web API 栗子 什么是Web API 谈谈rest与asp.net web api 怎样理解 REST、R…

    2025年12月17日 好文分享
    000
  • 原来斐波拉契数列还有这种写法,你知道吗?

    百度下“斐波拉契的非递归写法”,也有不少的答案,但是并不令人满意,首先是太复制难懂,其次是性能和递归差不多。 一说到斐波拉契数列,无论是程序菜鸟,还是技术老手,首先想到的,肯定是递归写法。然后,技术老手与程序菜鸟不同的地方,就是会想到将递归的结果存起来以减少重复计算。这些都是些很常规的操作,但是你有…

    好文分享 2025年12月17日
    000
  • 采用 C# 编写的学委助手详解及实例

    该应用采用 C# 编写 WinForm 界面,Python 编写处理脚本。通过调用 Python 打包的 exe 可执行文件实现其功能。你可以在 Application  中直接下载得到。 学委助手 学委除了要收作业,最烦的就是统计谁没有交作业啦,还有就是大家的命名不统一造成文件排序混乱,更加大了学…

    2025年12月17日 好文分享
    000
  • Unity实现脚本插件[Script Create Dialog]图文详解

    自动生成脚本的插件[script create dialog],大概是名字起的和脚本生成器相差太多,现在的开发工具又太强大,所以被埋没了。所支持的unity版本 3.4.2及以上,远古时期遗留的资源。试用了一下,感觉要是刚学unity脚本的时候有这个插件,能省下很多读api的时间。 最近写代码又犯懒…

    2025年12月17日 好文分享
    000
  • 关于c++中的引用总结

    c++70c2ad6247a753>本次的这篇文章主要是和大家分享了关于c++中的引用总结 ,有需要的小伙伴可以看一下. 引用总结   (1)在引用的使用中,单纯给某个变量取个别名是毫无意义的,引用的目的主要用于在函数参数传递中,解决大块数据或对象的传递效率和空间不如意的问题。   (2)用引…

    好文分享 2025年12月17日
    000
  • c++如何获取数值极值的办法

    c++70c2ad6247a753>这篇文章主要介绍了c++如何获取数值极值的办法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧 include #include using namespace std;#define L_VALUE(a) (cout<&l…

    2025年12月17日
    000
  • C#开发之微信小程序发送模板消息功能

    这篇文章主要介绍了c#开发之微信小程序发送模板消息功能,需要的朋友可以参考下 步骤一:获取模板ID 有两个方法可以获取模版ID 通过模版消息管理接口获取模版ID 在微信公众平台手动配置获取模版ID 步骤二:页面的 组件,属性report-submit为true时,可以声明为需发模板消息,此时点击按钮…

    2025年12月17日
    000

发表回复

登录后才能评论
关注微信