`
zsxxsz
  • 浏览: 450495 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

acl协程中的同步功能

阅读更多

一、概述

    对于 C/C++ 网络协程库,仅提供网络通信功能是远远不够的,如果想要将协程应用于复杂的应用环境中,一些基础性设施是必须的,比如”协程同步“功能。在 acl 协程中,提供了两种应用场景下的同步机制:单机线程内协程之间的同步以及可以跨线程间的协程同步功能。

    因为 acl 协程的调度器是单线程的(如果想用多核,可以启动多个线程,每个线程独立进行调度),所以如果你的应用场景仅需线程内不同协程间的同步,则只需使用 fiber_lock/fiber_sem 即可,其中 fiber_lock 为协程同步锁,fiber_sem 为协程信号量,其实现原理本质上是协程执行上下文的切换,所以比较容易实现;另外,acl 协程还提供应用场景更加复杂应用范围更大的同步的机制,该同步模块支持“协程之间、协程与线程之间、线程之间”的同步,其实现原理是原子操作+IO事件的组合。

 

二、单一线程内协程间的同步

    首先,介绍一下单一线程内协程间的同步接口:fiber_mutex,fiber_rwlock,fiber_sem。其中,fiber_mutex 类似于线程互斥量 pthread_mutex_t,其提供基本的互斥功能,fiber_rwlock 提供协程读写锁功能,fiber_sem 则提供了协程信号量的功能。下面给出一个简单的协程互斥的例子:

 

#include <acl-lib/acl_cpp/lib_acl.hpp>
#include <acl-lib/fiber/libfiber.hpp>

class myfiber : public acl::fiber
{
public:
        myfiber(acl::fiber_mutex& lock) : lock_(lock) {}

protected:
        void run(void)
        {
                for (int i = 0; i < 5; i++) {
                        lock_.lock();
                        printf("locked by fiber-%u and sleep\r\n",
                                acl::fiber::self());
                        sleep(1);
                        printf("fiber-%u wakeup\r\n", acl::fiber::self());
                        lock_.unlock();
                }

                delete this;
        }

private:
        acl::fiber_mutex& lock_;
        ~myfiber(void) {}
};

int main(void)
{
        acl::fiber_mutex lock;

        // 创建并启动第一个协程
        acl::fiber* fb1 = new myfiber(lock);
        fb1->start();

        // 创建并启动第二个协程
        acl::fiber* fb2 = new myfiber(lock);
        fb2->start();

        // 启动协程调度器
        acl::fiber::schedule();

        return 0;
}

 

    该例子非常简单明了的讲述了如何创建 acl 协程,以及如何使用 acl 协程锁进行同步的过程。

 

    该示例代码:https://github.com/acl-dev/demo/blob/master/file_lock.cpp

 

三、协程与线程之间的同步互斥

    acl 协程在最初设计协程同步互斥时,通过上下文切换便很容易实现了,如上面所示,但随着应用场景复杂度的提升,上面的同步方式已经完全不能胜任,在新项目中有一个非常麻烦的处理同步的需求:希望互斥锁不仅可以用在同一线程的协程之间,而且希望还可以用在线程之间,不同线程内的协程之间的同步互斥。因为 acl 的协程调度器是单线程模式,虽然可以同时启动多个线程,每个线程内部创建大量协程,但各个线程之间的资源共享仅能通过系统的线程锁来保证,这看起来似乎没有问题,但却一个场景下完全失效了:

     1、分别创建了 A、B 两类线程,每个线程是一个独立的协程调度过程(即每个线程内可创建大量的协程),同时还创建了 C 线程池(纯线程模式);

     2、A 线程中的某个协程 a1 创建了一个共享对象 o1,协程 a2 创建了一个共享对象 o2;B 线程中的某个协程 b1 创建一个共享对象 o3;

     3、a1 协程对 o1 加锁保护,a2 协程对 o2 加锁保护,b1 协程对 o3 加锁保护;

     4、在某一时刻,b1 协程因想要对 o2 加锁保护而处于等待状态,但此时恰巧 a1 协程想要对 o3 加锁,但此时 o3 已被 b1 协程加锁保护。

 

    针对上述过程,如果用纯线程锁进行加锁保护则肯定会出现死锁问题,因此在 acl 协程里设计了一个可在不同线程的协程间共享的事件互斥模块:fiber_event(C++类)或 acl_fiber_event(C语言)。在此暂且不讲该功能实现(实现有点复杂且有一定技巧性),只讲如何使用,下面是 fiber_event 提供的功能接口:

 

/**
 * 可用于协程之间、线程之间以及协程与线程之间,通过事件等待/通知方式进行同步的
 * 的事件混合锁
 */
class fiber_event
{
public:
	/**
	 * 构造方法
	 * @param use_mutex {bool} 在用在多线程之间进行事件同步时,如果启动的
	 *  的线程数较多(成百上千个线程),则此标志应设为 true 以便于内部在
	 *  同步内部对象时使用线程互斥锁进行保护,以避免形成惊群现象,如果启动
	 *  的线程数较多但该标志为 false,则内部使用原子数进行同步保护,很容易
	 *  造成惊群问题;当启动的线程数较(几十个左右),则此参数可以设为 false
	 *  以告之内部使用原子数进行同步保护
	 * @param fatal_on_error {bool} 内部发生错误时是否直接崩溃,以便于开发
	 *  人员进行错误调试
	 */
	fiber_event(bool use_mutex = true, bool fatal_on_error = true);
	~fiber_event(void);

	/**
	 * 等待事件锁
	 * @return {bool} 返回 true 表示加锁成功,否则表示内部出错
	 */
	bool wait(void);

	/**
	 * 尝试等待事件锁
	 * @return {bool} 返回 true 表示加锁成功,否则表示锁正在被占用
	 */
	bool trywait(void);

	/**
	 * 事件锁拥有者释放事件锁并通知等待者
	 * @return {bool} 返回 true 表示通知成功,否则表示内部出错
	 */
	bool notify(void);

public:
	/**
	 * 返回 C 版本的事件对象
	 * @return {ACL_FIBER_EVENT*}
	 */
	ACL_FIBER_EVENT* get_event(void) const
	{
		return event_;
	}

private:
	ACL_FIBER_EVENT* event_;
};

 

 

     接下来给出一个简单的例子:

 

#include <acl-lib/acl_cpp/lib_acl.hpp>
#include <acl-lib/fiber/libfiber.hpp>

class myfiber : public acl::fiber
{
public:
        myfiber(acl::fiber_event& event, unsigned long long& count)
        : event_(event)
        , count_(count)
        {}

protected:
        // @override
        void run(void)
        {
                for (int i = 0; i < 1000; i++) {
                        event_.wait();
                        count_++;
                        if (count_ % 100000 == 0) {
                                printf("thread-%ld, fiber-%u, count=%llu\r\n",
                                        acl::thread::self(), acl::fiber::self(),
                                        count_);
                        }
                        event_.notify();
                }

                delete this;
        }

private:
        acl::fiber_event& event_;
        unsigned long long& count_;

        ~myfiber(void) {}
};

class mythread : public acl::thread
{
public:
        mythread(acl::fiber_event& event, unsigned long long& count)
        : event_(event)
        , count_(count)
        {}

        ~mythread(void) {}

protected:
        // @override
        void* run(void)
        {
                for (int i = 0; i < 1000; i++) {
                        acl::fiber* fb = new myfiber(event_, count_);
                        fb->start();
                }

                acl::fiber::schedule();
                return NULL;
        }

private:
        acl::fiber_event& event_;
        unsigned long long& count_;
};

int main(void)
{
        unsigned long long count = 0;
        acl::fiber_event event;

        std::vector<acl::thread*> threads;
        for (int i = 0; i < 10; i++) {
                acl::thread* thr = new mythread(event, count);
                threads.push_back(thr);
                thr->start();
        }

        for (std::vector<acl::thread*>::iterator it = threads.begin();
                it != threads.end(); ++it) {
                (*it)->wait();
                delete *it;
        }

        printf("at last count=%llu\r\n", count);
        return 0;
}

 

 

    在上面例子中,创建 10 个线程,每个线程是一个独立的协程调度过程;每个线程内部创建 1000 个协程,每个协程内部对全局对象 count 进行加 1 操作,每次对 count 加 1 都需要调用 acl::thread_event 中的 wait/notify 进行同步。

    该示例代码:https://github.com/acl-dev/demo/blob/master/fiber_event.cpp

分享到:
评论

相关推荐

    基于ACL会议模板的Latex双栏中文模板

    在本文中,我们将深入探讨如何使用基于ACL会议模板的LaTeX双栏中文模板来创建专业且规范的学术论文。ACL(Association for Computational Linguistics)是计算语言学领域的重要会议,其提供的模板旨在确保论文格式的...

    cakephp中acl详解.rar

    在 CakePHP 中,Access Control List(ACL,访问控制列表)是一个强大的工具,用于管理用户对资源的访问权限。本教程将深入探讨CakePHP的ACL系统,以便你能够有效地实现安全的用户权限管理。 **1. ACL基本概念** ...

    在Linux文件系统中增加ACL功能.pdf

    在 Linux 文件系统中增加 ACL 功能 Linux 操作系统中,存储控制是通过一个 9 位的存储控制字来进行的,只能对文件的所有者、文件所有者所在的组及其它用户的文件操作权限进行设置。这种文件存储控制功能在实际使用...

    BCM实现ACL功能

    实现ACL功能。 ACL,Access Control List,访问控制列表,是路由器和交换机接口的指令列表,用来控制端口进出的数据包。这张表中包含了匹配关系、条件和查询语句,表只是一个框架结构,其目的是为了对某种访问进行...

    cakephp中acl详解

    在CakePHP中,Access Control List(ACL)是一个强大的工具,用于管理应用程序中的权限和访问控制。让我们深入探讨一下CakePHP中的ACL系统。 ### ACL基础概念 **1. ACO (Access Control Object)**:ACO代表要控制...

    锐捷交换机ACL配置

    7. **日志记录**:启用ACL日志功能可以帮助管理员跟踪和分析网络流量,从而优化和调整策略。日志可以记录匹配规则的流量信息,为故障排查提供依据。 通过深入理解以上知识点并熟练掌握相关配置命令,我们可以有效地...

    acl C++跨平台库.rar

    protocol(用 C 语言写的一些网络应用协议库)、lib_acl_cpp(用 C++ 语言编写,封装了 lib_acl/lib_protocol 两个库,同时增加更多实用的功能库)、 lib_fiber(用 C 语言编写的支持高性能、高并发的网络协程库)、...

    acl 的使用方法

    ACL 规则中还定义了源地址、生效时间段这样的字段,这些字段称作匹配选项。 ACL 匹配选项 ACL 提供了极其丰富的匹配选项。用户可以选择二层以太网帧头信息、三层报文信息、四层报文信息等作为匹配选项,从而让 ACL ...

    基于Linux2.6内核ACL功能体验

    随着网络安全和数据保护的需求增加,ACL成为了现代操作系统中不可或缺的一部分。在Linux 2.6内核及以后的版本中,ACL得到了广泛的支持,允许管理员对文件和目录的访问权限进行更精细的定制。 在基于Linux 2.6内核的...

    acl-3.0.19

    acl 是 one advanced C/C++ library 的简称,主要包括网络通信库以及服务器框架库等功能,支持 Linux/Windows/Solaris/FreeBsd/MacOS 平台;整个 acl 项目主要包含三个函数库:lib_acl(纯C开发的基础库,主要包含...

    标准ACL和扩展ACL.doc

    在本实验中,我们将学习到ACL设计原则和工作过程,以及如何定义和应用标准ACL和扩展ACL。此外,我们还将学习到EIGRP路由协议的配置和应用。 一、ACL设计原则和工作过程 ACL(Access Control List,访问控制列表)...

    acl框架库是一个C语言网络框架库,主要包含:服务器开发框架、同步异步网络通讯、常用数据结构、进程池线程池、流式xmljson

    ACL框架库是一个专为C语言设计的网络框架,它提供了丰富的功能,使开发者能够更高效地构建网络应用程序。这个框架的核心特性包括服务器开发框架、同步和异步网络通信机制、常用的数据结构、进程池和线程池管理,以及...

    Zend_Acl文档

    // 在ACL中建立三个资源:内容管理系统ContentManager、广告系统ADManager及系统管理SystemAdmin $acl-&gt;add(new Zend_Acl_Resource('ContentManager')) -&gt;add(new Zend_Acl_Resource('ADManager')) -&gt;add(new Zend...

    基于BCM53115实现ACL功能

    "基于BCM53115实现ACL功能" 基于BCM53115实现ACL功能是指利用BCM53115芯片来实现访问控制列表(Access Control List,ACL)功能。ACL是一种流分类技术,用于控制网络设备对数据流的处理。ACL的本质是人为定义的一些...

    ACL原理及配置(ACL原理)

    2. **匹配规则**: 如果存在ACL,数据包将根据其源地址、目的地址、协议类型等属性与ACL中的规则进行匹配。 3. **允许或拒绝**: 根据匹配结果,决定是允许还是拒绝该数据包通过。 4. **处理未匹配情况**: 如果没有...

    ACL在网络安全中应用仿真实验.pdf

    文章详细介绍了ACL在网络安全中的应用,ACL作为一种重要的网络安全技术,其能够提供网络流量控制、提高网络性能、实现访问控制等多种功能。通过合理配置ACL,可以有效地保护网络资源,限制非法访问,从而维护网络...

    ACL 中英文翻译

    在最小ACL中,组级权限与所属组的权限相同,但在扩展ACL中,组级权限是所有组内条目权限的最大值,而所属组项则定义了该组成员的具体权限。如果掩码项不存在,那么被掩码的权限将不会生效。 当应用如`chmod`改变权...

    思科ACL基本的配置

    思科ACL基本配置 思科ACL(Access Control List,访问控制列表)是一种网络安全机制,用于控制网络流量和访问权限。思科ACL可以分为标准ACL、扩展ACL和命名ACL三种类型,每种类型都有其特点和应用场景。 标准ACL ...

    掌握ACL的配置方法

    - 添加规则:在ACL中使用`permit`或`deny`命令定义允许或拒绝的规则,指定源IP地址和协议。 - 应用ACL:在接口配置模式下,使用`ip access-group`命令将ACL应用到接口的入站或出站方向。 2. **扩展ACL**:除了源...

    Go-ACL是go的轻量级acl管理器

    1. **角色**:在Go-ACL中,你可以定义多种角色,比如管理员、普通用户等,并为每个角色赋予特定的权限。角色可以通过继承机制实现权限的层次结构,使得权限管理更加灵活。 2. **资源**:资源是需要进行权限控制的...

Global site tag (gtag.js) - Google Analytics