在多线程、多处理器甚至是分布式环境的编程时代,并发是一个不可回避的问题,很多程序员一碰到并发二字头皮就发麻,也包括我。既然并发问题摆在面前一个到无法回避的坎,倒不如拥抱它,把它搞清楚,决心花一定的时间从操作系统底层原理到Java的基础编程再到分布式环境等几个方面深入探索并发问题。先就从原理开始吧。
并发产生的原因
虽然从直观效果上,处理器是并行处理多项任务,但本质上一个处理器在某个时间点只能处理一个任务,属于串行执行。在单处理器的情况下,并发问题源于多道程序设计系统的一个基本特性:进程的相对执行速度不可预测,它取决于其他进程的活动、操作系统处理中断的方式以及操作系统的调度策略。在分布式环境下,并发产生的可能性就更大了,只要大家有依赖的共享资源,就有并发问题的出现,因为互相调用次序更加没法控制。
并发带来的问题
* 全局资源的共享充满了危险。不同任务对同一个共享资源的读写顺序非常关键
* 操作系统很难对分配资源进行最优化管理。挂起的线程占有了其他活动线程需要的资源
* 定位错误非常困难。这种问题来源和触发的不确定性,导致定位问题非常困难
* 限制分布式系统横向扩展能力
进程的交互
进程的交互方式决定了并发问题产生的上下文,解决并发问题也需根据进程交互方式的不同而不同对待。一般进程交互分为以下三种:
1)进程间相互独立
这种情况下虽然进程间没有数据共享,所做事情也互不联系,但它们存在竞争关系。计算机中有些临界资源比如I/O设备、存储器、CPU时间和时钟等等都需要通过竞争得到,你占用的时候就得保证别人没法占用,因此首先得解决这种互斥的需求。另外,要处理好这种临界资源的调度策略,处理不当就有可能发生死锁和饥饿
2)进程间通过共享合作
这种情况下进程间虽然执行的过程是相互独立的,互不知道对方的执行情况,但互相之间有共享的数据。因此除了有以上互斥需求和死锁饥饿的可能,另外还会有数据一致性的问题。当多个进程非原子性操作同一个数据时候,互相之间操作时序不当就有可能造成数据不一致
3)进程间通过通信合作
这种情况下进程间通过消息互相通信,知晓各自的执行情况,不共享任何资源,因此就可以避免互斥和数据不一致问题,但仍然存在死锁和饥饿的问题
并发问题的解决办法
操作系统解决并发问题一般通过互斥,为了提供互斥的支持,需要满足以下需求:
* 一次只允许一个进程进入临界区
* 一个非临界区停止的进程必须不干涉其他进程
* 不允许出现一个需要访问临界区的进程被无限延迟
* 一个进程驻留在临界区中的时间必须是有限的
* 临界区空闲时,任何需要进入临界区的进程必须能够立即进入
满足互斥的解决方案:
1)硬件支持
* 中断禁用
中断禁用简单说来就是在某一进程在临界区执行过程中禁用中断,不允许其他进程通过中断打断其执行。虽然这种方式可以保证互斥,但代价非常高,处理器被限制于只能交替执行程序,效率降低。另外不适用于多处理器环境。
* 专用机器指令
从硬件的角度提供一些机器指令,用于保证多个动作的原子性,通过适用这些具有原子性的指令来控制临界区的访问。比如提供符合以下逻辑的原子性指令:
1. boolean testset(int i){
2. if(i==0){
3. i=1;
4. return true;
5. }else{
6. return false;
7. }
8. }
boolean testset(int i){ if(i==0){ i=1; return true; }else{ return false; } }
在控制临界区的时候可以通过忙等待来保证只有一个进程停留在临界区,伪代码如下所示:
1. int bolt;
2. void onlyOneThread(){
3. while(!testset(bolt)){
4. /*等待*/
5. }
6. /*临界区*/
7. bolt=0;
8. }
int bolt; void onlyOneThread(){ while(!testset(bolt)){ /*等待*/ } /*临界区*/ bolt=0; }
专用机器指令的优点是可以不限制处理器数量,也不限制临界区的数量,但它的问题是使用了忙等待,消耗处理器时间。并且也存在饥饿和死锁的问题
2)信号量
其原理是多个进程可以通过简单的信号进行合作,一个进程可以被迫在某一个位置停止,直到它收到一个特定的信号,再重新被唤起工作。这种方式最大优点就是解决了忙等待的问题。其核心和机器指令类似,通过提供原子性信号量控制方法,一般情况下提供等待和唤起两种操作原语,以较为简单的二元信号量原语为例,两种方法的伪代码如下:
1. void wait(semaphore s){
2. if(s.value==1){
3. s.value=0;
4. }else{
5. /*停止此线程,并把线程放入s的线程等待队列(s.queue)里*/
6. }
7. }
8. void signal(semaphore s){
9. if(s.queue.size()==0){
10. s.value=1;
11. }else{
12. /*从s的线程等待队列(s.queue)里拿出一个线程,使其激活执行*/
13. }
14. }
void wait(semaphore s){ if(s.value==1){ s.value=0; }else{ /*停止此线程,并把线程放入s的线程等待队列(s.queue)里*/ } } void signal(semaphore s){ if(s.queue.size()==0){ s.value=1; }else{ /*从s的线程等待队列(s.queue)里拿出一个线程,使其激活执行*/ } }
两个方法的实现关键在于其原子性,当然也可以借助专用机器指令的方法来保障其原子性,毕竟这两种方法的执行不长,使用忙等待也问题不大。
再看互斥的问题,若使用信号量,则其具体实现如以下伪代码所示:
1. void onlyOneThread(){
2. wait(s);
3. /*临界区*/
4. signal(s);
5. }
void onlyOneThread(){ wait(s); /*临界区*/ signal(s); }
3)管程
信号量虽然解决了性能问题,但使得信号量的控制逻辑遍布在程序里,控制逻辑复杂以后很难整体上控制所有信号量。而管程的思路和面向对象类似,通过一个管程的概念把互斥和资源保护的细节封装在管程的内部,外部程序只需对管程的正确使用就能保证避免并发问题,管程的特点如下:
* 共享数据变量只能被管程的过程访问
* 一个进程通过调用管程的一个过程进入管程
* 只能有一个进程在管程中执行,其他进程被挂起,等待进入管程
4)消息传递
消息传递是通过消息通信的方式进程之间相互配合,满足互斥需求。这种方式最大好处就是可以运用与分布式环境。说到消息,抽象地看有两种操作方式:send和receive。从同步方式上看分为阻塞和非阻塞两种,其组合起来有以下 情况:
* 阻塞send,阻塞receive。发送进程和接收进程都被阻塞,直到信息交付,同步性最好
* 非阻塞send,阻塞receive。最为自然的一对组合
* 非阻塞send,非阻塞receive。
那么通过实现以上send和receive原语操作,就可达到互斥的目的,以下面伪代码为例,其中receive为阻塞的,send为非阻塞的:
1. void onlyOneThread(){
2. receive(box,msg);
3. /*临界区*/
4. send(box,msg);
5. }
void onlyOneThread(){ receive(box,msg); /*临界区*/ send(box,msg); }
小结
以上是从操作系统的底层来看待并发问题,平常的开发过程一般不需要了解,但透过其原理,我们可以发掘一些解决并发问题的思路。只有真正了解并发产生的原因和操作系统采取的办法,我们才能理解在更高一个层次(比如高级语言编程)为什么有那些控制和措施,为什么对一些代码要做并发控制。
引用自:
http://blog.csdn.net/cutesource/article/details/5778820
分享到:
相关推荐
《Java并发编程艺术》这本书深入探讨了Java平台上的并发编程技术。并发编程是现代多核处理器环境下提升软件性能的关键手段,而...无论你是初级开发者还是经验丰富的工程师,这本书都将是你探索并发编程世界的一把钥匙。
并发编程是计算机科学中的一个重要领域,特别是在多核处理器和分布式系统...每个脑图都是一张知识地图,引领学习者逐步探索并发编程的世界,虽然初看可能复杂,但随着理解的深入,将能更好地驾驭并发编程的技巧和策略。
《Java并发编程艺术》是一本深入探讨Java平台上的并发编程技术的专业书籍。这本书全面覆盖了Java并发编程的基础知识、核心概念以及高级技巧,旨在帮助读者理解如何在多线程环境中编写高效、安全的代码。 并发编程是...
这个资源包“Java并发编程从入门到精通源码.rar”显然是为了帮助开发者深入理解并掌握这一关键技能。它包含了从基础概念到高级技术的详细讲解,并提供了源码供学习者实践和探索。 在Java并发编程中,首先要了解的...
Clojure,作为一种现代的Lisp方言,运行在JVM上,提供了强大的并发编程模型。本文将详细介绍Clojure中的并发编程工具,包括原子操作、代理、软件事务内存(STM)等,并提供实际的代码示例。 Clojure的并发编程模型为...
在编程领域,Go 语言以其独特的并发模型和强大的性能吸引了众多开发者。并发编程是现代软件设计中的...《Go 并发编程实战》这本书将带你逐步探索 Go 语言并发编程的世界,通过实例和讲解,帮助你提升并发编程的能力。
量子计算中的并发编程.pptx 这一主题深入探讨了量子计算与并发编程结合的关键概念、理论基础以及技术实现。 ### 量子计算与并发编程概述 #### 量子计算概述 量子计算是一种新兴的计算范式,它利用量子力学原理来...
Erlang OTP并发编程实战是深入理解Erlang并发特性和 OTP(Open Telephony Platform)设计原则的关键资源。这本书的附书源码包含了14个章节的实例代码,旨在帮助读者通过实践掌握Erlang在分布式系统、容错以及高并发...
3. **并发支持**:Go语言内置了并发编程的支持,通过Goroutines和Channels,可以轻松地实现并发。 4. **内存管理**:Go语言拥有自动垃圾回收机制,简化了内存管理。 5. **静态类型**:Go是一种静态类型语言,这有助...
在IT行业中,尤其是在后端开发领域,并发编程是不可或缺的一部分。它涉及到如何让多个任务在同一时间执行,以提高系统的效率和资源利用率。本篇笔记主要关注并发编程中的两个关键概念:CAS(Compare and Swap)原子...
在Java编程领域,并发编程是一项核心技能,尤其是在开发大型、多线程的应用程序时。"并发编程Java代码示例.zip"这个压缩包很可能是包含了一...记得在实践中不断探索和学习,因为并发编程是一个既深奥又充满挑战的领域。
### Python并发编程技术详解 随着计算机硬件性能的不断提升,尤其是多核处理器的普及,软件并发编程成为了提升程序性能的...通过不断实践和探索,开发者可以更好地掌握Python并发编程技术,为用户提供更高质量的服务。
#### 一、Go语言并发编程概览 Go语言因其简洁的语法、高效的性能以及内置的并发支持,在后端开发领域备受青睐。本文将深入探讨Go语言中的并发编程技术,包括通道(channel)的工作原理、goroutine的基础与高级用法等...
《JAVA并发编程实践》这本书深入探讨了Java平台上的并发编程技术。并发编程是现代软件开发中的重要组成部分,尤其是在多核处理器越来越普及的今天,利用并发能够显著提高程序的执行效率和响应速度。以下是对该主题的...
### 并发编程之自定义简单线程池详解 #### 基本概念与理论基础 **并发编程**是现代软件开发中一个重要的领域,它...此外,还可以通过在线课程、专业书籍和官方文档等资源进一步学习和探索并发编程的相关知识和技术。
本文深入探讨了Java并发编程的关键组件——抽象队列同步器(AQS)及其在ReentrantLock的应用。AQS是处理线程同步问题的高效工具,是Java并发编程中的核心。文章首先简要介绍了并发编程...是探索Java并发编程核心概念
为了充分利用这门课程,学习者需要具备一定的Java基础知识,并准备深入探索并发编程和JVM优化这两个复杂但至关重要的领域。通过学习和实践,开发者可以提升程序的运行效率,减少系统资源消耗,从而提高整体系统性能...
Java是一种广泛使用的编程语言,由Sun Microsystems公司(现属于Oracle Corporation)在1995年发布。Java是一种面向对象的语言,设计时注重了网络移动设备和跨平台兼容性。Java的口号是“Write Once, Run Anywhere”...
Kotlin是一种现代的、静态类型的编程语言,由JetBrains公司开发并首次发布于2011年。它旨在成为Java平台的友好补充,提供更简洁的语法和增强的功能,同时与Java完全兼容。Kotlin语言的一些关键特性包括: 1. **简洁...