本文主要讲解 Java 内存模型和并发的基础概念, 目的是为下文 "volatile 实践" 一文做铺垫.
1. 内存模型相关概念
大家都知道, 计算机在执行程序时, 每条指令都是在 CPU 中执行的, 而执行指令过程中, 势必涉及到数据的读取和写入. 由于程序运行过程中的临时数据是存放在主存 (物理内存) 当中的, 这时就存在一个问题, 由于 CPU 执行速度很快, 而从内存读取数据和向内存写入数据的过程跟 CPU 执行指令的速度比起来要慢的多, 因此如果任何时候对数据的操作都要通过和内存的交互来进行, 会大大降低指令执行的速度. 因此在 CPU 里面就有了高速缓存.
也就是, 当程序在运行过程中, 会将运算需要的数据从主存复制一份到 CPU 的高速缓存当中, 那么 CPU 进行计算时就可以直接从它的高速缓存读取数据和向其中写入数据, 当运算结束之后, 再将高速缓存中的数据刷新到主存当中. 举个简单的例子, 比如下面的这段代码:
i = i + 1;
当线程执行这个语句时, 会先从主存当中读取 i 的值, 然后复制一份到高速缓存当中, 然后 CPU 执行指令对 i 进行加 1 操作, 然后将数据写入高速缓存, 最后将高速缓存中 i 最新的值刷新到主存当中.
这个代码在单线程中运行是没有任何问题的, 但是在多线程中运行就会有问题了. 在多核 CPU 中, 每条线程可能运行于不同的 CPU 中, 因此每个线程运行时有自己的高速缓存(对单核 CPU 来说, 其实也会出现这种问题, 只不过是以线程调度的形式来分别执行的). 本文我们以多核 CPU 为例
比如同时有 2 个线程执行这段代码, 假如初始时 i 的值为 0, 那么我们希望两个线程执行完之后 i 的值变为 2. 但是事实会是这样吗?
可能存在下面一种情况: 初始时, 两个线程分别读取 i 的值存入各自所在的 CPU 的高速缓存当中, 然后线程 1 进行加 1 操作, 然后把 i 的最新值 1 写入到内存. 此时线程 2 的高速缓存当中 i 的值还是 0, 进行加 1 操作之后, i 的值为 1, 然后线程 2 把 i 的值写入内存.
最终结果 i 的值是 1, 而不是 2. 这就是著名的缓存一致性问题. 通常称这种被多个线程访问的变量为共享变量.
也就是说, 如果一个变量在多个 CPU 中都存在缓存(一般在多线程编程时才会出现), 那么就可能存在缓存不一致的问题.
为了解决缓存不一致性问题, 通常来说有以下 2 种解决方法:
1)通过在总线加 LOCK# 锁的方式
2)通过缓存一致性协议
这 2 种方式都是硬件层面上提供的方式.
在早期的 CPU 当中, 是通过在总线上加 LOCK# 锁的形式来解决缓存不一致的问题. 因为 CPU 和其他部件进行通信都是通过总线来进行的, 如果对总线加 LOCK# 锁的话, 也就是说阻塞了其他 CPU 对其他部件访问(如内存), 从而使得只能有一个 CPU 能使用这个变量的内存. 比如上面例子中 如果一个线程在执行 i = i +1, 如果在执行这段代码的过程中, 在总线上发出了 LCOK# 锁的信号, 那么只有等待这段代码完全执行完毕之后, 其他 CPU 才能从变量 i 所在的内存读取变量, 然后进行相应的操作. 这样就解决了缓存不一致的问题.
但是上面的方式会有一个问题, 由于在锁住总线期间, 其他 CPU 无法访问内存, 导致效率低下. 所以就出现了缓存一致性协议. 最出名的就是 Intel 的 MESI 协议, MESI 协议保证了每个缓存中使用的共享变量的副本是一致的. 它核心的思想是: 当 CPU 写数据时, 如果发现操作的变量是共享变量, 即在其他 CPU 中也存在该变量的副本, 会发出信号通知其他 CPU 将该变量的缓存行置为无效状态, 因此当其他 CPU 需要读取这个变量时, 发现自己缓存中缓存该变量的缓存行是无效的, 那么它就会从内存重新读取.
2. 并发编程中的三个概念
在并发编程中, 我们通常会遇到以下三个问题: 原子性问题, 可见性问题, 有序性问题. 我们先看具体看一下这三个概念:
2.1 原子性
原子性: 即一个操作或者多个操作 要么全部执行并且执行的过程不会被任何因素打断, 要么就都不执行.
一个很经典的例子就是银行账户转账问题:
比如从账户 A 向账户 B 转 1000 元, 那么必然包括 2 个操作: 从账户 A 减去 1000 元, 往账户 B 加上 1000 元.
试想一下, 如果这 2 个操作不具备原子性, 会造成什么样的后果. 假如从账户 A 减去 1000 元之后, 操作突然中止. 然后又从 B 取出了 500 元, 取出 500 元之后, 再执行 往账户 B 加上 1000 元 的操作. 这样就会导致账户 A 虽然减去了 1000 元, 但是账户 B 没有收到这个转过来的 1000 元.
所以这 2 个操作必须要具备原子性才能保证不出现一些意外的问题.
同样地反映到并发编程中会出现什么结果呢?
举个最简单的例子, 大家想一下假如为一个 32 位的变量赋值过程不具备原子性的话, 会发生什么后果?
i = 9
假若一个线程执行到这个语句时, 我暂且假设为一个 32 位的变量赋值包括两个过程: 为低 16 位赋值, 为高 16 位赋值.
那么就可能发生一种情况: 当将低 16 位数值写入之后, 突然被中断, 而此时又有一个线程去读取 i 的值, 那么读取到的就是错误的数据.
2.2 可见性
可见性是指当多个线程访问同一个变量时, 一个线程修改了这个变量的值, 其他线程能够立即看得到修改的值.
举个简单的例子, 看下面这段代码
- // 线程 1 执行的代码
- int i = 0;
- i = 10;
- // 线程 2 执行的代码
- j = i;
假若执行线程 1 的是 CPU1, 执行线程 2 的是 CPU2. 由上面的分析可知, 当线程 1 执行 i =10 这句时, 会先把 i 的初始值加载到 CPU1 的高速缓存中, 然后赋值为 10, 那么在 CPU1 的高速缓存当中 i 的值变为 10 了, 却没有立即写入到主存当中.
此时线程 2 执行 j = i, 它会先去主存读取 i 的值并加载到 CPU2 的缓存当中, 注意此时内存当中 i 的值还是 0, 那么就会使得 j 的值为 0, 而不是 10.
这就是可见性问题, 线程 1 对变量 i 修改了之后, 线程 2 没有立即看到线程 1 修改的值.
2.3 有序性
有序性: 即程序执行的顺序按照代码的先后顺序执行. 举个简单的例子, 看下面这段代码:
- int i = 0;
- boolean flag = false;
- i = 1; // 语句 1
- flag = true; // 语句 2
上面代码定义了一个 int 型变量, 定义了一个 boolean 类型变量, 然后分别对两个变量进行赋值操作. 从代码顺序上看, 语句 1 是在语句 2 前面的, 那么 JVM 在真正执行这段代码的时候会保证语句 1 一定会在语句 2 前面执行吗? 不一定, 为什么呢? 这里可能会发生指令重排序(Instruction Reorder).
下面解释一下什么是指令重排序, 一般来说, 处理器为了提高程序运行效率, 可能会对输入代码进行优化, 它不保证程序中各个语句的执行先后顺序同代码中的顺序一致, 但是它会保证程序最终执行结果和代码顺序执行的结果是一致的. 比如上面的代码中, 语句 1 和语句 2 谁先执行对最终的程序结果并没有影响, 那么就有可能在执行过程中, 语句 2 先执行而语句 1 后执行.
但是要注意, 虽然处理器会对指令进行重排序, 但是它会保证程序最终结果会和代码顺序执行结果相同, 那么它靠什么保证的呢? 再看下面一个例子:
- int a = 10; // 语句 1
- int r = 2; // 语句 2
- a = a + 3; // 语句 3
- r = a*a; // 语句 4
这段代码有 4 个语句, 那么可能的一个执行顺序是:
那么可不可能是这个执行顺序呢: 语句 2 语句 1 语句 4 语句 3
不可能, 因为处理器在进行重排序时是会考虑指令之间的数据依赖性, 如果一个指令 Instruction 2 必须用到 Instruction 1 的结果, 那么处理器会保证 Instruction 1 会在 Instruction 2 之前执行.
虽然重排序不会影响单个线程内程序执行的结果, 但是多线程呢? 下面看一个例子:
- // 线程 1:
- context = loadContext(); // 语句 1
- inited = true; // 语句 2
- // 线程 2:
- while(!inited ){
- sleep()
- }
- doSomethingwithconfig(context);
上面代码中, 由于语句 1 和语句 2 没有数据依赖性, 因此可能会被重排序. 假如发生了重排序, 在线程 1 执行过程中先执行语句 2, 而此是线程 2 会以为初始化工作已经完成, 那么就会跳出 while 循环, 去执行 doSomethingwithconfig(context)方法, 而此时 context 并没有被初始化, 就会导致程序出错.
从上面可以看出, 指令重排序不会影响单个线程的执行, 但是会影响到线程并发执行的正确性.
也就是说, 要想并发程序正确地执行, 必须要保证原子性, 可见性以及有序性. 只要有一个没有被保证, 就有可能会导致程序运行不正确.
3.Java 内存模型
在前面谈到了一些关于内存模型以及并发编程中可能会出现的一些问题. 下面我们来看一下 Java 内存模型, 研究一下 Java 内存模型为我们提供了哪些保证以及在 java 中提供了哪些方法和机制来让我们在进行多线程编程时能够保证程序执行的正确性.
在 Java 虚拟机规范中试图定义一种 Java 内存模型 (Java Memory Model,JMM) 来屏蔽各个硬件平台和操作系统的内存访问差异, 以实现让 Java 程序在各种平台下都能达到一致的内存访问效果. 那么 Java 内存模型规定了哪些东西呢, 它定义了程序中变量的访问规则, 往大一点说是定义了程序执行的次序. 注意, 为了获得较好的执行性能, Java 内存模型并没有限制执行引擎使用处理器的寄存器或者高速缓存来提升指令执行速度, 也没有限制编译器对指令进行重排序. 也就是说, 在 java 内存模型中, 也会存在缓存一致性问题和指令重排序的问题.
Java 内存模型规定所有的变量都是存在主存当中(类似于前面说的物理内存), 每个线程都有自己的工作内存(类似于前面的高速缓存). 线程对变量的所有操作都必须在工作内存中进行, 而不能直接对主存进行操作. 并且每个线程不能访问其他线程的工作内存.
举个简单的例子: 在 java 中, 执行下面这个语句:
i = 10
执行线程必须先在自己的工作线程中对变量 i 所在的缓存行进行赋值操作, 然后再写入主存当中. 而不是直接将数值 10 写入主存当中.
那么 Java 语言 本身对 原子性, 可见性以及有序性提供了哪些保证呢?
3.1 原子性
在 Java 中, 对基本数据类型的变量的读取和赋值操作是原子性操作, 即这些操作是不可被中断的, 要么执行, 要么不执行. 上面一句话虽然看起来简单, 但是理解起来并不是那么容易. 看下面一个例子 i: 请分析以下哪些操作是原子性操作:
- x = 10; // 语句 1
- y = x; // 语句 2
- x++; // 语句 3
- x = x + 1; // 语句 4
咋一看, 有些朋友可能会说上面的 4 个语句中的操作都是原子性操作. 其实只有语句 1 是原子性操作, 其他三个语句都不是原子性操作.
语句 1 是直接将数值 10 赋值给 x, 也就是说线程执行这个语句的会直接将数值 10 写入到工作内存中.
语句 2 实际上包含 2 个操作, 它先要去读取 x 的值, 再将 x 的值写入工作内存, 虽然读取 x 的值以及 将 x 的值写入工作内存 这 2 个操作都是原子性操作, 但是合起来就不是原子性操作了. 同样的, x++ 和 x = x+1 包括 3 个操作: 读取 x 的值, 进行加 1 操作, 写入新的值.
所以上面 4 个语句只有语句 1 的操作具备原子性.
也就是说, 只有简单的读取, 赋值 (而且必须是将数字赋值给某个变量, 变量之间的相互赋值不是原子操作) 才是原子操作. 不过这里有一点需要注意: 在 32 位平台下, 对 64 位数据的读取和赋值是需要通过两个操作来完成的, 不能保证其原子性. 但是好像在最新的 JDK 中, JVM 已经保证对 64 位数据的读取和赋值也是原子性操作了.
从上面可以看出, Java 内存模型只保证了基本读取和赋值是原子性操作, 如果要实现更大范围操作的原子性, 可以通过 synchronized 和 Lock 来实现. 由于 synchronized 和 Lock 能够保证任一时刻只有一个线程执行该代码块, 那么自然就不存在原子性问题了, 从而保证了原子性.
3.2 可见性
对于可见性, Java 提供了 volatile 关键字来保证可见性.
当一个共享变量被 volatile 修饰时, 它会保证修改的值会立即被更新到主存, 当有其他线程需要读取时, 它会去内存中读取新值.
而普通的共享变量不能保证可见性, 因为普通共享变量被修改之后, 什么时候被写入主存是不确定的, 当其他线程去读取时, 此时内存中可能还是原来的旧值, 因此无法保证可见性.
另外, 通过 synchronized 和 Lock 也能够保证可见性, synchronized 和 Lock 能保证同一时刻只有一个线程获取锁然后执行同步代码, 并且在释放锁之前会将对变量的修改刷新到主存当中. 因此可以保证可见性.
3.3 有序性
在 Java 内存模型中, 允许编译器和处理器对指令进行重排序, 但是重排序过程不会影响到单线程程序的执行, 却会影响到多线程并发执行的正确性.
在 Java 里面, 可以通过 volatile 关键字来保证一定的 "有序性"(具体原理在下一节讲述). 另外可以通过 synchronized 和 Lock 来保证有序性, 很显然, synchronized 和 Lock 保证每个时刻是有一个线程执行同步代码, 相当于是让线程顺序执行同步代码, 自然就保证了有序性.
另外, Java 内存模型具备一些先天的 "有序性", 即不需要通过任何手段就能够得到保证的有序性, 这个通常也称为 happens-before 原则. 如果两个操作的执行次序无法从 happens-before 原则推导出来, 那么它们就不能保证它们的有序性, 虚拟机可以随意地对它们进行重排序.
下面就来具体介绍下 happens-before 原则(先行发生原则):
程序次序规则: 一个线程内, 按照代码顺序, 书写在前面的操作先行发生于书写在后面的操作
锁定规则: 一个 unLock 操作先行发生于后面对同一个锁额 lock 操作
volatile 变量规则: 对一个变量的写操作先行发生于后面对这个变量的读操作
传递规则: 如果操作 A 先行发生于操作 B, 而操作 B 又先行发生于操作 C, 则可以得出操作 A 先行发生于操作 C
线程启动规则: Thread 对象的 start()方法先行发生于此线程的每个一个动作
线程中断规则: 对线程 interrupt()方法的调用先行发生于被中断线程的代码检测到中断事件的发生
线程终结规则: 线程中所有的操作都先行发生于线程的终止检测, 我们可以通过 Thread.join()方法结束, Thread.isAlive()的返回值手段检测到线程已经终止执行
对象终结规则: 一个对象的初始化完成先行发生于他的 finalize()方法的开始
这 8 条原则摘自《深入理解 Java 虚拟机》.
这 8 条规则中, 前 4 条规则是比较重要的, 后 4 条规则都是显而易见的.
下面我们来解释一下前 4 条规则:
对于程序次序规则来说, 我的理解就是一段程序代码的执行在单个线程中看起来是有序的. 注意, 虽然这条规则中提到 "书写在前面的操作先行发生于书写在后面的操作", 这个应该是程序看起来执行的顺序是按照代码顺序执行的, 因为虚拟机可能会对程序代码进行指令重排序. 虽然进行重排序, 但是最终执行的结果是与程序顺序执行的结果一致的, 它只会对不存在数据依赖性的指令进行重排序. 因此, 在单个线程中, 程序执行看起来是有序执行的, 这一点要注意理解. 事实上, 这个规则是用来保证程序在单线程中执行结果的正确性, 但无法保证程序在多线程中执行的正确性.
第二条规则也比较容易理解, 也就是说无论在单线程中还是多线程中, 同一个锁如果出于被锁定的状态, 那么必须先对锁进行了释放操作, 后面才能继续进行 lock 操作.
第三条规则是一条比较重要的规则, 也是后文将要重点讲述的内容. 直观地解释就是, 如果一个线程先去写一个变量, 然后一个线程去进行读取, 那么写入操作肯定会先行发生于读操作.
第四条规则实际上就是体现 happens-before 原则具备传递性.
来源: https://juejin.im/post/5c1b2564f265da615114b43f