内存模型和volatile
前言
Github:https://github.com/HealerJean
1、内存模型
计算机在执行程序时,每条指令都是在CPU中执行的,而执行指令过程中,势必涉及到数据的读取和写入。
由于程序运行过程中的临时数据是存放在主存(物理内存)当中的,这时就存在一个问题,由于CPU执行速度很快,而从内存读取数据和向内存写入数据的过程跟CPU执行指令的速度比起来要慢的多,这样会大大降低指令执行的速度。因此在CPU里面就有了高速缓存
也就是,当程序在运行过程中,会将运算需要的数据从主存复制一份到CPU的高速缓存当中,那么CPU进行计算时就可以直接从它的高速缓存读取数据和向其中写入数据,当运算结束之后,再将高速缓存中的数据刷新到主存当中。
举个简单的例子,比如下面的这段代码:计算结束之后,再将高速缓存中的数据刷新到主存当中。举个简单的例子,比如下面的这段代码:
i = i + 1;
当线程执行这个语句时,会先从主存当中读取i的值,然后复制一份到高速缓存当中,然后CPU执行指令对i
进行加1操作,然后将数据写入高速缓存,最后将高速缓存中i最新的值刷新到主存当中。
这个代码在单线程中运行是没有任何问题的,但是在多线程中运行就会有问题了。
比如同时有2个线程执行这段代码,假如初始时i
的值为0,那么我们希望两个线程执行完之后i的值变为2。但是事实会是这样吗? 可能存在下面一种情况:
初始时,两个线程分别读取i的值存入各自所在的CPU的高速缓存当中,然后线程1进行i
加1操作,然后把i
的最新值1写入到内存。此时线程2的高速缓存当中i的值还是0,进行加1操作之后,i
的值为1,然后线程2把i的值写入内存。最终结果i
的值是1,而不是2。
这就是著名的缓存一致性问题。通常称这种被多个线程访问的变量为共享变量。
2、并发编程中的三个概念
2.1、原子性
原子性:即一个操作或者多个操作 要么全部执行,要么就都不执行。
举例:一个很经典的例子就是银行账户转账问题: 比如从账户A向账户B转1000元,那么必然包括2个操作: 1、从账户A减去1000元,2、往账户B加上1000元。
试想一下,如果这2个操作不具备原子性,会造成什么样的后果。假如从账户A减去1000元之后,操作突然中止(B没有收到A减去的指令消息)。然后又从B取出了500元,取出500元之后,再执行 往账户B加上2000元 的操作。这个时间B账户上是2500元。这样就会导致账户A虽然减去了1000元,但是账户B没有收到这个转过来的1000元。
所以这2个操作必须要具备原子性才能保证不出现一些意外的问题。
2.1、可见性
可见性:是指当多个线程访问同一个变量时,一个线程修改了这个变量的值,其他线程能够立即看得到修改的值。
举例,看下面这段代码:
//线程1执行的代码
int i = 0;
i = 10;
//线程2执行的代码
j = i;
假若执行线程1的是CPU1,执行线程2的是CPU2。
当线程1执行 i =10
这句时,会先把i的初始值加载到CPU1的高速缓存中,然后赋值为10,那么在CPU1的高速缓存当中i的值变为10了,却没有立即写入到主存当中。
此时线程2执行 j = i
,它会先去主存读取i的值并加载到CPU2的缓存当中,注意此时内存当中i的值还是0,那么就会使得j的值为0,而不是10.
这就是可见性问题,线程1对变量i修改了之后,线程2没有立即看到线程1修改的值。
2.3、有序性
有序性:即程序执行的顺序按照代码的先后顺序执行。举个简单的例子,看下面这段代码:
int i = 0;
boolean flag = false;
i = 1; //语句1
flag = true; //语句2
上面代码定义了一个int型变量·i
,定义了一个boolean类型变量flag
,然后分别对两个变量进行赋值操作。
从代码顺序上看,语句1是在语句2前面的,那么JVM在真正执行这段代码的时候会保证语句1一定会在语句2前面执行吗?不一定,为什么呢?这里可能会发生指令重排序(Instruction Reorder)。
指令重排序:处理器为了提高程序运行效率,可能会对输入代码进行优化,它不保证程序中各个语句的执行先后顺序同代码中的顺序一致,但是它会保证程序最终执行结果和代码顺序执行的结果是一致的。
比如上面的代码中,语句1和语句2谁先执行对最终的程序结果并没有影响,那么就有可能在执行过程中,语句2先执行而语句1后执行。 但是要注意,虽然处理器会对指令进行重排序,但是它会保证程序最终结果会和代码顺序执行结果相同,
那么它靠什么保证的呢?再看下面一个例子:
int a = 10; //语句1
int r = 2; //语句2
a = a + 3; //语句3
r = a*a; //语句4
那么可不可能是这个执行顺序呢: 语句2 语句1 语句4 语句3
**不可能,因为处理器在进行重排序时是会考虑指令之间的数据依赖性**,如果一个指令Instruction 2必须用到Instruction 1的结果,那么处理器会保证Instruction 1会在Instruction 2之前执行。
虽然重排序不会影响单个线程内程序执行的结果:但是多线程呢?下面看一个例子:
boolean inited = false;//一般是成员变量/静态变量
//线程1:
context = loadContext(); //语句1
inited = true; //语句2
//线程2:
while(!inited ){
sleep()
}
doSomethingwithconfig(context);
上面代码中,由于语句1和语句2没有数据依赖性,因此可能会被重排序。,
假如发生了重排序,语句1和语句2变了位置,:在线程1执行完inited = true
,然后先执行语句2
,而此是线程2会以为初始化工作已经完成,那么就会跳出while循环,去执行doSomethingwithconfig(context)
方法,而线程1语句1还没有执行,此时context并没有被初始化,就会导致程序出错。
从上面可以看出,指令重排序不会影响单个线程的执行,但是会影响到线程并发执行的正确性。
2.3、总结
也就是说,要想并发程序正确地执行,必须要保证原子性、可见性以及有序性。只要有一个没有被保证,就有可能会导致程序运行不正确。
3、Java内存模型
Java内存模型规定所有的变量都是存在主存当中(类似于前面说的物理内存),每个线程都有自己的工作内存(类似于前面的高速缓存)。
**线程对变量的所有操作都必须在工作内存中进行,而不能直接对主存进行操作。并且每个线程不能访问其他线程的工作内存。**
2.1、原子性
对基本数据类型的变量的读取和赋值操作是原子性操作,即这些操作是不可被中断的,要么执行,要么不执行。
上面一句话虽然看起来简单,但是理解起来并不是那么容易。看下面一个例子:请分析以下哪些操作是原子性操作:
x = 10; //语句1
y = x; //语句2
x++; //语句3
x = x + 1; //语句4
咋一看,有些朋友可能会说上面的4个语句中的操作都是原子性操作。其实只有语句1是原子性操作,其他三个语句都不是原子性操作。
语句1(是):是直接将数值10赋值给x
,也就是说线程执行这个语句的会直接将数值10写入到工作内存中。
语句2(否):实际上包含2个操作,它先要去读取x的值,再将x的值写入工作内存,虽然读取x的值以及 将x的值写入工作内存 这2个操作都是原子性操作,但是合起来就不是原子性操作了。
语句3和语句4(否):同样的,·x++
和 x = x+1
包括3个操作:读取x的值,进行加1操作,写入新的值。
所以上面4个语句只有语句1的操作具备原子性。也就是说,只有简单的读取、赋值(而且必须是将数字赋值给某个变量,变量之间的相互赋值不是原子操作)才是原子操作。
从上面可以看出,Java内存模型只保证了基本读取和赋值是原子性操作。 如果要实现更大范围操作的原子性,可以通过synchronized
和Lock来
实现。能够保证任一时刻只有一个线程执行该代码块,那么自然就不存在原子性问题了,从而保证了原子性。
2.2、可见性
对于可见性,Java提供了volatile
关键字来保证可见性。
当一个共享变量被`volatile`修饰时,它会保证修改的值会立即被更新到主存,当有其他线程需要读取时,它会去内存中读取新值。
而普通的共享变量不能保证可见性,因为普通共享变量被修改之后,什么时候被写入主存是不确定的,当其他线程去读取时,此时内存中可能还是原来的旧值,因此无法保证可见性。
另外,通过synchronized
和Lock
也能够保证可见性,synchronized
和Lock
能保证同一时刻只有一个线程获取锁然后执行同步代码,并且在释放锁之前会将对变量的修改刷新到主存当中。因此可以保证可见性。
2.3、有序性
在Java内存模型中,允许编译器和处理器对指令进行重排序,但是重排序过程不会影响到单线程程序的执行,却会影响到多线程并发执行的正确性。
在Java里面,可以通过volatile
关键字来保证一定的“有序性”(具体原理在在下面讲述)。另外可以通过synchronized
和Lock
来保证有序性,很显然,synchronized和Lock保证每个时刻是有一个线程执行同步代码,相当于是让线程顺序执行同步代码,自然就保证了有序性。
3、volatile
一旦一个共享变量(类的成员变量、类的静态变量)被
volatile
修饰之后,那么就具备了两层语义:1)保证了不同线程对这个变量进行操作时的可见性,即一个线程修改了某个变量的值,这新值对其他线程来说是立即可见的。
2)禁止进行指令重排序。
3.1、volatile
保证可见性
3.1.1、介绍
先看一段代码,假如线程1先执行,线程2后执行:
//线程1
boolean stop = false;
while(!stop){
doSomething();
}
//线程2
stop = true;
多线程执行,这里的情况有很多种。这里分析一种线程1已经进入了while循环的情况。
在前面已经解释过,每个线程在运行过程中都有自己的工作内存,那么线程1在运行的时候,会将stop变量的值拷贝一份放在自己的工作内存当中。 那么当线程2更改了stop
变量的值之后,但是还没来得及写入主存当中,线程2转去做其他事情了,那么线程1由于不知道线程2对stop
变量的更改(每次while
判断的时候还会从主从中取哦)因此还会一直循环下去。
但是用volatile
修饰之后就变得不一样了 volatile
变量在每次被线程访问时,都强迫从主内存中重读该变量的值.。
第一:使用volatile
关键字会强制将修改的值立即写入主存;
第二:使用volatile
关键字的话,当线程2进行修改时,线程2修改工作内存中的值,然后将修改后的值写入内存。在修改的过程中,会导致线程1的工作内存中缓存变量stop的缓存行无效。
第三:线程1while循环已经开始了哦,由于线程1的工作内存中缓存变量stop的缓存行无效,发现自己的缓存行无效,它会等待缓存行对应的主存地址被更新之后,然后去对应的主存读取最新的值。那么线程1读取到的就是最新的正确的值。接着退出while
死循环
3.1.1、原理
Java
虚拟机规范中定义了一种Java
内存 模型(Java Memory Model,即JMM)来屏蔽掉各种硬件和操作系统的内存访问差异,以实现让Java程序在各种平台下都能达到一致的并发效果。
Java
内存模型的主要目标就是定义程序中各个变量的访问规则,即在虚拟机中将变量存储到内存和从内存中取出变量这样的细节。
JMM
中规定所有的变量都存储在主内存(Main Memory
)中,每条线程都有自己的工作内存(Work Memory
),线程的工作内存中保存了该线程所使用的变量的从主内存中拷贝的副本。线程对于变量的读、写都必须在工作内存中进行,而不能直接读、写主内存中的变量。同时,本线程的工作内存的变量也无法被其他线程直接访问,必须通过主内存完成。⬤ 当对
volatile
变量执行写操作后,JMM
会把工作内存中的最新变量值强制刷新到主内存⬤ 写操作会导致其他线程中的缓存无效
这样,其他线程使用缓存时,发现本地工作内存中此变量无效,便从主内存中获取,这样获取到的变量便是最新的值,实现了线程的可见性。
总结下:
volatile
可见性的实现就是借助了CPU
的lock
指令,通过在写volatile
的机器指令前加上lock
前缀,使写volatile
具有以下两个原则:
- 写
volatile
时处理器会将缓存写回到主内存。- 一个处理器的缓存写回到内存会导致其他处理器的缓存失效。
3.2、volatile
保证原子性吗?不能!!!
从上面知道volatile
关键字保证了操作的可见性,但是volatile能保证对变量的操作是原子性吗?下面看一个例子:
public class Test {
public volatile int inc = 0;
public void increase() {
inc++;
}
public static void main(String[] args) {
final Test test = new Test();
for(int i=0;i<10;i++){
new Thread(){
public void run() {
for(int j=0;j<1000;j++)
test.increase();
};
}.start();
}
while(Thread.activeCount()>1) //保证前面的线程都执行完
Thread.yield();
System.out.println(test.inc);
}
}
大家想一下这段程序的输出结果是多少?也许有些朋友认为是10000。但是事实上运行它会发现每次运行结果都不一致,都是一个小于10000的数字。
可能有的朋友就会有疑问,不对啊,上面是对变量inc进行自增操作,由于volatile保证了可见性,那么在每个线程中对inc自增完之后,在其他线程中都能看到修改后的值啊,所以有10个线程分别进行了1000次操作,那么最终inc的值应该是1000*10=10000。
这里面就有一个误区了,volatile关键字能保证可见性没有错,但是上面的程序错在没能保证原子性。可见性只能保证每次读取的是最新的值,但是volatile没办法保证对变量的操作的原子性。 在前面已经提到过,自增操作是不具备原子性的,它包括读取变量的原始值、进行加1操作、写入工作内存。那么就是说自增操作的三个子操作可能会分割开执行,就有可能导致下面这种情况出现:
假如某个时刻变量inc的值为10,
线程1对变量进行自增操作,线程1先读取了变量inc的原始值,然后线程1被阻塞了;
然后线程2对变量进行自增操作,线程2也去读取变量inc的原始值,由于线程1只是对变量inc进行读取操作,而没有对变量进行修改操作,所以不会导致线程2的工作内存中缓存变量inc的缓存行无效,所以线程2会直接去主存读取inc的值,发现inc的值时10,然后进行加1操作,并把11写入工作内存,最后写入主存。
然后线程1接着进行加1操作,由于已经读取了inc的值,注意此时在线程1的工作内存中inc的值仍然为10,所以线程1对inc进行加1操作后inc的值为11,然后将11写入工作内存,最后写入主存。
那么两个线程分别进行了一次自增操作后,inc只增加了1。
3.2.1、保证可见性的其他方式
3.2.1.1、synchronized
public class Test {
public int inc = 0;
public synchronized void increase() {
inc++;
}
public static void main(String[] args) {
final Test test = new Test();
for(int i=0;i<10;i++){
new Thread(){
public void run() {
for(int j=0;j<1000;j++)
test.increase();
};
}.start();
}
while(Thread.activeCount()>1) //保证前面的线程都执行完
Thread.yield();
System.out.println(test.inc);
}
}
3.2.1.2、采用Lock
:
public class Test {
public int inc = 0;
Lock lock = new ReentrantLock();
public void increase() {
lock.lock();
try {
inc++;
} finally{
lock.unlock();
}
}
public static void main(String[] args) {
final Test test = new Test();
for(int i=0;i<10;i++){
new Thread(){
public void run() {
for(int j=0;j<1000;j++)
test.increase();
};
}.start();
}
while(Thread.activeCount()>1) //保证前面的线程都执行完
Thread.yield();
System.out.println(test.inc);
}
}
3.2.1.3、AtomicInteger(volatile CAS策略)
public class Test {
public AtomicInteger inc = new AtomicInteger();
public void increase() {
inc.getAndIncrement();
}
public static void main(String[] args) {
final Test test = new Test();
for(int i=0;i<10;i++){
new Thread(){
public void run() {
for(int j=0;j<1000;j++)
test.increase();
};
}.start();
}
while(Thread.activeCount()>1) //保证前面的线程都执行完
Thread.yield();
System.out.println(test.inc);
}
}
3.3、volatile
能保证有序性吗?
3.3.1、介绍
在前面提到
volatile
关键字能禁止指令重排序,所以volatile
能在一定程度上保证有序性。
volatile
关键字禁止指令重排序有两层意思:1)当程序执行到
volatile
变量的读操作或者写操作时,在其前面的操作的更改肯定全部已经进行,且结果已经对后面的操作可见;在其后面的操作肯定还没有进行;2)在进行指令优化时,不能将在对
volatile
变量访问的语句放在其后面执行,也不能把volatile
变量后面的语句放到其前面执行。
可能上面说的比较绕,举个简单的例子:
//x、y为非volatile变量
//flag为volatile变量
x = 2; //语句1
y = 0; //语句2
volatile flag = true; //语句3
x = 4; //语句4
由于 flag
变量为volatile
变量,那么在进行指令重排序的过程的时候,不会将语句3放到语句1、语句2前面,也不会讲语句3放到语句4、语句5后面。但是要注意语句1
和语句 2
的顺序、语句 4
和语句 5
的顺序是不作任何保证的。
并且volatile
关键字能保证,执行到语句 3
时,语句1和语句2必定是执行完毕了的,且语句1和语句2的执行结果对语句3、语句4、语句5是可见的。
那么我们回到前面举的一个例子:
//线程1:
context = loadContext(); //语句1
inited = true; //语句2
//线程2:
while(!inited ){
sleep()
}
doSomethingwithconfig(context);
前面举这个例子的时候,线程1执行之前先执行线程2,提到有可能语句2会在语句1之前执行,那么久可能导致context
还没被初始化,而线程2中就使用未初始化的context
去进行操作,导致程序出错。
这里如果用volatile
关键字对inited
变量进行修饰,就不会出现这种问题了,因为当执行到语句2时,必定能保证context已经初始化完毕。
3.3.2、原理
volatile
是通过编译器在生成字节码时,在指令序列中添加“内存屏障”来禁止指令重排序的。
3.3.2.1、内存屏障
硬件层面的“内存屏障”:
名称 | 说明 |
---|---|
sfence :即写屏障(Store Barrier ) |
在写指令之后插入写屏障,能让写入缓存的最新数据写回到主内存,以保证写入的数据立刻对其他线程可见 |
lfence :即读屏障(Load Barrier ) |
在读指令前插入读屏障,可以让高速缓存中的数据失效,重新从主内存加载数据,以保证读取的是最新的数据 |
mfence :即全能屏障(modify/mix Barrier ) |
兼具sfence 和lfence 的功能 |
lock 前缀 |
lock 不是内存屏障,而是一种锁。执行时会锁住内存子系统来确保执行顺序,甚至跨多个CPU 。 |
JMM
层面的“内存屏障”:
名称 | 说明 |
---|---|
LoadLoad 屏障 |
对于这样的语句 Load1 ; LoadLoad ; Load2 ,在Load2 及后续读取操作要读取的数据被访问前,保证Load1 要读取的数据被读取完毕。 |
StoreStore 屏障 |
对于这样的语句Store1 ; StoreStore ; Store2 ,在 Store2 及后续写入操作执行前,保证 Store1 的写入操作对其它处理器可见。 |
LoadStore 屏障 |
对于这样的语句 Load1 ; LoadStore ; Store2 ,在 Store2 及后续写入操作被刷出前,保证Load1 要读取的数据被读取完毕。 |
StoreLoad 屏障 |
对于这样的语句Store1 ; StoreLoad ; Load2 ,在Load2 及后续所有读取操作执行前,保证Store1 的写入对所有处理器可见。 |
JVM
的实现会在 volatile
读写前后均加上内存屏障,在一定程度上保证有序性。如下所示:
StoreStoreBarrier
volatile 写操作
StoreLoadBarrier
在每个volatile写操作的前面插入一个StoreStore屏障,防止写volatile与后面的写操作重排序。
在每个volatile写操作的后面插入一个StoreLoad屏障,防止写volatile与后面的读操作重排序。
LoadLoadBarrier
volatile 读操作
LoadStoreBarrier
在每个volatile读操作的后面插入一个LoadLoad屏障,防止读volatile与后面的读操作重排序。
在每个volatile读操作的后面插入一个LoadStore屏障,防止读volatile与后面的写操作重排序。
3.4、使用volatile关键字的场景
使用volatile 的条件:主要是保证操作是原子性操作,才能保证使用volatile关键字的程序在并发时能够正确执行。
3.4.1、状态标记量
volatile boolean flag = false; //一般是成员变量/静态变量
while(!flag){
doSomething();
}
volatile boolean inited = false;//一般是成员变量/静态变量
//线程1:
context = loadContext();
inited = true; //一定程度上保证了有序性
//线程2:
while(!inited ){
sleep()
}
doSomethingwithconfig(context);
3.4、volatile
和synchronize
区别
1、volatile
修饰的变量,synchronize
修饰的是同步代码块或者是同步方法
2、volatile
不能保证原子性,synchronize
能够保证原子性
4、volatile的原理和实现机制
前面讲述了源于volatile关键字的一些使用,下面我们来探讨一下volatile到底如何保证可见性和禁止指令重排序的。 下面这段话摘自《深入理解Java虚拟机》:
观察加入volatile
关键字和没有加入volatile关键字时所生成的汇编代码发现,加入volatile关键字时,会多出一个lock
前缀指令,lock前缀指令实际上相当于一个内存屏障(也成内存栅栏),内存屏障会提供3个功能:
1、它确保指令重排序时不会把其后面的指令排到内存屏障之前的位置,也不会把前面的指令排到内存屏障的后面;即在执行到内存屏障这句指令时,在它前面的操作已经全部完成;
2、如果是写操作,它会导致其他CPU中对应的缓存行无效,写完之后,它会强制将对缓存的修改操作立即写入主存;