並發程式的噩夢——數據競爭
並發程式的噩夢——數據競爭
前言
在本文當中我主要通過不同執行緒對同一個數據進行加法操作的例子,層層遞進,使用忙等待、synchronized
和鎖去解決我們的問題,切實體會為什麼數據競爭是並發程式的噩夢。
問題介紹
在本文當中會有一個貫穿全文的例子:不同的執行緒會對一個全局變數不斷的進行加的操作!然後比較結果,具體來說我們設置一個靜態類變數
data
,然後使用兩個執行緒循環10萬次對data
進行加一操作!!!
像這種多個執行緒會存在同時對同一個數據進行修改操作的現象就叫做數據競爭。數據競爭會給程式造成很多不可預料的結果,讓程式存在許多漏洞。而我們上面的任務就是一個典型的數據競爭的問題。
並發不安全版本
在這一小節我們先寫一個上述問題的並發不安全的版本:
public class Sum {
public static int data;
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(() -> {
for (int i = 0; i < 100000; i++)
data++;
});
Thread t2 = new Thread(() -> {
for (int i = 0; i < 100000; i++)
data++;
});
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(data);
}
}
// 輸出結果
131888
上面兩個執行緒執行的結果最終都會小於200000
,為什麼會出現這種情況呢?
我們首先來看一下記憶體的邏輯布局圖:
data
全局變數保存在主記憶體當中,當現成開始執行的時候會從主記憶體拷貝一份到執行緒的工作記憶體當中,也就是執行緒的本地記憶體,在本地進行計算之後就會將本地記憶體當中的數據同步到主記憶體
我們現在來模擬一下出現問題的過程:
- 主記憶體
data
的初始值等於0,兩個執行緒得到的data
初始值都等於0。
- 現在執行緒一將
data
加一,然後執行緒一將data
的值同步回主記憶體,整個記憶體的數據變化如下:
- 現在執行緒二
data
加一,然後將data
的值同步回主記憶體(將原來主記憶體的值覆蓋掉了):
我們本來希望data
的值在經過上面的變化之後變成2
,但是執行緒二覆蓋了我們的值,因此在多執行緒情況下,會使得我們最終的結果變小。
忙等待(Busy waiting)
那麼我們能在不使用鎖或者synchronized
的情況實現上面這個任務嗎?答案是可以,這種方法叫做忙等待。具體怎麼做呢,我們可以用一個布爾值flag
去標識是那個執行緒執行sum++
,我們先看程式碼然後進行分析:
public class BusyWaiting {
public static int sum;
public static boolean flag;
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(() -> {
for (int i = 0; i < 100000; i++) {
// 當 flag == false 的時候這個執行緒進行
// sum++ 操作然後讓 flat = true
// 讓另外一個執行緒進行 sum++ 操作
while (flag);
sum++;
flag = true;
System.out.println("Thread 1 : " + sum);
}
});
Thread t2 = new Thread(() -> {
for (int i = 0; i < 100000; i++) {
// 當 flag = true 的之後這個執行緒進行
// sum++ 操作然後讓 flat = false
// 讓另外一個執行緒進行 sum++ 操作
while (!flag) ;
sum++;
flag = false;
System.out.println("Thread 2 : " + sum);
}
});
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
上面程式碼的流程是一個執行緒進行完sum++
操作之後會將自己的flag
變成另外一個值,然後自己的while
循環當中的條件會一直為true
自己就會一直處於while
循環當中,然後另外一個執行緒的while
循環條件會變成false
,則另外一個執行緒會執行sum++
操作,然後將flag
變成另外一個值,然後執行緒又開始執行了……
忙等待中數據競爭的BUG
但是上面的程式碼會出現問題,就是在執行一段時間之後兩個執行緒都會卡死,都會一直處於死循環當中。這是因為一個執行緒在更新完flag
之後,另外一個執行緒的flag
值沒有更新,也就是說兩個執行緒的flag
值不一樣,這樣就都會處於死循環當中。出現這個問題的原因是一個執行緒更新完flag
之後,另外一個執行緒的flag
使用的還是舊值。
比如在某個時刻主記憶體當中的flag
的值等於false
,執行緒t1和執行緒t2當中的flag
的值都等於false
,這個情況下執行緒t1是可以進行sum++
操作的,然後執行緒t1進行sum++
操作之後將flag
的值改成true
,然後將這個值同步更新回主記憶體,但是此時執行緒t2拿到的還是舊值false
,他依舊處於死循環當中,就這樣兩個執行緒都處於死循環了。
上面的問題本質上是一個數據可見性的問題,也就是說一個執行緒修改了flag
的值,另外一個執行緒拿不到最新的值,使用的還是舊的值,而在java
當中給我們提供了一種機制可以解決數據可見性的問題。在java
當中我們可以使用volatile
去解決數據可見性的問題。當一個變數被volatile關鍵字修飾時,對於共享資源的寫操作先要修改工作記憶體,但是修改結束後會立刻將其刷新到主記憶體中。當其他執行緒對該volatile
修飾的共享資源進行了修改,則會導致當前執行緒在工作記憶體中的共享資源失效,所以必須從主記憶體中再次獲取。這樣的話就可以保證共享數據的可見性了。因為某個執行緒如果修改了volatile
修飾的共享變數時,其他執行緒的值會失效,然後重新從主記憶體當中載入最新的值,關於volatile
的內容還是比較多,在本文當中我們只談他在本文當中作用。
修改後的正確程式碼如下:
public class BusyWaiting {
public static volatile int sum;
public static volatile boolean flag;
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(() -> {
for (int i = 0; i < 100000; i++) {
// 當 flag == false 的時候這個執行緒進行
// sum++ 操作然後讓 flat = true
// 讓另外一個執行緒進行 sum++ 操作
while (flag);
sum++;
flag = true;
System.out.println("Thread 1 : " + sum);
}
});
Thread t2 = new Thread(() -> {
for (int i = 0; i < 100000; i++) {
// 當 flag = true 的之後這個執行緒進行
// sum++ 操作然後讓 flat = false
// 讓另外一個執行緒進行 sum++ 操作
while (!flag) ;
sum++;
flag = false;
System.out.println("Thread 2 : " + sum);
}
});
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
上面的sum
也需要使用volatile
進行修飾,因為如果某個執行緒++
之後,如果另外一個執行緒沒有更新最新的值就進行++
的話,在數據更新回主記憶體的時候就會覆蓋原來的值,最終的結果就會變小,因此需要使用volatile
進行修飾。
在上文當中我們主要分析了如何使用忙等待來解決我們的問題,但是忙等待有一個很大的問題就是執行緒會不斷的進行循環,這很消耗CPU資源,在下文當中我們將主要介紹兩種方法解決本文開頭提出的問題,而且可以不進行循環操作,而是將執行緒掛起,而不是一直在執行。
synchronized並發安全版本
synchronized
是java
語言的關鍵字,它可以用來保證程式的原子性。在並發的情況下我們可以用它來保證我們的程式在某個時刻只能有一個執行緒執行,保證同一時刻只有一個執行緒獲得synchronized
鎖對象。
public class Sum01 {
public static int sum;
public static synchronized void addSum() {
for (int i = 0; i < 100000; i++)
sum++;
}
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(Sum01::addSum);
Thread t2 = new Thread(Sum01::addSum);
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
// 輸出結果
200000
上面的程式碼addSum
方法加入了synchronized
進行修飾,在java
當中被synchronized
的靜態方法在同一個時刻只能有一個執行緒能夠進入,也就是說上面的程式碼會讓執行緒t1
或者t2
先執行addSum
函數,然後另外一個執行緒在進行執行,那這個跟串列執行就一樣了。那麼我們就可以不在靜態方法上加synchronized
的關鍵字,可以使用靜態程式碼塊:
public class Sum02 {
public static int sum;
public static Object lock = new Object();
public static void addSum() {
for (int i = 0; i < 100000; i++)
synchronized (lock) {
sum++;
}
}
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(Sum02::addSum);
Thread t2 = new Thread(Sum02::addSum);
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
上面程式碼雖然沒有使用用synchronized
修飾的靜態方法,但是上面的程式碼使用了用synchronized
修飾的同步程式碼塊,在每一個時刻只能有一個執行緒執行下面這段程式碼:
// synchronized 修飾的程式碼塊稱作同步程式碼塊 ,
// lock 是一個 全局的靜態類變數 只有競爭到 lock 對象的執行緒
// 才能夠進入同步程式碼塊 同樣的每一個時刻只能有一個執行緒進入
synchronized (lock) {
sum++;
}
上面程式碼雖然沒有使用靜態同步方法(synchronized
修飾的靜態方法),但是有同步程式碼塊(synchronized
修飾的程式碼塊),在一個程式碼當中會有100000
次進入同步程式碼塊,這裡也花費很多時間,因此上面的程式碼的效率也不高。
其實我們可以用一個臨時變數存儲100000
次加法的結果,最後一次將結果加入到data
當中:
public class Sum03 {
public static int sum;
public static Object lock = new Object();
public static void addSum() {
int tempSum = 0;
for (int i = 0; i < 100000; i++)
tempSum++;
synchronized (lock) {
sum += tempSum;
}
}
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(Sum03::addSum);
Thread t2 = new Thread(Sum03::addSum);
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
使用鎖進行臨界區的保護
臨界區:像這種與數據競爭有關的程式碼塊叫做臨界區,比如上文程式碼當中的
sum++
。
在java
當中除了使用synchronized
形成同步方法或者同步程式碼塊的方法保證多個執行緒訪問臨界區的順序,還可以使用鎖對臨界區進行保護。在java
當中一個非常常用的鎖就是可重入鎖ReentrantLock
,可以保證在lock
和unlock
之間的區域在每一個時刻只有一個執行緒在執行。
import java.util.concurrent.locks.ReentrantLock;
public class Sum04 {
public static int sum;
public static ReentrantLock lock = new ReentrantLock();
public static void addSum() {
int tempSum = 0;
for (int i = 0; i < 100000; i++)
tempSum++;
lock.lock();
try {
sum += tempSum;
}catch (Exception ignored) {
}finally {
lock.unlock();
}
}
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(Sum04::addSum);
Thread t2 = new Thread(Sum04::addSum);
t1.start();
t2.start();
// 讓主執行緒等待 t1 和 t2
// 直到 t1 和 t2 執行完成
t1.join();
t2.join();
System.out.println(sum);
}
}
synchronized和鎖對可見性的影響
在上文當中我們僅僅提到了
synchronized
和鎖可以保證在每一個時刻只能有一個執行緒在臨界區當中執行,這一點其實前面的忙等待也可以實現,但是後面我們提到了第一版忙等待的實現是有錯誤的,在程式運行的時候程式會陷入死循環。因此synchronized
和鎖也會有這樣的問題,但是為什麼synchronized
和鎖可以使得程式能夠正常執行呢?原因如下:
synchronized
關鍵字能夠保證可見性,synchronized
關鍵字能夠不僅能夠保證同一時刻只有一個執行緒獲得鎖,並且還會確保在鎖釋放之前,會將對變數的修改刷新到主記憶體當中。JDK
給我們提供的鎖工具(比如ReentrantLock
)也能夠保證可見性,鎖的lock方法能夠保證在同一時刻只有一個執行緒獲得鎖然後執行同步方法,並且會確保在鎖釋放(鎖的unlock方法)之前會將對變數的修改刷新到主記憶體當中。
數據競爭的知名後果——死鎖
死鎖是由於多個執行緒相互之間競爭資源而形成的一種相互僵持的局面。
在前面的忙等待當中的那個錯誤如果不仔細思考是很容易忽略的,由此可見數據競爭給並發編程帶來的難度。下面一個典型的存在死鎖可能的程式碼:
public class DeadLock {
public static Object fork = new Object();
public static Object chopsticks = new Object();
public static void fork() {
System.out.println(Thread.currentThread().getName() + "想獲得叉子");
synchronized (fork) {
System.out.println(Thread.currentThread().getName() + "已經獲得叉子");
System.out.println(Thread.currentThread().getName() + "想獲得筷子");
synchronized (chopsticks) {
System.out.println(Thread.currentThread().getName() + "已經獲得筷子");
}
}
}
public static void chopsticks() {
System.out.println(Thread.currentThread().getName() + "想獲得筷子");
synchronized (chopsticks) {
System.out.println(Thread.currentThread().getName() + "已經獲得筷子");
System.out.println(Thread.currentThread().getName() + "想獲得叉子");
synchronized (fork) {
System.out.println(Thread.currentThread().getName() + "已經獲得叉子");
}
}
}
public static void main(String[] args) throws InterruptedException {
Thread t1 = new Thread(DeadLock::fork);
Thread t2 = new Thread(DeadLock::chopsticks);
t1.start();
t2.start();
t1.join();
t2.join();
}
}
// 輸出結果
Thread-0想獲得叉子
Thread-1想獲得筷子
Thread-0已經獲得叉子
Thread-0想獲得筷子
Thread-1已經獲得筷子
Thread-1想獲得叉子
// 在這裡已經卡死
- 執行緒1想先獲得叉子,再獲得筷子。
- 執行緒2想先獲得筷子,再獲得叉子。
假如有一個狀態執行緒1已經獲得叉子,執行緒2已經獲得筷子,現在執行緒1想獲得執行緒2手中的筷子,執行緒2想獲得執行緒1的叉子,由此產生一個窘境,兩個執行緒都想從對方獲得東西,也就是說兩個執行緒都無法得到資源,兩個執行緒都卡死了,因而產生了死鎖。根據上面的分析我們可以發現死鎖產生最根本的原因還是數據競爭。
死鎖產生的條件
- 互斥條件:一個資源只能被一個執行緒佔有,如果其他執行緒想得到這個資源必須由其他執行緒釋放。
- 不剝奪條件:一個執行緒獲得的資源在沒有使用完之前不能被其他執行緒強行獲得,只能由執行緒主動釋放。
- 請求保持條件:至少保持了一個資源而且提出新的資源請求,比如上面執行緒1獲得了叉子又請求筷子。
- 循環等待條件:執行緒1請求執行緒2的資源,執行緒2請求執行緒3的資源,….,執行緒\(N\)請求執行緒1的資源。
如果想破壞死鎖,那就去破壞上面四個產生死鎖的條件即可。
總結
在本篇文章當中主要通過一道並發的題,通過各種方法去解決,在本文當中最重要的例子就是忙等待了,在忙等待的例子當中我們分析我們程式的問題,體會了數據競爭問題的複雜性,他會給我們的並發程式造成很多的問題,比如後面提到的死鎖的問題。除此之外我們還介紹了關於volatile
和synchronized
還有鎖對數據可見性的影響。
以上就是本文所有的內容了,希望大家有所收穫,我是LeHung,我們下期再見!!!(記得點贊收藏哦!)
更多精彩內容合集可訪問項目://github.com/Chang-LeHung/CSCore
關注公眾號:一無是處的研究僧,了解更多電腦(Java、Python、電腦系統基礎、演算法與數據結構)知識。