- 浏览: 981713 次
- 性别:
- 来自: 上海
-
文章分类
最新评论
-
Mr.Cheney:
去掉 UUID字符串中的“-” 直接replaceAll(&q ...
JAVA生成全局唯一ID 使用 java.util.UUID -
呜哩喵:
楼主nice
java中的时间操作 -
zxs6587:
Thinking inJava我读着好像说要建立基类对象啊!请 ...
创建子类的对象时也要创建其所有父类的对象? -
just_Word:
getFullYear
date.getyear -
JamesQian:
我觉得楼上的synchronized(this),notify ...
notify() wait()
原创 浅析 Java Thread.join() 收藏
一、在研究join的用法之前,先明确两件事情。
1.join方法定义在Thread类中,则调用者必须是一个线程,
例如:
Thread t = new CustomThread();//这里一般是自定义的线程类
t.start();//线程起动
t.join();//此处会抛出InterruptedException异常
2.上面的两行代码也是在一个线程里面执行的。
以上出现了两个线程,一个是我们自定义的线程类,我们实现了run方法,做一些我们需要的工作;另外一个线程,生成我们自定义线程类的对象,然后执行
customThread.start();
customThread.join();
在这种情况下,两个线程的关系是一个线程由另外一个线程生成并起动,所以我们暂且认为第一个线程叫做“子线程”,另外一个线程叫做“主线程”。
二、为什么要用join()方法
主线程生成并起动了子线程,而子线程里要进行大量的耗时的运算(这里可以借鉴下线程的作用),当主线程处理完其他的事务后,需要用到子线程的处理结果,这个时候就要用到join();方法了。
三、join方法的作用
在网上看到有人说“将两个线程合并”。这样解释我觉得理解起来还更麻烦。不如就借鉴下API里的说法:
“等待该线程终止。”
解释一下,是主线程(我在 “一”里已经命名过了)等待子线程的终止。也就是在子线程调用了join()方法后面的代码,只有等到子线程结束了才能执行。(Waits for this thread to die.)
四、用实例来理解
写一个简单的例子来看一下join()的用法,一共三个类:
1.CustomThread 类
2. CustomThread1类
3. JoinTestDemo 类,main方法所在的类。
代码1:
view plaincopy to clipboardprint?
1. package wxhx.csdn2;
2. /**
3. *
4. * @author bzwm
5. *
6. */
7. class CustomThread1 extends Thread {
8. public CustomThread1() {
9. super("[CustomThread1] Thread");
10. };
11. public void run() {
12. String threadName = Thread.currentThread().getName();
13. System.out.println(threadName + " start.");
14. try {
15. for (int i = 0; i < 5; i++) {
16. System.out.println(threadName + " loop at " + i);
17. Thread.sleep(1000);
18. }
19. System.out.println(threadName + " end.");
20. } catch (Exception e) {
21. System.out.println("Exception from " + threadName + ".run");
22. }
23. }
24. }
25. class CustomThread extends Thread {
26. CustomThread1 t1;
27. public CustomThread(CustomThread1 t1) {
28. super("[CustomThread] Thread");
29. this.t1 = t1;
30. }
31. public void run() {
32. String threadName = Thread.currentThread().getName();
33. System.out.println(threadName + " start.");
34. try {
35. t1.join();
36. System.out.println(threadName + " end.");
37. } catch (Exception e) {
38. System.out.println("Exception from " + threadName + ".run");
39. }
40. }
41. }
42. public class JoinTestDemo {
43. public static void main(String[] args) {
44. String threadName = Thread.currentThread().getName();
45. System.out.println(threadName + " start.");
46. CustomThread1 t1 = new CustomThread1();
47. CustomThread t = new CustomThread(t1);
48. try {
49. t1.start();
50. Thread.sleep(2000);
51. t.start();
52. t.join();//在代碼2里,將此處注釋掉
53. } catch (Exception e) {
54. System.out.println("Exception from main");
55. }
56. System.out.println(threadName + " end!");
57. }
58. }
package wxhx.csdn2; /** * * @author bzwm * */ class CustomThread1 extends Thread { public CustomThread1() { super("[CustomThread1] Thread"); }; public void run() { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); try { for (int i = 0; i < 5; i++) { System.out.println(threadName + " loop at " + i); Thread.sleep(1000); } System.out.println(threadName + " end."); } catch (Exception e) { System.out.println("Exception from " + threadName + ".run"); } } } class CustomThread extends Thread { CustomThread1 t1; public CustomThread(CustomThread1 t1) { super("[CustomThread] Thread"); this.t1 = t1; } public void run() { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); try { t1.join(); System.out.println(threadName + " end."); } catch (Exception e) { System.out.println("Exception from " + threadName + ".run"); } } } public class JoinTestDemo { public static void main(String[] args) { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); CustomThread1 t1 = new CustomThread1(); CustomThread t = new CustomThread(t1); try { t1.start(); Thread.sleep(2000); t.start(); t.join();//在代碼2里,將此處注釋掉 } catch (Exception e) { System.out.println("Exception from main"); } System.out.println(threadName + " end!"); } }
打印结果:
main start.//main方法所在的线程起动,但没有马上结束,因为调用t.join();,所以要等到t结束了,此线程才能向下执行。
[CustomThread1] Thread start.//线程CustomThread1起动
[CustomThread1] Thread loop at 0//线程CustomThread1执行
[CustomThread1] Thread loop at 1//线程CustomThread1执行
[CustomThread] Thread start.//线程CustomThread起动,但没有马上结束,因为调用t1.join();,所以要等到t1结束了,此线程才能向下执行。
[CustomThread1] Thread loop at 2//线程CustomThread1继续执行
[CustomThread1] Thread loop at 3//线程CustomThread1继续执行
[CustomThread1] Thread loop at 4//线程CustomThread1继续执行
[CustomThread1] Thread end. //线程CustomThread1结束了
[CustomThread] Thread end.// 线程CustomThread在t1.join();阻塞处起动,向下继续执行的结果
main end!//线程CustomThread结束,此线程在t.join();阻塞处起动,向下继续执行的结果。
修改一下代码,得到代码2:(这里只写出修改的部分)
view plaincopy to clipboardprint?
1. public class JoinTestDemo {
2. public static void main(String[] args) {
3. String threadName = Thread.currentThread().getName();
4. System.out.println(threadName + " start.");
5. CustomThread1 t1 = new CustomThread1();
6. CustomThread t = new CustomThread(t1);
7. try {
8. t1.start();
9. Thread.sleep(2000);
10. t.start();
11. // t.join();//在代碼2里,將此處注釋掉
12. } catch (Exception e) {
13. System.out.println("Exception from main");
14. }
15. System.out.println(threadName + " end!");
16. }
17. }
public class JoinTestDemo { public static void main(String[] args) { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); CustomThread1 t1 = new CustomThread1(); CustomThread t = new CustomThread(t1); try { t1.start(); Thread.sleep(2000); t.start(); // t.join();//在代碼2里,將此處注釋掉 } catch (Exception e) { System.out.println("Exception from main"); } System.out.println(threadName + " end!"); } }
打印结果:
main start. // main方法所在的线程起动,但没有马上结束,这里并不是因为join方法,而是因为Thread.sleep(2000);
[CustomThread1] Thread start. //线程CustomThread1起动
[CustomThread1] Thread loop at 0//线程CustomThread1执行
[CustomThread1] Thread loop at 1//线程CustomThread1执行
main end!// Thread.sleep(2000);结束,虽然在线程CustomThread执行了t1.join();,但这并不会影响到其他线程(这里main方法所在的线程)。
[CustomThread] Thread start. //线程CustomThread起动,但没有马上结束,因为调用t1.join();,所以要等到t1结束了,此线程才能向下执行。
[CustomThread1] Thread loop at 2//线程CustomThread1继续执行
[CustomThread1] Thread loop at 3//线程CustomThread1继续执行
[CustomThread1] Thread loop at 4//线程CustomThread1继续执行
[CustomThread1] Thread end. //线程CustomThread1结束了
[CustomThread] Thread end. // 线程CustomThread在t1.join();阻塞处起动,向下继续执行的结果
五、从源码看join()方法
在CustomThread的run方法里,执行了t1.join();,进入看一下它的JDK源码:
view plaincopy to clipboardprint?
1. public final void join() throws InterruptedException {
2. n(0);
3. }
public final void join() throws InterruptedException { join(0); }
然后进入join(0)方法:
view plaincopy to clipboardprint?
1. /**
2. * Waits at most <code>millis</code> milliseconds for this thread to
3. * die. A timeout of <code>0</code> means to wait forever. // 注意这句
4. *
5. * @param millis the time to wait in milliseconds.
6. * @exception InterruptedException if another thread has interrupted
7. * the current thread. The <i>interrupted status</i> of the
8. * current thread is cleared when this exception is thrown.
9. */
10. public final synchronized void join(long millis) //参数millis为0.
11. throws InterruptedException {
12. long base = System.currentTimeMillis();
13. long now = 0;
14. if (millis < 0) {
15. throw new IllegalArgumentException("timeout value is negative");
16. }
17. if (millis == 0) {//进入这个分支
18. while (isAlive()) {//判断本线程是否为活动的。这里的本线程就是t1.
19. wait(0);//阻塞
20. }
21. } else {
22. while (isAlive()) {
23. long delay = millis - now;
24. if (delay <= 0) {
25. break;
26. }
27. wait(delay);
28. now = System.currentTimeMillis() - base;
29. }
30. }
31. }
/** * Waits at most <code>millis</code> milliseconds for this thread to * die. A timeout of <code>0</code> means to wait forever. //注意这句 * * @param millis the time to wait in milliseconds. * @exception InterruptedException if another thread has interrupted * the current thread. The <i>interrupted status</i> of the * current thread is cleared when this exception is thrown. */ public final synchronized void join(long millis) //参数millis为0. throws InterruptedException { long base = System.currentTimeMillis(); long now = 0; if (millis < 0) { throw new IllegalArgumentException("timeout value is negative"); } if (millis == 0) {//进入这个分支 while (isAlive()) {//判断本线程是否为活动的。这里的本线程就是t1. wait(0);//阻塞 } } else { while (isAlive()) { long delay = millis - now; if (delay <= 0) { break; } wait(delay); now = System.currentTimeMillis() - base; } } }
单纯从代码上看,如果线程被生成了,但还未被起动,调用它的join()方法是没有作用的。将直接继续向下执行,这里就不写代码验证了。
一、在研究join的用法之前,先明确两件事情。
1.join方法定义在Thread类中,则调用者必须是一个线程,
例如:
Thread t = new CustomThread();//这里一般是自定义的线程类
t.start();//线程起动
t.join();//此处会抛出InterruptedException异常
2.上面的两行代码也是在一个线程里面执行的。
以上出现了两个线程,一个是我们自定义的线程类,我们实现了run方法,做一些我们需要的工作;另外一个线程,生成我们自定义线程类的对象,然后执行
customThread.start();
customThread.join();
在这种情况下,两个线程的关系是一个线程由另外一个线程生成并起动,所以我们暂且认为第一个线程叫做“子线程”,另外一个线程叫做“主线程”。
二、为什么要用join()方法
主线程生成并起动了子线程,而子线程里要进行大量的耗时的运算(这里可以借鉴下线程的作用),当主线程处理完其他的事务后,需要用到子线程的处理结果,这个时候就要用到join();方法了。
三、join方法的作用
在网上看到有人说“将两个线程合并”。这样解释我觉得理解起来还更麻烦。不如就借鉴下API里的说法:
“等待该线程终止。”
解释一下,是主线程(我在 “一”里已经命名过了)等待子线程的终止。也就是在子线程调用了join()方法后面的代码,只有等到子线程结束了才能执行。(Waits for this thread to die.)
四、用实例来理解
写一个简单的例子来看一下join()的用法,一共三个类:
1.CustomThread 类
2. CustomThread1类
3. JoinTestDemo 类,main方法所在的类。
代码1:
view plaincopy to clipboardprint?
1. package wxhx.csdn2;
2. /**
3. *
4. * @author bzwm
5. *
6. */
7. class CustomThread1 extends Thread {
8. public CustomThread1() {
9. super("[CustomThread1] Thread");
10. };
11. public void run() {
12. String threadName = Thread.currentThread().getName();
13. System.out.println(threadName + " start.");
14. try {
15. for (int i = 0; i < 5; i++) {
16. System.out.println(threadName + " loop at " + i);
17. Thread.sleep(1000);
18. }
19. System.out.println(threadName + " end.");
20. } catch (Exception e) {
21. System.out.println("Exception from " + threadName + ".run");
22. }
23. }
24. }
25. class CustomThread extends Thread {
26. CustomThread1 t1;
27. public CustomThread(CustomThread1 t1) {
28. super("[CustomThread] Thread");
29. this.t1 = t1;
30. }
31. public void run() {
32. String threadName = Thread.currentThread().getName();
33. System.out.println(threadName + " start.");
34. try {
35. t1.join();
36. System.out.println(threadName + " end.");
37. } catch (Exception e) {
38. System.out.println("Exception from " + threadName + ".run");
39. }
40. }
41. }
42. public class JoinTestDemo {
43. public static void main(String[] args) {
44. String threadName = Thread.currentThread().getName();
45. System.out.println(threadName + " start.");
46. CustomThread1 t1 = new CustomThread1();
47. CustomThread t = new CustomThread(t1);
48. try {
49. t1.start();
50. Thread.sleep(2000);
51. t.start();
52. t.join();//在代碼2里,將此處注釋掉
53. } catch (Exception e) {
54. System.out.println("Exception from main");
55. }
56. System.out.println(threadName + " end!");
57. }
58. }
package wxhx.csdn2; /** * * @author bzwm * */ class CustomThread1 extends Thread { public CustomThread1() { super("[CustomThread1] Thread"); }; public void run() { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); try { for (int i = 0; i < 5; i++) { System.out.println(threadName + " loop at " + i); Thread.sleep(1000); } System.out.println(threadName + " end."); } catch (Exception e) { System.out.println("Exception from " + threadName + ".run"); } } } class CustomThread extends Thread { CustomThread1 t1; public CustomThread(CustomThread1 t1) { super("[CustomThread] Thread"); this.t1 = t1; } public void run() { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); try { t1.join(); System.out.println(threadName + " end."); } catch (Exception e) { System.out.println("Exception from " + threadName + ".run"); } } } public class JoinTestDemo { public static void main(String[] args) { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); CustomThread1 t1 = new CustomThread1(); CustomThread t = new CustomThread(t1); try { t1.start(); Thread.sleep(2000); t.start(); t.join();//在代碼2里,將此處注釋掉 } catch (Exception e) { System.out.println("Exception from main"); } System.out.println(threadName + " end!"); } }
打印结果:
main start.//main方法所在的线程起动,但没有马上结束,因为调用t.join();,所以要等到t结束了,此线程才能向下执行。
[CustomThread1] Thread start.//线程CustomThread1起动
[CustomThread1] Thread loop at 0//线程CustomThread1执行
[CustomThread1] Thread loop at 1//线程CustomThread1执行
[CustomThread] Thread start.//线程CustomThread起动,但没有马上结束,因为调用t1.join();,所以要等到t1结束了,此线程才能向下执行。
[CustomThread1] Thread loop at 2//线程CustomThread1继续执行
[CustomThread1] Thread loop at 3//线程CustomThread1继续执行
[CustomThread1] Thread loop at 4//线程CustomThread1继续执行
[CustomThread1] Thread end. //线程CustomThread1结束了
[CustomThread] Thread end.// 线程CustomThread在t1.join();阻塞处起动,向下继续执行的结果
main end!//线程CustomThread结束,此线程在t.join();阻塞处起动,向下继续执行的结果。
修改一下代码,得到代码2:(这里只写出修改的部分)
view plaincopy to clipboardprint?
1. public class JoinTestDemo {
2. public static void main(String[] args) {
3. String threadName = Thread.currentThread().getName();
4. System.out.println(threadName + " start.");
5. CustomThread1 t1 = new CustomThread1();
6. CustomThread t = new CustomThread(t1);
7. try {
8. t1.start();
9. Thread.sleep(2000);
10. t.start();
11. // t.join();//在代碼2里,將此處注釋掉
12. } catch (Exception e) {
13. System.out.println("Exception from main");
14. }
15. System.out.println(threadName + " end!");
16. }
17. }
public class JoinTestDemo { public static void main(String[] args) { String threadName = Thread.currentThread().getName(); System.out.println(threadName + " start."); CustomThread1 t1 = new CustomThread1(); CustomThread t = new CustomThread(t1); try { t1.start(); Thread.sleep(2000); t.start(); // t.join();//在代碼2里,將此處注釋掉 } catch (Exception e) { System.out.println("Exception from main"); } System.out.println(threadName + " end!"); } }
打印结果:
main start. // main方法所在的线程起动,但没有马上结束,这里并不是因为join方法,而是因为Thread.sleep(2000);
[CustomThread1] Thread start. //线程CustomThread1起动
[CustomThread1] Thread loop at 0//线程CustomThread1执行
[CustomThread1] Thread loop at 1//线程CustomThread1执行
main end!// Thread.sleep(2000);结束,虽然在线程CustomThread执行了t1.join();,但这并不会影响到其他线程(这里main方法所在的线程)。
[CustomThread] Thread start. //线程CustomThread起动,但没有马上结束,因为调用t1.join();,所以要等到t1结束了,此线程才能向下执行。
[CustomThread1] Thread loop at 2//线程CustomThread1继续执行
[CustomThread1] Thread loop at 3//线程CustomThread1继续执行
[CustomThread1] Thread loop at 4//线程CustomThread1继续执行
[CustomThread1] Thread end. //线程CustomThread1结束了
[CustomThread] Thread end. // 线程CustomThread在t1.join();阻塞处起动,向下继续执行的结果
五、从源码看join()方法
在CustomThread的run方法里,执行了t1.join();,进入看一下它的JDK源码:
view plaincopy to clipboardprint?
1. public final void join() throws InterruptedException {
2. n(0);
3. }
public final void join() throws InterruptedException { join(0); }
然后进入join(0)方法:
view plaincopy to clipboardprint?
1. /**
2. * Waits at most <code>millis</code> milliseconds for this thread to
3. * die. A timeout of <code>0</code> means to wait forever. // 注意这句
4. *
5. * @param millis the time to wait in milliseconds.
6. * @exception InterruptedException if another thread has interrupted
7. * the current thread. The <i>interrupted status</i> of the
8. * current thread is cleared when this exception is thrown.
9. */
10. public final synchronized void join(long millis) //参数millis为0.
11. throws InterruptedException {
12. long base = System.currentTimeMillis();
13. long now = 0;
14. if (millis < 0) {
15. throw new IllegalArgumentException("timeout value is negative");
16. }
17. if (millis == 0) {//进入这个分支
18. while (isAlive()) {//判断本线程是否为活动的。这里的本线程就是t1.
19. wait(0);//阻塞
20. }
21. } else {
22. while (isAlive()) {
23. long delay = millis - now;
24. if (delay <= 0) {
25. break;
26. }
27. wait(delay);
28. now = System.currentTimeMillis() - base;
29. }
30. }
31. }
/** * Waits at most <code>millis</code> milliseconds for this thread to * die. A timeout of <code>0</code> means to wait forever. //注意这句 * * @param millis the time to wait in milliseconds. * @exception InterruptedException if another thread has interrupted * the current thread. The <i>interrupted status</i> of the * current thread is cleared when this exception is thrown. */ public final synchronized void join(long millis) //参数millis为0. throws InterruptedException { long base = System.currentTimeMillis(); long now = 0; if (millis < 0) { throw new IllegalArgumentException("timeout value is negative"); } if (millis == 0) {//进入这个分支 while (isAlive()) {//判断本线程是否为活动的。这里的本线程就是t1. wait(0);//阻塞 } } else { while (isAlive()) { long delay = millis - now; if (delay <= 0) { break; } wait(delay); now = System.currentTimeMillis() - base; } } }
单纯从代码上看,如果线程被生成了,但还未被起动,调用它的join()方法是没有作用的。将直接继续向下执行,这里就不写代码验证了。
发表评论
-
关于数组和List之间相互转换的方法
2011-04-14 21:04 13901.List转换成为数组。( ... -
java的几种对象(PO,VO,DAO,BO,POJO)解释
2011-03-24 10:13 1350java的几种对象(PO,VO,DAO,BO,POJO)解释 ... -
switch
2010-12-02 19:02 11501 public class Switch { 2 ... -
优化的冒泡排序
2010-09-25 14:18 1372public static void bubble_Sort( ... -
java变量命名规则
2010-08-13 23:15 23761. 大小写有别,例如 a 和 A是两个变量 2. 长度任意 ... -
String.getBytes()的问题
2010-08-13 22:46 1654转载 http://java.chinaitlab.c ... -
tomcat 修改端口
2010-08-09 22:41 2009Tomcat端口修改: 在Tomcat安装目录下的conf目 ... -
tomcat 中增加用户名和密码
2010-08-09 22:41 1924原来的tomcat-user.xml是 <?xml ... -
Eclipse is running in a JRE, but a JDK is required
2010-07-28 09:30 15351 安装了maven插件,使用的时候老是有这样的提示: 08- ... -
安装Eclipse的maven插件
2010-07-27 11:01 1831Installing m2eclipse Core To i ... -
Attach Library Sources and Javadocs
2010-07-26 13:41 1935Attach Library Sources and Java ... -
maven 安装jaxb插件
2010-07-18 15:10 65781. Put your schemas ( ... -
java接受控制台输入
2010-07-16 13:45 2719import java.io.*; public c ... -
将xsd文件转化为java类
2010-07-10 15:31 2519最近有一个需求是把xsd文件中定义的数据类型转化为java类 ... -
jconsole attache sun glassfish
2010-06-13 17:04 1358To Set Up JConsole Connectivity ... -
suse下lamp的安装
2010-05-31 16:45 1568首先卸载suse缺省安装的apache2 主要是在网上看到人家 ... -
java的property配置文件的用法
2010-05-30 15:04 1149在我们平时写程序的时候,有些参数是经常改变的,而这种改变不是我 ... -
让ubuntu下的eclipse支持GBK编码
2010-05-30 14:38 1528今天,把windows下的工程导入到了Linux下eclips ... -
java路径中/的问题
2010-05-18 17:23 1373windows支持两种文件分隔符“/”和“\” 且使用“/”时 ... -
java中serializable是可以继承的
2010-05-16 21:58 5514import java.io.FileInputStream; ...
相关推荐
及c-c++面试试题(转载 ) - happyfish - BlogJava.mht》以及《Java常见面试题.txt》等文件,您可以深入理解这些知识点,并在面试中展现出扎实的Java技能。同时,持续学习和实践,将使您在Java开发领域更加游刃有余。
此外,本书的配套光盘还免费提供了价值人民币330元的java教学视频,对java语言进行了全面讲解,帮助一些不会java语言的读者快速地从java基础知识的学习中过渡到java web的学习与开发上. 第1部分 xml篇. 第1章 xml...
此外,本书的配套光盘还免费提供了价值人民币330元的java教学视频,对java语言进行了全面讲解,帮助一些不会java语言的读者快速地从java基础知识的学习中过渡到java web的学习与开发上. 第1部分 xml篇. 第1章 xml...
此外,本书的配套光盘还免费提供了价值人民币330元的java教学视频,对java语言进行了全面讲解,帮助一些不会java语言的读者快速地从java基础知识的学习中过渡到java web的学习与开发上. 第1部分 xml篇. 第1章 xml...
此外,本书的配套光盘还免费提供了价值人民币330元的java教学视频,对java语言进行了全面讲解,帮助一些不会java语言的读者快速地从java基础知识的学习中过渡到java web的学习与开发上. 第1部分 xml篇. 第1章 xml...
在Spring中,切面可以定义为通知(advises),即在特定连接点(join points)上执行的代码,比如方法调用前、后或者异常处理。切面通过切点(pointcuts)来定位这些连接点,从而实现跨功能的关注点统一管理。 实现...
11. **SQL与编程语言的交互**:在实际开发中,我们通常通过编程语言(如Java、Python等)来调用SQL,进行数据操作,了解如何在代码中执行SQL语句至关重要。 12. **数据库设计与规范化**:良好的数据库设计遵循范式...
MyBatis使用简单的XML或注解用于配置和原始映射,将接口和Java的POJOs(Plan Old Java Objects,普通的Java对象)映射成数据库中的记录. orm工具的基本思想 无论是用过的hibernate,mybatis,你都可以法相他们有一个...
在大数据处理中,Spark的Shuffle过程是非常关键的,它涉及到数据在集群中的重新分布,通常在join、groupByKey等操作中发生。理解并优化Shuffle可以显著提升Spark作业的性能。 此外,Spark还支持机器学习库MLlib、...