Java不支持协程?那是你不知道Quasar!

原创:微信公众号 码农参上,欢迎分享,转载请保留出处。

在编程语言的这个圈子里,各种语言之间的对比似乎就一直就没有停过,像什么古早时期的” PHP是世界上最好的语言“就不提了,最近我在摸鱼的时候,看到不少文章都在说” Golang性能吊打Java“。作为一个写了好几年java的javaer,这我怎么能忍?于是在网上看了一些对比golang和java的文章,其中戳中java痛点、也是golang被吹上天的一条,就是对多线程并发的支持了。先看一段描述:

Go从语言层面原生支持并发,并且使用简单,Go语言中的并发基于轻量级线程 Goroutine,创建成本很低,单个Go应用也可以充分利用CPU多核,编写高并发服务端软件简单,执行性能好,很多情况下完全不需要考虑锁机制以及由此带来的各种问题。

看到这,我的心瞬间凉了大半截,真的是字字扎心。虽然说java里的 JUC包已经帮我们封装好了很多并发工具,但实际高并发的环境中我们还要考虑到各种锁的使用,以及服务器性能瓶颈、限流熔断等非常多方面的问题。

再说回go,前面提到的这个 goroutine究竟是什么东西?其实,轻量级线程 goroutine也可以被称为 协程,得益于go中的调度器以及GMP模型,go程序会智能地将 goroutine中的任务合理地分配给每个 CPU。

好了,其实上面说的这一大段我也不懂,都是向写go的哥们儿请教来的,总之就是go的并发性能非常优秀就是了。不过这都不是我们要说的重点,今天我们要讨论的是如何在Java中使用协程。

协程是什么?

我们知道,线程在阻塞状态和可运行状态的切换,以及线程间的上下文切换都会造成性能的损耗。为了解决这些问题,引入协程 coroutine这一概念,就像在一个进程中允许存在多个线程,在一个线程中,也可以存在多个协程。

Java不支持协程?那是你不知道Quasar!

那么,使用协程究竟有什么好处呢?

首先,执行效率高。线程的切换由操作系统内核执行,消耗资源较多。而协程由程序控制,在用户态执行,不需要从用户态切换到内核态,我们也可以理解为,协程是一种进程自身来调度任务的调度模式,因此协程间的切换开销远小于线程切换。

其次,节省资源。因为协程在本质上是通过分时复用了一个单线程,因此能够节省一定的资源。

类似于线程的五种状态切换,协程间也存在状态的切换,下面这张图展示了协程调度器内部任务的流转。

Java不支持协程?那是你不知道Quasar!

综合上面这些角度来看,和原生支持协程的go比起来,java在多线程并发上还真的是不堪一击。但是,虽然在Java官方的jdk中不能直接使用协程,但是,有其他的开源框架借助动态修改字节码的方式实现了协程,就比如我们接下来要学习的Quasar。

Quasar使用

Quasar是一个开源的Java协程框架,通过利用 Java instrument技术对字节码进行修改,使方法挂起前后可以保存和恢复jvm栈帧,方法内部已执行到的字节码位置也通过增加状态机的方式记录,在下次恢复执行可直接跳转至最新位置。

Quasar项目最后更新时间为2018年,版本停留在 0.8.0,但是我在直接使用这个版本时报了一个错误:

Java不支持协程?那是你不知道Quasar!

这个错误的大意就是这个class文件是使用的高版本jdk编译的,所以你在低版本的jdk上当然无法运行了。这里 major版本号54对应的是 jdk10,而我使用的是 jdk8,无奈降级试了一下低版本,果然 0.7.10可以使用:


    co.paralleluniverse
    quasar-core
    0.7.10

在我们做好准备工作后,下面就写几个例子来感受一下协程的魅力吧。

1、运行时间

下面我们模拟一个简单的场景,假设我们有一个任务,平均执行时间为1秒,分别测试一下使用线程和协程并发执行10000次需要消耗多少时间。

先通过线程进行调用,直接使用 Executors线程池:

public static void main(String[] args) throws InterruptedException {
    CountDownLatch countDownLatch=new CountDownLatch(10000);
    long start = System.currentTimeMillis();
    ExecutorService executor= Executors.newCachedThreadPool();
    for (int i = 0; i < 10000; i++) {
        executor.submit(() -> {
            try {
                TimeUnit.SECONDS.sleep(1);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
            countDownLatch.countDown();
        });
    }
    countDownLatch.await();
    long end = System.currentTimeMillis();
    System.out.println("Thread use:"+(end-start)+" ms");
}

查看运行时间:

Java不支持协程?那是你不知道Quasar!

好了,下面我们再用Quasar中的协程跑一下和上面相同的流程。这里我们要使用的是Quasar中的 Fiber,它可以被翻译为 协程纤程,创建 Fiber的类型主要可分为下面两类:

public Fiber(String name, FiberScheduler scheduler, int stackSize, SuspendableRunnable target);
public Fiber(String name, FiberScheduler scheduler, int stackSize, SuspendableCallable target);

Fiber中可以运行无返回值的 SuspendableRunnable或有返回值的 SuspendableCallable,看这个名字也知道区别就是java中的 RunnableCallable的区别了。其余参数都可以省略, name为协程的名称, scheduler是调度器,默认使用 FiberForkJoinSchedulerstackSize指定用于保存fiber调用栈信息的 stack大小。

在下面的代码中,使用了 Fiber.sleep()方法进行协程的休眠,和 Thread.sleep()非常类似。

public static void main(String[] args) throws InterruptedException {
    CountDownLatch countDownLatch=new CountDownLatch(10000);
    long start = System.currentTimeMillis();

    for (int i = 0; i < 10000; i++) {
        new Fiber<>(new SuspendableRunnable(){
            @Override
            public Integer run() throws SuspendExecution, InterruptedException {
                Fiber.sleep(1000);
                countDownLatch.countDown();
            }
        }).start();
    }

    countDownLatch.await();
    long end = System.currentTimeMillis();
    System.out.println("Fiber use:"+(end-start)+" ms");
}

直接运行,报了一个警告:

QUASAR WARNING: Quasar Java Agent isn't running. If you're using another instrumentation method you can ignore this message; otherwise, please refer to the Getting Started section in the Quasar documentation.

还记得我们前面说过的Quasar生效的原理是基于 Java instrument技术吗,所以这里需要给它添加一个代理Agent。找到本地maven仓库中已经下好的jar包,在 VM options中添加参数:

-javaagent:E:\Apache\maven-repository\co\paralleluniverse\quasar-core\0.7.10\quasar-core-0.7.10.jar

这次运行时就没有提示警告了,查看一下运行时间:

Java不支持协程?那是你不知道Quasar!

运行时间只有使用线程池时的一半多一点,确实能大大缩短程序的效率。

2、内存占用

在测试完运行时间后,我们再来测试一下运行内存占用的对比。通过下面代码尝试在本地启动100万个线程:

public static void main(String[] args) {
    for (int i = 0; i < 1000000; i++) {
        new Thread(() -> {
            try {
                Thread.sleep(100000);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
        }).start();
    }
}

本来以为会报 OutOfMemoryError,但是没想到的是我的电脑直接直接卡死了…而且不是一次,试了几次都是以卡死只能重启电脑而结束。好吧,我选择放弃,那么下面再试试启动100万个 Fiber协程。

public static void main(String[] args) throws Exception {
    CountDownLatch countDownLatch=new CountDownLatch(10000);
    for (int i = 0; i < 1000000; i++) {
        int finalI = i;
        new Fiber<>((SuspendableCallable)()->{
            Fiber.sleep(100000);
            countDownLatch.countDown();
            return finalI;
        }).start();
    }
    countDownLatch.await();
    System.out.println("end");
}

程序能够正常执行结束,看样子使用的内存真的比线程少很多。上面我故意使每个协程结束的时间拖得很长,这样我们就可以在运行过程中使用Java VisualVM查看内存的占用情况了:

Java不支持协程?那是你不知道Quasar!

可以看到在使用 Fiber的情况下只使用了1G多一点的内存,平均到100万个协程上也就是说每个 Fiber只占用了 1Kb左右的内存空间,和 Thread线程比起来真的是非常的轻量级。

从上面这张图中我们也可以看到,运行了非常多的 ForkJoinPool,它们又起到了什么作用呢?我们在前面说过,协程是由程序控制在用户态进行切换,而Quasar中的调度器就使用了一个或多个 ForkJoinPool来完成对 Fiber的调度。

3、原理与应用

这里简单介绍一下Quasar的原理,在编译时框架会对代码进行扫描,如果方法带有 @Suspendable注解,或抛出了 SuspendExecution,或在配置文件 META-INF/suspendables中指定该方法,那么Quasar就会修改生成的字节码,在 park挂起方法的前后,插入一些字节码。

这些字节码会记录此时协程的执行状态,例如相关的局部变量与操作数栈,然后通过抛出异常的方式将cpu的控制权从当前协程交回到控制器,此时控制器可以再调度另外一个协程运行,并通过之前插入的那些字节码恢复当前协程的执行状态,使程序能继续正常执行。

回头看一下前面例子中的 SuspendableRunnableSuspendableCallable,它们的 run方法上都抛出了 SuspendExecution,其实这并不是一个真正的异常,仅作为识别挂起方法的声明,在实际运行中不会抛出。当我们创建了一个 Fiber,并在其中调用了其他方法时,如果想要Quasar的调度器能够介入,那么必须在使用时层层抛出这个异常或添加注解。

看一下简单的代码书写的示例:

public void request(){
    new Fiber<>(new SuspendableRunnable() {
        @Override
        public void run() throws SuspendExecution, InterruptedException {
            String content = sendRequest();
            System.out.println(content);
        }
    }).start();
}

private String sendRequest() throws SuspendExecution {
    return realSendRequest();
}

private String realSendRequest() throws SuspendExecution{
    HttpResponse response = HttpRequest.get("http://127.0.0.1:6879/name").execute();
    String content = response.body();
    return content;
}

需要注意的是,如果在方法内部已经通过try/catch的方式捕获了 Exception,也应该再次手动抛出这个 SuspendExecution异常。

总结

本文介绍了Quasar框架的简单使用,其具体的实现原理比较复杂,暂时就不在这里进行讨论,后面打算单独拎出来进行分析。另外,目前已经有不少其他的框架中已经集成了Quasar,例如同样是 Parallel Universe下的Comsat项目,能够提供了HTTP和DB访问等功能。

虽然现在想要在Java中使用协程还只能使用这样的第三方的框架,但是也不必灰心,在OpenJDK 16中已经加入了一个名为 Project Loom的项目, 在 OpenJDK Wiki上可以看到对它的介绍,它将使用 Fiber轻量级用户模式线程,从jvm层面对多线程技术进行彻底的改变,使用新的编程模型,使轻量级线程的并发也能够适用于高吞吐量的业务场景。

Quasar和Loom的相关的文档放在下面,有兴趣的小伙伴们可以自己看一下。

Quasar git:https://github.com/puniverse/quasar
Quasar api:http://docs.paralleluniverse.co/quasar/javadoc/
OpenJdk Wiki:https://wiki.openjdk.java.net/display/loom/Main

那么,这次的分享就到这里,我是Hydra,下期见。

作者简介,码农参上,一个热爱分享的公众号,有趣、深入、直接,与你聊聊技术。个人微信DrHydra9,欢迎添加好友,进一步交流。

Original: https://www.cnblogs.com/trunks2008/p/15925982.html
Author: 码农参上
Title: Java不支持协程?那是你不知道Quasar!

原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/573392/

转载文章受原作者版权保护。转载请注明原作者出处!

(0)

大家都在看

  • Spring知识点总结3 Spring框架

    什么是 Spring 框架? Spring 是一款开源的轻量级 Java 开发框架,旨在提高开发人员的开发效率以及系统的可维护性。 我们一般说 Spring 框架指的都是 Spri…

    Java 2023年6月6日
    074
  • 反射的印象1

    Class类与 java.lang.reflect 类库一起对反射的概念进行支持。 可以通过反射获取某个并不在你的程序空间中对象的引用。例如序列化,javaBean Origina…

    Java 2023年6月5日
    077
  • 复杂逻辑题目的好帮手:注释和断言

    前言 最近在刷题的时候,遇到一些逻辑比较复杂的题,往往会遇到困难,经常写不出来。即使在有debug帮助的时候,也往往会出现思虑不周,导致一错再错的情况,即好不容易debug通过一个…

    Java 2023年6月9日
    073
  • 没有二十年功力,写不出Thread.sleep(0)这一行“看似无用”的代码!

    你好呀,我是喜提七天居家隔离的歪歪。 这篇文章要从一个奇怪的注释说起,就是下面这张图: 我们可以不用管具体的代码逻辑,只是单单看这个 for 循环。 在循环里面,专门有个变量 j,…

    Java 2023年6月5日
    073
  • Spring boot 处理 error 的套路

    Spring boot 处理 error 的基本流程: Controller -> 发生错误 -> BasicErrorController -> 根据 @Req…

    Java 2023年5月30日
    068
  • idea项目运行时报错提示Could not locate executable nullbinwinutils.exe in the Hadoop binaries

    出现这个错误,从网上下载一个名为 winutils.exe 的小插件放到 hadoop/bin目录后,在window中配置hadoop环境,然后重启idea 否则还是会报错 下载地…

    Java 2023年6月9日
    065
  • Spring Cloud Alibaba 整合 Nacos 实现服务配置中心

    在之前的文章 《Nacos 本地单机版部署步骤和使用》 中,大家应该了解了 Nacos 是什么?其中 Nacos 提供了动态配置服务功能 一、Nacos 动态配置服务是什么? 官方…

    Java 2023年5月30日
    090
  • xxl-job执行器的注册

    一、执行器注册流程 二、具体流程 1.注册监控线程 //&#x7C7B;&#xFF1A;JobRegistryHelper.java&#xFF1B;&amp…

    Java 2023年6月16日
    086
  • 【Java面试手册-算法篇】给定一个正整数,请找出小于这个数字的所有回文数字

    首先来看看回文数字的定义 : 回文数字:设n是一任意自然数,若将n的各位数字反向排列所得自然数n1与n相等,则称n为一回文数。比如12321、666是回文数字,而1234不是回文数…

    Java 2023年6月8日
    083
  • Oracle扩展表空间

    Oracle扩展表空间 前言: Oracle表空间扩展最大为32G,目前我还未找到可以打破限制的办法。 一、查看表空间信息和使用情况 查看表空间的名字及文件所在位置 — &amp…

    Java 2023年6月8日
    0134
  • TypeScript(3)基础类型

    基础类型 TypeScript 支持与 JavaScript 几乎相同的数据类型,此外还提供了实用的枚举类型方便我们使用。 布尔值 最基本的数据类型就是简单的true/false值…

    Java 2023年6月9日
    056
  • Spring boot 定时器

    Timer:是java自带的java.util.Timer类,这个类允许调度一个java.util.TimerTask任务,使用这种方式可以让程序按照某一个频度执行,但不能在指定时…

    Java 2023年5月30日
    071
  • SpringResourceBundleMessageSource示例(转)

    对于支持国际化的应用程序,它需要能够为不同的语言环境解析文本消息。Spring的应用程序上下文能够通过键解析目标语言环境的文本消息。通常,一个语言环境的消息应存储在一个单独的属性文…

    Java 2023年5月30日
    057
  • SpringBoot2整合Junit4和Junit5

    404. 抱歉,您访问的资源不存在。 可能是网址有误,或者对应的内容被删除,或者处于私有状态。 代码改变世界,联系邮箱 contact@cnblogs.com 园子的商业化努力-困…

    Java 2023年6月8日
    089
  • java selenium (十三) 智能等待页面加载完成

    我们经常会碰到用selenium操作页面上某个元素的时候, 需要等待页面加载完成后, 才能操作。 否则页面上的元素不存在,会抛出异常。 或者碰到AJAX异步加载,我们需要等待元素加…

    Java 2023年5月29日
    099
  • CSharp: Builder Pattern in donet core 3

    调用:、 输出: Original: https://www.cnblogs.com/geovindu/p/16751510.htmlAuthor: ®Geovin Du Drea…

    Java 2023年6月16日
    078
亲爱的 Coder【最近整理,可免费获取】👉 最新必读书单  | 👏 面试题下载  | 🌎 免费的AI知识星球