异步系统的两种测试方法 -买球官网平台

0顶
0踩

异步系统的两种测试方法

2018-04-10 10:25 by 副主编 jihong10102006 评论(1) 有10251人浏览

互联网软件系统一直随着需求、用户量上升等等的原因在演进,以求适应更复杂的业务场景,更高的性能要求等等。软件演进方式各种各样,系统异步化即为其中一种。

一般的,对于那些实时性要求不高,但却计算密集或者需要处理大数据量的耗时较长的任务,或是有较慢 i/o 的任务,选择异步化是一个不错的选择。在系统层面,像引入消息中间件来解耦系统,将耗时长的任务放在中间件后异步执行。在方法层面,像把耗时较长的任务放到其他线程中去异步执行。

与测试同步系统或方法不同,当我们测试异步系统(端到端测试、集成测试)或异步方法的时候(单元测试),由于测试线程不会被异步任务线程阻塞而让测试变得不可控,概率性失败,以单元测试为例,这样写异步测试是不稳定的:

    @test
    public void testasynchronousmethod() {
        callasynchronousmethod();
        assertxxx(...);  //异步任务可能仍未完成,这时assert可能会失败
    }

异步任务的两种类型:

  • 异步任务执行后对任务发起方或调用方有感知,比如发出一个事件或通知

  • 异步任务执行后对任务发起方或调用方没有感知,只是改变了系统中的某些状态

对异步任务的测试也分以上两种类型讨论。对于第一种,我们可以采用 监听方式测试:

    import org.junit.before;
    import org.junit.test;
    public class exampletest {
        private final object lock = new object();
        @before
        public void init() {
            new thread(new runnable() {
                public void run() {
                    synchronized (lock) {  //获得锁
                        monitorevent();    //监听异步事件的到来
                        lock.notifyall();  //事件到达,释放锁
                    }
                }
            }).start();
        }
        @test
        public void testasynchronousmethod() {
            callasynchronousmethod();  //调用异步方法,需要较长一段时间才能执行完,并触发事件通知
            /**
             * 事件未到达时由于init已经获得了锁而阻塞,事件到达后因init中的锁释放而获得锁,
             * 此时异步任务已执行完成,可以放心的执行断言验证结果了
             */
            synchronized (lock) {
                asserttestresult();
            }
        }
    }

这里的前提是事件通知会到来并被监听到,可要是不来呢(比如异常任务执行失败了)?我们就干等吗,其实我们还可以在测试中引入超时机制,这也引出了第二种类型的异常测试(可以称之为 轮询方式),假设我们有如下一个异步系统,应用发消息到 nsq 消息中间件,一个待测试的 job 监听这个消息并在消息到达后处理消息:

 

我们怎么测试呢,站在端到端测试的角度,可以测试从应用到 job 的链路,消息是应用直接构造的 nsq 消息,也可以是 mysql binlog 经转化后构造的 nsq 消息;站在集成测试的角度,我们可以缩小测试范围,直接在测试中构造 nsq 消息,测试从消息中间件到 job 的链路。长链路测试耗时长,且写测试前需要了解具体应用的消息触发逻辑,写测试也比较慢,无形中增加了很多测试成本。所以对于这样的系统,我们可以采用集成测试方法来测。

上述测试我们引入了 awaitility 工具类来做轮询操作,一个靠谱的轮询至少包含以下特性:

  • 超时机制,不可能一直轮询

  • 首次延迟轮询

  • 轮询频率

最后,我们来讨论下测试结果可靠性问题。

假设一个异步系统采用轮询方式测试,触发异步任务后,当在两次轮询中间系统状态因为某些原因出现了抖动,下一次轮询时轮询方式可能会误以为异步操作还未完成或出现了异常,从而导致测试结果误判:

 

相对的,监听方式是不存在这样的问题的,只要系统状态改变,监听中的测试能立马感知到,并作出可靠的测试结果:

 

很多异步系统对外是没有回调的,这时候只能使用轮询方式测试异步任务,而轮询测试的可靠性取决于待测系统的可靠性。

可是,一个周期性执行的可靠系统同样会遇到上述问题,测试会因为代码周期性执行,系统状态周期性改变而变得不可靠。对于这样的系统,我们可以做一些可测性改造。将业务逻辑和周期执行逻辑剥离,并增加一个可以调用业务逻辑的入口,比如一个 restful 接口,这样测试时可以准确控制业务逻辑的执行时机和频率,也就可以可靠的测试了。

有赞已经在一些异步 job 中采用上述轮询方式测试,我们在测试中主要碰到了两类 job,一类是会和 elasticsearch 搜索引擎交互的,由于 elasticsearch 的刷新机制(有赞出于性能原因设置为 5 秒刷新一次数据),轮询方式因为测试时间太长而很局限,除非提高 elasticsearch 的刷新频率;另一类则是跟 mysql、redis 交互的 job,这类 job 的测试可以工作的很好,测试基本可以在 150 毫秒内完成,也就意味着可以像普通测试一样置入持续集成的构建中了。

来自:
0
0
评论 共 1 条 请登录后发表评论
1 楼 tyrion 2018-04-13 08:50
图片都不能显示也能放买球买球官网平台官网平台首页。。。

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

  • 异步系统下的共识问题是容错方向中的关键问题。...改进后的算法满足异步系统下共识问题的两阶段最低限度,并且在特定条件下可以在第一阶段快速作出响应。经实验证明,改进后的算法具有更快的响应时间和较少的通信量。

  • 分享一个大牛的人工智能教程。零基础!通俗易懂!风趣幽默!希望你也加入到人工智能的队伍中来!... 一般的,对于那些实时性...异步任务的两种类型: 异步任务执行后对任务发起方或调用方有感知,比如发出一个事件或..

  • 当数据包丢失率一定时,针对系统是否存在数据包丢失的两种情况,分别设计了状态观测器,并将整个观测器系统等效为具有两个事件的异步动态系统,给出了系统指数稳定的矩阵不等式条件和故障检测的判断规则.最后通过仿真...

  • 今天面试被问到异步复位同步释放和异步复位打两拍有什么区别,没回答上来,主要忘记了异步复位同步释放的实现方式,回来查了一下资料,觉得复位还是值得写一写的。 在fpga或者数字ic设计中肯定会涉及到同步和异步...

  • 同步异步日志系统解决并发量问题

  • 针对水声正交频分复用(ofdm)异步多用户系统提出一种基于滑动迭代的异步多用户接入方法,包括重叠截断、干扰消除、频域过采样、多用户信道估计与解码、以及干扰重构5个处理模块,并通过滑动迭代结构同时消除前向干扰和...

  • httpclient 支持同步和异步两种方式,也支持多种不同实现。目前有netty 和 apache compoenet两种实现。本次上传移除了netty实现。主要解决生产环境中同步httpclient造成的io阻塞问题。同步http请求将导致 tomcat 的...

  • 在网络通信过程中,通信双方要交换数据,需要高度的协同工作。为了正确的解释信号,接收方必须确切地知道信号应当何时接收和处理,因此定时是至关重要的。...1. 异步传输(asynchronous transmission):异步传输...

  • ​ 同步操作如果遇到一个耗时的方法,需要阻塞等待,那么我们有没有办法解决呢?让它异步执行,下面我会详解异步及实现@mikechen ​

  • 在上篇文章:同步fifo的两种verilog设计方法(计数器法、高位扩展法)中我们介绍了fifo的基本概念,并对同步fifo的两种实现方法进行了仿真验证。而异步fifo因为读写时钟不一致,显然无法直接套用同步fifo的实现方法...

  • 异步为什么很重要?如何使用异步来有效处理潜在的阻塞操作?我们知道 js 语言的执行环境是"单线程",...为了解决这个问题,javascript语言将任务的执行模式分成两种:同步(synchronous)和异步(asynchronous)。...

  • 1、什么是servlet异步请求 servlet 3.0 之前,一个普通 servlet 的主要工作流程大致如下: (1)、servlet 接收到请求之后,可能需要对请求携带的数据进行一些预处理; (2)、调用业务接口的某些方法,以完成...

  • 例如,技术实现中,异步流程过于复杂,导致自动化不易开展 某些场景/实现严重影响了测试效率,或给测试增加了不少困难。 同步的自动化测试过程: 目前大部分的自动化测试用例的过程: 创建业务场景---产生待测...

  • 0引言1985年,德国鲁尔大学depenbrock教授首次提出直接...近20年以来,直接转矩控制理论以它简明的系统结构,优良的静、动态性能得到迅猛发展和应用。matlab是国际控制界应用最广泛的计算机软件,具有强大的矩阵运算能力...

  • 异步调用方法:异步方法的调用,其返回类型有三种:2. 异步声明方法3. 必要的await表达式二、在wpf如何使用async/await特性?1.先展示一个wpf示例三、如何创建并使用自己的异步方法?四、如何取消异步任务?五、如何...

  • 提出了一种新型的基于 matlab 的交流异步电机矢量控制系统仿真建模的方法,将该方法应用于 simulink 环境下交流异步电机模型的设计,采用经典的速度、电流双闭环控制方法对该建模方法进行了测试,仿真结果表明:波形...

  • 曾在西门子中国研究院,从事软件研发工作,拥有两年以上的软件开发相关经验。曾使用过的编程语言主要有java与php,拥有多年的服务器开发经验以及mysql优化经验,对电商相关业务与系统架构具有一定的了解以及自...

global site tag (gtag.js) - google analytics