Java&Go高性能队列之channel性能测试 之前写了两篇Java的高性能队列性能测试实践文章，发现了一些比较通用的规律，总体上Disruptor性能是要领先LinkedBlockingQueue的。先回顾一下Java&Go高性能队列之LinkedBlockingQueue性能测试，Java&Go高性能队列之Disruptor性能测试。 那么理论上性能更高的Go语言中的channel （下文中的也称为队列）性能如何呢，下面我将对它进行同样的性能测试。 测试场景设计的思路与前两篇文章相同，通过三个场...

在上文Java自定义DNS解析器实践中，我们没有讲到org.apache.http.conn.DnsResolver具体如何实现负载均衡，今天我们就分享一下，负载均衡的具体实现。 InMemoryDnsResolver被淘汰 首先上期文章提到的org.apache.http.impl.conn.InMemoryDnsResolver类是无法实现负载均衡的，原因是这个实现类是将host和IP存在一个java.util.concurrent.ConcurrentHashMap中，然后解析的时候从java.u...

年前发了一篇FunTester公众号原创文章总结FunTester原创大赏，但是整理的时候却发现自己没有记录文章的发表日期，导致有一些文章由于发表日志过早（且排名靠前）影响了一丝阅读体验，所以我想了一个办法爬取了每篇文章的发表时间，在自己整理的Markdown文档中增加发表日期内容。 经过简单验证，决定使用接口爬虫功能来实现这个需求。 日期获取 经过页面的检查，发现的确存在发表日期的记录数据，隐藏在巨大的信息当中，不过有意思的是，微信公众号的公共访问内容居然全文只有一处日期且为真正的发表日期，所以也大...

近期已然陷入了单元测试的汪洋大海，上万行的代码突然要求起来单元测试覆盖率，着实很恐怖的。最经过艰苦的抗争学习之后，终于迈过了技术这个坎儿，特来分享一下最近踩坑的经历，和一些典型的使用场景案例分享。 下面是我使用过的一个常用项目，部分信息隐去了。大家在自己项目中实践的时候可以参考，尽量别直接抄代码，我自己使用过程中有很多兼容性的坑，特别是IDE自动import功能。 技术方案 本技术方案基于公司力推的Spock单元测试框架，spock是一款基于Groovy语言的单元测试框架，其基础也是Java的Juni...

今天在某问答平台看到一个问题：如何突破职业瓶颈？ 刚好接着这个问题分享一下去年的一段经历，回答一下。 去年某个时候，感觉自己在接口测试这个方向上走到死胡同了。不管是自动化还是性能测试，都已经轻车熟路。对于日常工作，真就只剩下搬砖的一种感觉，缺少挑战，也就失去了方向。在接口性能测试方面，我探索了一些其他场景，比如：全链路压测、链路支路、等比压测、提高数据精准度等等。单感觉是东一榔头西一棒子，一个点，一两周就完成了，只能换去另外一个角度。后来短暂去搞了静态代码扫描，后来效果不佳也放弃了，中间倒是学了不少细碎...

gorm是一个使用Go语言编写的ORM框架。文档齐全，对开发者友好，支持主流数据库。 我最近在补齐Go语言各类基础的框架和操作库的知识，终于进展到了数据库阶段，搜资料的时候基本都是推荐这个框架，可见其之流行程度。在不断尝试练习之后，总结了一些经验和使用方式，供初学者参考。 在之前使用Java语言的时候用过两种JDBC和mybatis，一种是本地操作数据库的一种是在Springboot项目中使用，两者使用习惯上都是基于MySQL语句，都是在操作层面把MySQL语句拼写完成。但是在gorm框架中几乎看不到完...

在写完高性能队列Disruptor在测试中应用和千万级日志回放引擎设计稿之后，我就一直在准备Java & Go 语言几种高性能消息队列的性能测试，其中选取了几种基准测试场景以及在性能测试中的应用场景。 测试场景设计的思路参考的两个方面： 消息体大小，我用的不同大小GET请求区分 生产者和消费者线程数，Go语言中称协程goroutine PS：后续的文章中，Go语言文章中如果出现线程，均指goroutine。 结论 总体来说，java.util.concurrent.LinkedBlocking...

今天偶然看到一篇焦虑文，又提到了程序员35岁被淘汰的说法，虽然我只是个普通的小测试，但也很难不被这个焦虑浪潮影响。有识之士也写文章批驳这种观点，也指出了散播焦虑的某些机构和个人，但是依然没有任何削弱的迹象。 我心生疑问：这种观点从何来？ 然后就有了这篇非常不严谨的互联网考古文章，通过搜索引擎（互联网记忆）探索这种言论的起源，发现了一些非常有趣的事情。 PS：我的能力已经很难找到2000年之前的互联网记忆了。 起源时间 经过一番摸索，终于将时间锁定在2000年，来源是CSDN这个古老的网站论坛模块。...

我在最近学习多线程编程的过程中，时长需要测试各类多线程工具类或者框架在各种线程数下的性能。基本的思路就是准备数据，编写用例方法，执行用例方法，最后等待结束，统计计算测试数据。 其中倒数第二个步骤：等待结束，之前我在Java自定义异步功能实践文章中用到看java.util.concurrent.Phaser这个多线程同步类完成。但是在最近的异步编程实践中，我用到了更多闭包的语法，例如： public static void main(String[] args) { //自定义异步...

LevelDB是Google开源的持久化KV单机数据库，这个有点类似Redis，通常我们在存储key-value的数据都会选择Redis。但是唯一的问题就是得有Redis给我们用。LevelDB可以完美解决我们这种问题，存储在本地的文件当中，如果数据量不多的话，可以直接提交在代码中提交文件，然后就可以把数据放在这个数据库中。 之前写过了LevelDB Java&Go实践和LevelDB封装和功能拓展，下面分享最近在使用LevelDB的过程中，总结了几种使用场景，供大家参考。 临时存储 对于某些临时存储...

2021年马上就过去了，去年这个时候我写了一篇2020年FunTester自我总结，感觉也是对FunTester有个交代。 2021年也不能例外，下面分享一下FunTester在2021年末的自我总结。 公众号 2021年FunTester的重点还是在公众号上，目前已经730+原创文章，7200+的粉丝，算是一个里程碑。今年彻底放下了去年的 日更 flag，自然也少了很多非更不可的压力。精神上轻松了许多，自然文章的质量上也有所提高。不少同行问我为何有那么多东西可写，古语有云：问渠那得清如许，为有源头活...

现在压测系统一直用的方案是goreplay进行二次开发完成的。因为整体是Java技术栈的，使用goreplay有存在两方面问题：一是兼容性，语言和开发框架上，增加了用例创建执行的复杂度；二是维护成本，goreplay二次开发方案已经无法满足现在的性能测试需求。如果维护两套压测引擎会带来更多工作量。 所以为了尽可能解决这两方面问题，接到了一个活儿，调研一下Java实现日志回放功能。主要就是读了goreplay的源码以及它设计思路，用Java重现实现一遍。 这里用到了前两天分享的Disruptor高性能队列...

最近在研究goreplay的源码的过程中，感觉有些思路还是很值得借鉴。所以自己立了一个flag，实现一个千万级日志回放功能。但是在这个实现的过程中遇到一个棘手的问题：Java自带的LinkedBlockingQueue比较难以直接满足需求场景和性能要求。 熟悉goreplay的测友应该清楚Go语言chanel在goreplay这个框架中应用是十分广泛的，加上Go语言自身较高的性能，可以说双剑合并。所以我也想照葫芦画瓢写一个类似思路的实现。这个后面会有专题讲这个。 基于此，我搜到了Disruptor这个高...

上期分享了Java&Go三种HTTP客户端性能测试，最终的结论是fasthttp > FunTester > http。那么由三种框架创建的服务端性能怎么样呢？今天我们来一起测试一下。 本次测试计划分为不同线程时候，各个服务端的响应QPS以及资源占用的情况。上次发现的Mac本地HTTP服务极限性能有所下降，之前最高能到12万，升级了几次系统之后就变低了，一直没找到解决方案。所以以后应该都不会单独测试某种框架的极限性能了，更多还是对比压测。 测试用例 测试用例采用了FunTester常用的测试用例模板c...

在Java基础中，private是一个访问权限最严格的修饰符。但是在我们工作当中，使用第三方jar包的时候甚至使用JDK里面的工具类的时候，经常会遇到一些private修饰变量，我们想访问甚至修改这个变量的时候就显得比较麻烦。 这个时候我们需要通过Java反射方案来实现我们访问和修改private修饰的变量。 核心API 在java.lang.reflect.Field类中有一个java.lang.reflect.AccessibleObject#setAccessible(boolean)方法可以设...

前文提到了MySQL性能测试之insert&delete【FunTester框架】，今天来分享一下FunTester框架MySQL性能测试对于select和update语句进行性能测试。 准备工作这里就不细说了，有兴趣可以翻翻上面的文章链接。 select 这个语句应该是最常用的，而且优化的可能性比较大，各类添加索引的方式。随着数据量的增长还会涉及到分库分表等等。这里我简单演示一个最简单的select语句，配合上对于字段age的可视化。 SQL语句准备："SELECT * FROM funteste...

之前写过一个FunTester框架对Redis进行几种常见API进行性能测试的系列文章，今天如约开始写FunTester框架对MySQL常用功能的性能测试。 我们来回顾一些Redis性能测试的文章： FunTester框架Redis压测预备 FunTester框架Redis性能测试实践 FunTester框架Redis性能测试之list操作 FunTester框架Redis性能测试之map&INCR MySQL系列文章预计分两期，分别是增删、改查，进行简单的SQL语句操作，如在实际工作中用到，需要...

今天在别的地方看到群里有人提问，需要一个解决方案，然后大家各自说出自己的看法，讨论好不热闹。但其实网上已经有一个解决方案了，但是并未能满足此君的需求，因为太麻烦，不够简单。 让我震惊的是，这个问题已经困扰他一天了。 根据我的经验来讲，绝大部分的问题都是可以通过搜索引擎解决的，俗称面向搜索引擎编程。但并不是每个人都能很好利用搜索引擎，再加上某些搜索引擎和IT行业论坛鱼龙混杂的文章和教程，有的明显抄袭和爬虫导致文章都是零零散散的，有的就是版本过时甚至根本不标注使用的版本。这些都给试图通过搜索引擎解决自己问题...

在学完Golang语言HTTP客户端实践、Go语言HTTPServer开发的六种实现之后，我自然开始了Java&Go两种语言的HTTP客户端性能测试。 之前在写10万QPS，K6、Gatling和FunTester终极对决！这个文章以及单机12万QPS——FunTester复仇记的时候，都是把CPU跑满了，为了达到12万QPS，我把所有除了统计以外的代码都删除了，这次就不搞这么极端了。而且在我自己初测的时候发现笔记本电脑最多只能跑到80%CPU，不知道是不是macOS限制了，再说消耗自己电脑，我也是心疼。...

在构建软件系统时，测试是软件开发工作流程的必不可少的部分之一。作为软件开发人员，都希望编写的程序按预期工作。程序没有BUG，测试可以协助这个目标的达成。 本文将讨论一种称为单元测试的测试方法。什么是单元测试？应该如何实施？单测优点和局限性是什么？ 什么是单元测试 单元测试的目标是隔离程序的每个部分并显示各个部分按预期工作。单元测试是由软件开发人员编写和运行的自动化测试，以确保应用程序的一部分（称为单元）按预期工作。 单元是可以在系统中逻辑隔离的最小代码段。这可以是单个函数、方法、过程、模块、类或对象...