360最新开源——移动性能监控平台ArgusAPM

ArgusAPM

背景介绍

ArgusAPM是360手机卫士基于Java和Kotlin开发的一套移动性能监控平台，致力于监控和管理应用软件性能和可用性，通过监测和诊断复杂应用程序的性能问题，来保证软件应用程序的良好运行(预期的服务)。

Argus是古希腊神话中的一个百眼巨人，可以观察到各个方向发生的事情，APM是Application Performance Management的缩写，是应用性能管理的意思。通过组合Argus和APM，我们是希望ArgusAPM能像Argus一样能够时时刻刻的去监控应用性能，当有损耗性能的问题出现时，能够及时的得到捕获和反馈，进而去解决这些问题，从而提升用户的体验。

整体架构

本篇文章采用由整体到局部的方式来讲解ArgusAPM，通过逐步细化的讲解，让大家更清晰的认识ArgusAPM。

首先，让我们来看一下整体架构是如何设计的，如下图：

深度剖析360移动性能监控平台ArgusAPM - 图2

从图中我们知晓，整体架构总共分为两部分，分别为左边的蓝色部分，代表性能采集的具体实现；右边的绿色部分，代表辅助功能插件，APP在接入ArgusAPM的时候只接入插件即可，因为我们已经将性能采集模块作为依赖库配置到了插件里面。下面我们针对这两部分做分别的介绍：

一. 性能采集模块（Java语言实现）

该模块整体分为五个Module，并最终生成三个aar，分别为argusapm-main.aar、argusapm-aop.aar、argusapm-okhttp.aar。看到这块，不知道大家是否在想，一个SDK为什么要分那么多的Module呢？做过SDK的小伙伴可能已经猜出来了，就是为了实现模块的可插拔，因为我们提供的SDK功能会随着业务的增长变得越来越多，如果都集中在一个Module里面的话就会导致包体积的增大，而有的应用可能只是想用我们的一些核心的数据采集，并不想要过多其他多余的功能，这个时候我们就可以通过开关来控制是否接入这些功能。例如，我的项目比较老，网络框架并未采用OKHTTP等目前比较主流的网络库，这个时候，我们就可以把采集OKHTTP的功能给关闭，这样也就不会引入相应的依赖库了，也就不再采集相应的数据。

我们知道，任何一个SDK基本上都会对外暴露一个入口，通过入口，我们可以做一些个性化配置，而我们的ArgusAPM遵循同样的规则，入口则是Client类。

深度剖析360移动性能监控平台ArgusAPM - 图3

在讲解这块之前，我先提一些问题，通过这些问题我们再逐步的去深入了解ArgusAPM，最终去窥探整个APM的完整面貌。

问题：

  • 我们如何采集数据？
  • 按照什么规则去采集，这些规则可否自定义配置？
  • 采集完数据存放在哪，存放的数据量会不会越来越大？
  • 何时上传至云端？首先，我们会根据自己的业务规则定义个性化的配置，然后借助Client类的attach方法传递给Manager类，这样我们就能够根据用户自定义的规则来做相应的初始化。通过上图我们也可知晓，我们的Manager类用用来管理各个SubManager的，例如TaskManager就是用来管理我们实现的ITask的，每个ITask的实现都代表了一种类型的采集点，比如ActivityTask则是用来采集Activity性能相关信息的，AnrTask则是用来采集ANR的，MemoryTask则是采集内存使用状况的。如果我们想要新增一个采集点的实现，这时我们就需要去实现ITask，并注册进TaskManager，通过TaskManager来统一管理我们的Task，例如Task的开启和关闭，这也回答了我们的第一个问题。当然了，除了实现各个采集点的ITask之外，我们还需要做一些其他的工作，才能让我们的ArgusAPM更好的工作，例如我想通过云规则配置来控制每个ITask的开启，或者更改各个ITask的性能指标，这时候我们就要用到ArgusApmConfigManager类了，借助ArgusApmConfigManager类，我们可以对云规则做相应的初始化，并读取最新的云规则配置文件。如果用户想在某个版本更改云规则配置，只需要在云后端去更改规则即可，当APP下次再启动的时候就会读取最新的配置，并根据最新的配置去做相应的数据采集，这也是第二个问题的答案。我们既然要采集数据，肯定也会对数据做相应的存储，我们目前采用的是数据库存储，每当采集到新的数据，我们都会存储到数据库里，然后在某个合适的时机将数据上传至云端，如果上传成功，则会对本地的数据做个清理操作，防止下次再次上传和减少本地存储文件的大小，这也对第三个和第四个问题做出了回答。

关于云规则的获取和最终采集数据的上传，我们已经抽象成接口，如果用户想要自己做一个云规则后台，或者想要自己去维护采集到的数据，那么只需要实现相应的接口即可，然后再通过ConfigBuilder类配置具体实现即可。

为什么要有个性化配置？

根据业务场景的不同，各个APP的应用环境并不相同，有的是单进程架构，有的则是多进程架构，因此我们有必要对进程做出区分，尽可能的让常驻进程去做数据的上传和清理工作，其他进程则无需开启这些任务，这时候，我们就要针对不同的进程做不同的配置。

至此，我们简单的介绍了性能采集模块的工作流程，如果想深入的了解，请Fork我们的项目查看源码或者加入我们的官方QQ群进行讨论（QQ群二维码在文章末）。

二. 辅助功能模块（Kotlin语言实现）

该模块最终实现的是一个Gradle Plugin，通过对插件的实现，提供一些辅助功能操作，虽然是辅助功能，但也是SDK开发过程中必不可少的一部分。

该模块主要具备两个作用：

  • 支持AOP编程，方便ArgusAPM能够在编译期织入一些性能采集的代码；

  • 通过Gradle插件来管理依赖库，使用户接入ArgusAPM更简单。

深度剖析360移动性能监控平台ArgusAPM - 图4

最终，我们在接入ArgusAPM的时候，只需要简单的应用插件即可，而不需要再单独的去依赖各个aar文件。

针对上面的两个作用我们可能会有如下的两个疑问：

  • 该插件是如何织入代码的呢？

  • 该插件又是如何管理这些依赖库的呢？

首先，我们分析一下代码是如何织入的，这块涉及到的知识点相对来说比较杂，我做了一下简单的汇总：

名称说明
Gradle Plugin对如何实现一个Gradle Plugin有一定的了解
Transform知道Transform是什么，工作时机
AspectJ 编译器熟悉AspectJ编译期及其参数
VariantsproductFlavors和buildTypes的结合体

如果大家对上面所列的知识点有所了解了，就能大概的猜出来我们是如何进行代码织入的。关于AOP编程，业界的实现方式也是比较多的，我们选取了AspectJ来实现我们想要的切入功能。说到切入，无非就是对AspectJ编译器有个比较深入的了解，然后通过配置AspectJ编译器的参数来实现对代码的切入功能，那么又是何时切入的呢？没错，就是在JavaC编译之后，Dex之前进行的操作，这个时机的Hook点，就是我们需要了解的Transform，通过Transform我们能够做很多的操作，例如我代码织入的时候是否支持增量编译，所要织入代码的作用域是哪些等。可又为什么需要了解Variants呢？这是因为如果有的项目配置了buildTypes和productFlavors，就会同时生成多个变体的apk或者aar，如果我们的项目不做相应的处理，那么最终生成的多个变体apk或者aar就不会都完全包含我们ArgusAPM的所有功能，最起码AOP相关的功能就会缺少。说了这么多，我们来看看这块功能的具体实现：

深度剖析360移动性能监控平台ArgusAPM - 图5

首先，我们自定义AspectJTransform并继承Transform抽象类，然后重写里面的方法，并实现相应的业务逻辑。考虑到插件的工作效率，我们实现了对插件的增量编译和并发编译，只要项目依赖的jar包越多，我们AspectJ织入的速度也会越快。在此，我们引入了一个切割的概念，我们通过对系统的所有class文件进行切割分组，并分别存放在aspectjs、include_dir、excluede_dir三个目录下。其中aspectjs目录下存放的是我们做AOP切入时的切面文件，include_dir目录下存放的是需要切入的文件，exclude_dir目录下存放的是不参与aspectj的织入，直接跳过即可。

切割完毕之后，我们就需要借助AspectJ编译器去实现代码的织入功能，针对每个jar包，我们都对应一个织入器，从而可以采用并发的方式进行织入，最终我们把织入后的文件存放在指定的目录即可，这样我们整个代码的织入功能就实现了。

那我们又是如何实现依赖库管理的呢？

其实，实现起来也比较简单，无非就是将在build.gradle脚本里应该做的操作，放在了插件里面来实现，这样实现的好处是，用户在接入SDK的时候，只需要应用插件即可，而不需要再单独的去配置依赖库，这样SDK内部的依赖库版本号都由SDK开发者自己来维护，除此之外，我们还针对依赖库的管理提供了自定义的配置功能，方便用户更好的使用该插件。

具体实现代码如下：

  1. val COMPILE_CONFIGURATIONS = arrayOf("api", "compile")
  2.  
  3. /**
  4.  * 兼容Compile模式
  5.  */
  6. fun Project.compatCompile(depLib: Any) {
  7.     COMPILE_CONFIGURATIONS.find { configurations.findByName(it) != null }?.let {
  8.         dependencies.add(it, depLib)
  9.     }
  10. }
  11.  
  12. class ArgusDependencyResolutionListener(val project: Project) : DependencyResolutionListener {
  13.     override fun beforeResolve(dependencies: ResolvableDependencies?) {
  14.         if (PluginConfig.argusApmConfig().dependencyEnabled) {
  15.             if (PluginConfig.argusApmConfig().debugDependencies.isEmpty() && PluginConfig.argusApmConfig().moduleDependencies.isEmpty()) {
  16.                 project.compatCompile("com.qihoo360.argusapm:argus-apm-main:${AppConstant.VER}")
  17.                 project.compatCompile("com.qihoo360.argusapm:argus-apm-aop:${AppConstant.VER}")
  18.  
  19.                 if (PluginConfig.argusApmConfig().okhttpEnabled) {
  20.                     project.compatCompile("com.qihoo360.argusapm:argus-apm-okhttp:${AppConstant.VER}")
  21.                 }
  22.             } else {
  23.                 //配置本地Module库，方便断点调试
  24.                 if (PluginConfig.argusApmConfig().moduleDependencies.isNotEmpty()) {
  25.                     PluginConfig.argusApmConfig().moduleDependencies.forEach { moduleLib: String ->
  26.                         project.compatCompile(project.project(moduleLib))
  27.                     }
  28.                 }
  29.  
  30.                 //发布Release版本之前，可以使用Debug库测试
  31.                 if (PluginConfig.argusApmConfig().debugDependencies.isNotEmpty()) {
  32.                     project.repositories.mavenLocal()
  33.                     //方便在测试的时候使用，不再需要单独的Gradle发版本
  34.                     PluginConfig.argusApmConfig().debugDependencies.forEach { debugLib: String ->
  35.                         project.compatCompile(debugLib)
  36.                     }
  37.                 }
  38.             }
  39.         }
  40.         project.gradle.removeListener(this)
  41.     }
  42.  
  43.     override fun afterResolve(dependencies: ResolvableDependencies?) {
  44.     }
  45.  
  46. }

至此，我们将ArgusAPM的性能采集模块和辅助模块都讲解完了，更多的细节，请参考源码。

写在最后

ArgusAPM目前已经在360公司内部得到广泛的应用，而且已经在GitHub开源。如有问题，请大家提issue或者反馈到我们的官方QQ群，我们会第一时间进行处理。当然了，开源是一个持续不断的过程，只有通过不断的改进，产品才能趋于完善，希望大家能够积极的加入我们，关注我们，让我们一起为解决移动性能而努力。

开源地址

https://github.com/Qihoo360/ArgusAPM

官方QQ群

深度剖析360移动性能监控平台ArgusAPM - 图6