必剪Android项目组件化最佳实践

见贤思齐

本期作者王良河B端技术中心资深开发工程师01 前言必剪以前的代码架构是单一工程模式，对于小型产品为了快速迭代第一个版本上线，这种模式是没问题的，但必剪的业务方向是专业剪辑平台，是重客户端型APP，业务和功能较多且复杂度很高。随着必剪项目快速发展，业务功能越来越多，代码量也越来庞大，开发团队也在扩大，以前的项目代码架构和开发模式，存在较多的问题，已经不能满足业务快速迭代的诉求了。进而出现了开发效率、协作效率、编译效率等问题，具体问题如下：合代码经常发生冲突代码权限不可控，Code Review机制难以推行代码严重耦合，新人学习成本高，迭代和维护成本大，功能经常发生衰退增量编译比较耗时，影响开发效率组件无法实现平台化，比如海外版的剪辑APP、粉版创作模块和必剪有很多业务功能是一样的，类似的功能是否可以平台化，减少重复造轮子呢？项目分层模糊，基础功能修改，导致上层业务牵一发动全身，测试部门担心功能衰退，需要全量测试，严重影响项目交付时间02 名词解释单一工程开发模式一个代码工程(Project)对应一个APP，这个APP的所有业务功能都是集中在同一个工程里实现的，业务模块以package方式进行组织模块化编程领域的模块化, 就是遵守代码设计七大原则，实现高内聚、低耦合、高复用，将统一模块的代码和资源放在一个module中。模块化相比于包来讲，模块化更灵活，类比于积木，我们可以用积木搭建出业务形态百变的APP组件化很多开发同学人都在问，模块化和组件化有什么区别？每个人的给出答案都不一样。个人的理解是区别其实很小，但又并不是完全相同的概念。通过以上模块化的概念讲述，大家应该对模块化有了一个整体的了解，那么具体区别是什么呢？组件化是建立在模块化思想上演进的一个变种。组件化本来就是模块化的概念。组件化的核心是角色的转换。在打包时是library，在调试时是application（单独的app）组件既可以是业务组件也可以是功能组件。以前的业务模块化演变成组件化，最核心的变化是就在于library和application的切换。比如你对某个业务模块进行了组件化，如果是集成调试（library模式）时，该业务模块就是一个commom module或者是aar包。单独调试（application）模式）时，该业务模块就是单独的app。在调试阶段，我只关心我负责的模块，我希望我的模块是一个单独的app，因为这样更小，业务更专一，职责边界清晰，修改与调试代码就会越省时省心，编译也会大幅提效。试想当你需要改一段代码，既要关注自己的，也要关注别人的，是一种什么体验 ？当项目足够大，业务线多达几十个，每个业务线都是隔离的，当业务线之间的开发是有相互依赖的，当出现问题，沟通成本是巨大的。编译一个10M的工程代码和1G的工程代码，编译耗时差的不是一个量级。03 单一工程开发模式痛点编译效率低效APP开发，需要高频在手机进行调试，而每次调试都需要对整个工程进行编译，即便你只是改了一段代码或是UI调整，同样需要完整编译工程。当工程代码越来大，编译也会越来越慢，每次增量编译，都需要等待4、5分钟，每个人一天平均编译时长高达1个小时，严重影响了开发效率。增量构建的原理，是以工程目录为单位进行增量构建，发生变更时候，变更的工程，以及该工程作为父节点或祖先节点的工程（可以干预不构建，这也是快编的原理），均需要重新构建。如果是单一工程模式，增量编译维度就是整个项目，增量编译需要扫描该项目的所有代码的引用关系，扫描时长就会特别耗时增量编译的还有一个关键因素是缓存命中范围，缓存命中范围越小，增量编译文件就会越多，时长就会越长。比如修改了某个基础库代码，由于项目代码没有模块化和组件化，依赖和调用该基础的代码，散在各个角落，这种情况下，就会导致项目中大部分代码都会被命中检索和重新编译多人团队协作效率低效每个小伙伴的开发任务虽然不同，但是都能修改整个工程的任意代码。为了完成自己的需求，团队内某个同学改了某段代码，但是这个改动可能影响别人的功能，这样开发人员之间势必要花更多的时间去沟通和协调，没法专注自己的功能点。十几个人同时合并代码时，代码会出现大量的冲突，解决冲突需要耗费巨大的人力且有可能随时合出问题或合漏代码，而且必剪的合代码规则是，产品验收通过之后，代码才能合入至主分支。我们团队周三下午7点出总包，下午5点才开始陆陆续续合代码，如果合代码出现问题，就会影响出总包，进而导致不能按时交付组件化&模块化功能复用基石?必剪是一个专业剪辑平台，编辑功能比较丰富和专业。B站同时也有一些部门在做剪辑相关的功能和业务，必剪不仅要提解决团队内部迭代问题。从长远的发展来看，必剪需要输出平台化的剪辑业务组件、基础功能组件，赋能至别的部门，减少重复造轮子，必剪于2022年7月给粉版输出了图文&UGC插件（业务平台级组件，和必剪共用同一组件），如果必剪没有组件化的基础，则无法做到这一点很多公司对外宣称，三天可以产出一个APP，模块化和组件化起到了最核心的作用。组件就是积木，我们可以用积木搭建出业务形态百变的APP。我们只需要维护好每一个功能和业务组件，业务方一键集成即可总结以上提到3个痛点，并不代表只要是单一工程模式就一定会引发这些痛点，单一工程模式也可以通过自定义的管理工具（插件）和人为介入的方式进行规避。比如，单一工程方式以package方式组织模块代码和定义路径管理资源，然后通过自定义脚本指定对应的package和资源目录进行打aar包给别的部门复用。但如果这么做，开发成本维护成本都比较大，研发需要遵守的开发规范粒度就会变的更细更多，对于任何的自成体系的框架和系统，新人学习成本都比较高04 组件化通用架构以下示意图是个人理解的组件化通用架构，每个团队可以根据自身业务架构，进行对应的调整和扩展，比如基础业务层增加平台中间层，通过平台中间层的协议，实现平台业务组件，可以将业务组件复用给别的团队或部门05 组件化开发规范规范1：动态配置组件工程类型集成模式和组件单独调试模式，集成模式基本上是提测和上线发布的时候才会使用到，开发阶段建议使用组件单独调试模式，因为这样更小，业务更专一，职责边界清晰，修改与调试代码就会越省时省心，编译也会大幅提效。如何让组件在这两种调试模式之间自动转换呢？原理也比较简单，我们团队是通过提供AndroidStuido可视化界面插件，开发同学通过操作插件页面，一键切换集成模式和组件单独调试模式，由于篇幅有限，我就不在这里讲解AndroidStuido可视化界面插件的具体实现了。下面主要讲解动态配置组件工程类型的实现原理和规范：1. 在工程目录，定义一个基础配置项的gradle文件，比如app_config.gradle,在该文件定义一个变量，标识哪个组件需要单独调试，debugModuleName ?=? ""，当debugModuleName字段为空，则代表是集成模式，如果debugModuleName是某个组件名称，则代表是该组件需要独立调试。2. 一个组件如果要独立运行，必须需要配置必备基础信息2.1 apply ”com.android.library“动态改成"com.android.application"，示例代码如下：class InitApplyPluginTask extends InitBaseApplyPluginTask{ @Override void input(Object ob) { super.input(ob) } @Override void doTask() { if (PluginInfoManager.getInstance().getProject().getName().contains(PluginInfoManager.getInstance().getProjectConfig().getDebugModuleName())) { initApplicationPlugin() }else{ initLibraryPlugin() } } @Override Object output() { return super.output() } private void initApplicationPlugin() { PluginInfoManager.getInstance().getProject().apply plugin: "com.android.application" } private void initLibraryPlugin() { PluginInfoManager.getInstance().getProject().apply plugin: "com.android.library" } }?2.2 ?一个App需要一个ApplicationId，而组件在独立调试时也是一个App，所以也需要一个ApplicationId，集成调试时组件是不需要ApplicationId的；另外一个 APP也只有一个启动页，而组件在独立调试时也需要一个启动页，在集成调试时就不需要了。根据debugModuleName分别设置applicationId、AndroidManifest，示例代码如下：class InitApplicationIdTask extends AbstractTask { ? ?@Override ? ?void input(Object ob) { ? ? ? ?super.input(ob) ? ?} ? ? ?@Override ? ?void doTask() { ? ? ? ?super.doTask() ? ? ? ?if (PluginInfoManager.getInstance().getProject().getName().contains(PluginInfoManager.getInstance().getProjectConfig().getDebugModuleName())) { ? ? ? ? ? ? /** ? ? ? ? ? ? * 组件独立调试模式 ? ? ? ? ? ? * 设置该module的applicationId ? ? ? ? ? ? */ ? ? ? ? ? ?setApplicationId(PluginInfoManager.getInstance().getProject().ext.applicationId) ? ? ? ?}else{ ? ? ? ? ? ?/** ? ? ? ? ? ? * 集成化模式，整个项目打包apk ? ? ? ? ? ? * 设置壳工程的applicationId ? ? ? ? ? ? */ ? ? ? ? ? ?setApplicationId(PluginInfoManager.getInstance().getProject().getRootProject().ext.applicationId) ? ? ? ?} ? ?} ? ? ?@Override ? ?Object output() { ? ? ? ?return super.output() ? ?} ? ? private void setApplicationId(String applicationIdStr){ ? ? ? ?PluginInfoManager.getInstance().getProject().android.defaultConfig { ? ? ? ? ? ?applicationId applicationIdStr ? ? ? ?} ? ?}} class InitSourceSetsTask extends AbstractTask { ? ?@Override ? ?void input(Object ob) { ? ? ? ?super.input(ob) ? ?} ? ? ?@Override ? ?void doTask() { ? ? ? ?super.doTask() ? ? ? ?if (PluginInfoManager.getInstance().getProject().getName().contains(PluginInfoManager.getInstance().getProjectConfig().getDebugModuleName())) { ? ? ? ? ? ? ? PluginInfoManager.getInstance().getProject().android.sourceSets.main { ? ? ? ? ? ? ? ? ? ? ? ?/** ? ? ? ? ? ? ? ? ? ? ? ? * 组件独立调试模式 ? ? ? ? ? ? ? ? ? ? ? ? * 指定该module的AndroidManifest.xml ? ? ? ? ? ? ? ? ? ? ? ? */ ? ? ? ? ? ? ? ? ? ? ? ?manifest.srcFile 'src/main/componentdebug/AndroidManifest.xml' ? ? ? ? ? ? ? ?} ? ? ? ? ? }else{ ? ? ? ? ? ? ? PluginInfoManager.getInstance().getProject().android.sourceSets.main { ? ? ? ? ? ? ? ? ? ? ? ?/** ? ? ? ? ? ? ? ? ? ? ? ? * 集成化模式，整个项目打包apk ? ? ? ? ? ? ? ? ? ? ? ? * 指定壳工程的入口AndroidManifest.xml ? ? ? ? ? ? ? ? ? ? ? ? */ ? ? ? ? ? ? ? ? ? ? ? ?manifest.srcFile 'src/main/AndroidManifest.xml' ? ? ? ? ? ? ? ?} ? ? ? ? ? } ? ?} ? ?@Override ? ?Object output() { ? ? ? ?return super.output() ? ?}}其中独立调试的AndroidManifest是新建于目录componentdebug，使用 manifest.srcFile 即可指定两种调试模式的AndroidManifest文件路径。componentdebug中新建的manifest文件指定了Application和启动activity，示例代码如下： ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?BCutDebugMainActivity，所有业务模块的调试入口页面，业务方也可以自定义入口ActivityCourseApplication继承BaseApplication（负责基础组件的初始化），然后CourseApplication的onCreate生命周期初始化该业务module独自依赖的组件。如果是集成调试，组件生命周期分发管理器按照优先级配置项，给每个业务组件分发生命周期，然后每个业务组件在各自的Application完成初始化任务项。关于组件生命周期分发请见下文的“规范7：组件生命周期分发”章节。规范2：组件间无直接依赖组件化的核心就是解耦，所以组件间是不能有依赖的，只能依赖组件暴露服务的API，那么如何实现组件间的页面跳转和相互调用具体的实现类呢（一个接口多个实现类）？例如在首页模块需要账户信息或者需要跳转到主编辑器，两个模块之间没有依赖，也就说不能直接使用显式启动来打开主编辑器页面，那么隐式启动呢？隐式启动是可以实现跳转的，但是隐式Intent需要通过 AndroidManifest配置和管理，协作开发比较麻烦，路由器实现的原理基本是一致的，都是基于Google的auto-service来实现APT（Annotation Processing Tool，编译时注解处理器）能力，然后编译时期自动生成和注入代码，为了和主站的技术方案保持一致，以及组件平台化，必剪项目使用主站提供的bilibiliRouter进行实现页面跳转、组件无直接依赖也可以相互调用等能力。通过Router的确是可以实现页面跳转、组件无直接依赖也可以相互调用，但组件内部的复杂业务耦合又如何解耦和简化代码呢，除了抽象协议和良好的代码设计模式，建议大家可以使用依赖注入框架比如hilt、koin等等，依赖项注入会为您的应用提供以下优势：1. 重用类以及分离依赖项：更容易换掉依赖项的实现。由于控制反转，代码重用得以改进，并且类不再控制其依赖项的创建方式，而是支持任何配置。2. 易于重构：依赖项成为 API Surface 的可验证部分，因此可以在创建对象时或编译时进行检查，而不是作为实现详情隐藏。3. 易于测试：类不管理其依赖项，因此在测试时，您可以传入不同的实现以测试所有不同用例。关于依赖注入框架使用和实现原理，有时间再写一篇技术文章对此进行深入讲解规范3：资源命名规则1. 所有资源文件的命名都需要以业务模块名为前缀，注意不要与其他业务模块前缀名冲突。假设业务模块名为"bgm"，则相关资源文件命名例子：layout文件：bgm_activity_main.xmlanim文件：bgm_anim_bgm_list_detail_sheet_hide.xmldrawable文件：bgm_ic_audio_bgm_tryout.pngstring：bgm_asr_recognize_lyric2. 如果各种资源文件和定义，很多组件都使用到了，就要考虑下沉到公共组件了，每个公司的产品都应该会有固定的主题样式，包括颜色的定义、各种卡片默认图、按钮、弹框、theme等等，这些公共主题样式资源，需要下沉至公共组件。一个庞大的商业项目中这么多资源文件，难道每个都要手动移动和重命名吗？显然是不行的，需要一个脚本批量处理，实现原理比较简单，代码量也不多，具体原理就不在这里阐述了，以下是源码：代码.txt规范4：服务API暴露平时开发中我们常用接口进行解耦，对接口的实现不用关心，避免接口调用与业务逻辑实现紧密关联。这里组件间的解耦也是相同的思路，仅依赖和调用服务接口，不会依赖接口的实现。可能你会有疑问了，既然bgm组件可以访问material组件接口了，那就需要依赖material组件，这两个组件还是耦合了，这怎么处理呢？答案是组件拆分出可暴露服务。见下图：左侧原有的代码结构，组件间调用对方服务，但是有依赖耦合。右侧多了export_bgm、export_material，这是对应拆分出来的专门用于提供服务的暴露组件。操作说明如下：暴露组件，只存放服务接口、服务接口相关的实体类、路由信息、Fragment的获取等等服务调用方只依赖服务提供方的报露组件，如module_bgm依赖export_material组件需要依赖自己的暴露组件，并实现服务接口，如module_bgm依赖export_bgm并实现其中的服务接口接口的实现注入由bilibiliRouter路由框架完成，和页面跳转一样使用路由信息export_bgm示例代码：interface IExportDemoService { val DemoServiceName: String? fun DemoToolsReset() fun DemoExtractNotifyDataChange()}export_bgm实现类代码：@Services(IExportDemoService::class)@Named("ProxyDemoService")class ProxyDemoService : IExportDemoService { override val DemoServiceName: String get() = "DemoModule_ProxyDemoService" override fun DemoToolsReset() { DemoVideoExtractTools.getInst().reset() } override fun DemoExtractNotifyDataChange() { DemoVideoExtractTools.getInst().notifyDataChange() }}调用export_bgm示例代码：BLRouter.INSTANCE.get(IExportDemoService.class, "ProxyDemoService").DemoExtractNotifyDataChange();规范5：第三方组件和自研基础功能组件第三方组件和自研基础功能组件在多个业务组件中都有使用，需要这些底层组件库统一下沉和管理，下沉目的是跟业务隔离以及收敛修改权限，统一管理的目的是规范和统一业务层依赖底层组件的版本。必剪自研组件的仓库示意图如下：部分基础组件版本管理示意图：规范6：数据存储1. 使用SharedPreferences和MMKV时，每个业务模块只管理自己模块需要的数据，SharedPreferences文件名需要通过业务前缀来区分，MMKV实例（MMKV.mmkvWithID）需要通过业务前缀来区分,防止不同组件间数据发生冲突2. 当某些数据需要全局共享时，可以考虑下沉到底层模块规范7：组件生命周期分发当项目组件化之后，业务组件之间是没有依赖的，每个组件都应该有独立的生命周期类似于APPlication，然后每个组件根据自己的业务和功能场景，在不同的生命周期回调做一些事情，比如组件依赖的基础库的初始化等等。那么如何做到各业务组件无侵入地获取 Application生命周期呢？原理也比较简单，主要分成四步：第一步，定义组件的生命周期模型，每个组件实现生命周期模型，生命周期模型示例代码如下：public enum LifeCyclePriority { ? ?MIN_PRIORITY,NORM_PRIORITY,MAX_PRIORITY} public interface IApplicationLifecycle { ? ?LifeCyclePriority getPriority(); ? ?void onCreate(Context context); ? ?void onLowMemory(); ? ?void onTrimMemory(int level);}第二步，生命周期管理类，示例代码如下：public class ApplicationLifecycleManager { ? ?private static List APPLIFELIST = new ArrayList(); ? ?private static boolean INITIALIZE = false; ? ?public static void init(Context context) { ? ? ? ?if (INITIALIZE){ ? ? ? ? ? ?return; ? ? ? ?} ? ? ? ?INITIALIZE = true; ? ? ? ?loadModuleLife(); ? ? ? ?Collections.sort(APPLIFELIST, new AppLikeComparator()); ? ? ? ?for (IApplicationLifecycle appLife : APPLIFELIST) { ? ? ? ? ? ?appLife.onCreate(context); ? ? ? ?} ? ?} ?private static void loadModuleLife() { ? } ? ?private static void registerAppLife(String className) { ? ? ? ?if (TextUtils.isEmpty(className)) ? ? ? ? ? ?return; ? ? ? ?try { ? ? ? ? ? ?Object obj = Class.forName(className).getConstructor().newInstance(); ? ? ? ? ? ?if (obj instanceof IApplicationLifecycle) { ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?APPLIFELIST.add((IApplicationLifecycle)obj); ? ? ? ? ? ?} ? ? ? ?} catch (Exception e) { ? ? ? ? ? ?e.printStackTrace(); ? ? ? ?} ? ?} ? ?private static void registerAppLife(IApplicationLifecycle appLife) { ? ? ? ?APPLIFELIST.add(appLife); ? ?} ? ?public static void onLowMemory() { ? ? ? ?for (IApplicationLifecycle appLife : APPLIFELIST) { ? ? ? ? ? ?appLife.onLowMemory(); ? ? ? ?} ? ?} ? ?public static void onTrimMemory(int level) { ? ? ? ?for (IApplicationLifecycle appLife : APPLIFELIST) { ? ? ? ? ? ?appLife.onTrimMemory(level); ? ? ? ?} ? ?} ? ?static class AppLikeComparator implements Comparator { ? ? ? ?@Override ? ? ? ?public int compare(IApplicationLifecycle o1, IApplicationLifecycle o2) { ? ? ? ? ? ?int p1 = o1.getPriority().ordinal(); ? ? ? ? ? ?int p2 = o2.getPriority().ordinal(); ? ? ? ? ? ?return p2 - p1; ? ? ? ?} ? ?} }第三步，每个组件有诉求需要收到APP的生命周期，则需要实现IApplicationLifecycle接口，示例代码如下：@Services(value = IApplicationLifecycle.class)@Named("HomePageApplication")public class HomePageApplication implements IApplicationLifecycle { ? ?@Override ? ?public LifeCyclePriority getPriority() { ? ? ? ?return LifeCyclePriority.NORM_PRIORITY; ? ?} ? ?@Override ? ?public void onCreate(Context context) { ? ?} ? ?@Override ? ?public void onLowMemory() { ? ?} ? ?@Override ? ?public void onTrimMemory(int level) { ? ?}}第四步，前面三步完成之后，对于组件的生命周期绑定，有两种方式，一种硬代码编写，示例代码如下：ArrayList moduleApplicationLifeList = new ArrayList(); ? ? moduleApplicationLifeList.add(BLRouter.INSTANCE.get(IApplicationLifecycle.class,"HomePageApplication")); ? ? moduleApplicationLifeList.add(BLRouter.INSTANCE.get(IApplicationLifecycle.class,"CourseApplication")); ? ? moduleApplicationLifeList.add(BLRouter.INSTANCE.get(IApplicationLifecycle.class,"GuiChuApplication")); ? ? ApplicationLifecycleManager.init(moduleApplicationLifeList);这种方式扩展性不够且维护成本高，不同宿主可以根据不同的业务诉求，集成不同组件集，那每次都需要修改代码进行适配，成本太高了。第二种是自动注册，实现的原理也比较简单，主要是三个步骤：第一个步骤：提前约定好使用APT生成每个组件ModuleApplication的代理类第二个步骤：在jar包生成dex时，根据代理类约定好的类名规则，找到每个组件的ModuleApplication的代理类，写入至临时缓存第三个步骤：最后找到ApplicationLifecycleManager，因为ApplicationLifecycleManager初始化的时候，会调用loadModuleLife，所以只要将对应的代码通过ASM插入至loadModuleLife方法即可。插桩后的示例如下：private static void loadModuleLife() { ? ? ?registerAppLife("com.bilibili.studio.lifecycle.apt.HomePageApplication@@Proxy"); ? ? ?registerAppLife("com.bilibili.studio.lifecycle.apt.CourseApplication@@oxy"); ? ? ?registerAppLife("com.bilibili.studio.lifecycle.apt.GuiChuApplication@@oxy");}规范8：开发文档每个组件都要维护好说明文档，通常都是一个readme文件。一般包含以下说明：组件的功能介绍组件功能使用说明组件历史版本记录注意事项尽量做到团队内任何一个成员，通过该文档就能使用组件，而不需要找到组件的开发人员来讲解。06 Gradle配置统一管理组件化开发之后，会尽量将所有业务模块根据业务和功能根据职责单一的边界进行拆分，这时候module数量会比较多，编译环境的不同的可能会导致编译结果的差异。举几个例子：当 targetSdkVersion >= 23 时，安卓引入了动态权限，敏感权限需要先申请再使用，但是targetSdkVersion { ? ?@Override ? ?void input(Object ob) { ? ? ? ?super.input(ob) ? ?} ? ?@Override ? ?void doTask() { ? ? ? ?super.doTask() ? ? ? ?System.out.println("GradleEngine || InitBaseSdkVersionTask doTask start") ? ? ? ?PluginInfoManager.getInstance().getProject().android { ? ? ? ? ? ?compileSdkVersion BaseConstant.compileSdkVersion ? ? ? ? ? ?buildToolsVersion BaseConstant.buildToolsVersion ? ? ? ?} ? ? ? ?PluginInfoManager.getInstance().getProject().android.defaultConfig { ? ? ? ? ? ?minSdkVersion BaseConstant.minSdkVersion ? ? ? ? ? ?targetSdkVersion BaseConstant.targetSdkVersion ? ? ? ?} ? ?} ? ?@Override ? ?Object output() { ? ? ? ?return super.output() ? ?}}GradleEngine核心task代码目录：备注：如果对于Gradle不是很熟悉的同学，可以简单的在项目里头，新建gradle文件，提供一些闭包实现、基础配置信息、组件版本信息等等。GradleEngine的更多介绍请见第九章节“工程管理介绍”的内容。07 老项目组件化落地方法论前面五个章节，主要讲解了单一工程&模块化&组件化的开发模式、组件化通用化架构和组件化开发规范，接下来分享的是落地方法论。组件化重构对于比较大型和复杂的商业项目而言难度较大，具体表现如下：由于历史比较久远，很多代码都运行一年甚至两三年了，各个业务相互交叉耦合严重，文档缺失，不敢随意修改，否则会牵一发而动全身，影响现有业务的正常运行组件化重构周期较长，业务迭代和组件化重构是并行的，新的需求如何最高效高质量的合入新的架构？组件化重构影响范围是所有业务，测试需要全量测试，工作量较大当评估完项目重构的难度之后，就需要根据实际的问题，给出解决方案：梳理整体业务，聚类问题，然后确定技术方向和技术方案梳理项目依赖方和技术难点，哪些技术点需要提前调研前面两点确定好之后，再将大的问题分类继续更细粒度的拆分成小问题以及对应的解决方案将整体任务拆分完之后，输出工时和Milestone组件化重构是一个比较大型的技术需求，需要耗费较多的人力，这时候就要考虑ROI了，需要输出组件化重构目标产出：上层对下层垂直化和按需依赖减少网状式依赖，尽可能减少因为底层的修改影响全部业务迭代效率能提高多少？维护成本能降低多少？，具体衡量指标这里就不详细阐述了抽离、重构和输出基础功能组件、业务组件和平台级组件，提高代码复用性、为输出平台化组件提供可扩展性框架和基建整体组件化，每个组件都可以按需编译，每个业务模块独立编译和运行，编译效率能提高多少？08 具体实施第一步：梳理以前的架构和业务，如下图是必剪Android端以前的架构（没完全列举）1. 项目架构介绍整个项目分为四层，从上往下分别是：APP Module Layer：业务层，例如必剪APP大首页、bgm模块、素材集市模块、录屏模块等等；Common Layer：基础业务服务层，顾名思义就是一些基础业务组件，包含了主编辑器、asr、年报等；Framework Layer：自研基础功能组件层，例如上图中的上传组件、数据库组件、下载组件等等；Libraries Layer：包含各种开源库、主站基架和第三方SDK2. 架构问题通过以上的架构图，可以看出来，架构分层没什么大问题，但每一层都存在很多问题，比如：APP Module Laye存在的问题是每个业务模块过于臃肿，以包的形式进行组织，模块之间存在横向依赖和耦合，灵活性差。代码阅读性差、新人学习成本高、迭代和维护成本大，经常引起功能衰退Common Layer包含了垂直业务模块–主编辑器，且存在很多横向依赖Libraries Layer的结构特别不合理，包含了所有的第三方SDK、JIN、开源库、主站基架。上层的所有组件和package直接遍历依赖所有的组件那个时期，各业务技术方案不统一，冗余&重复代码充斥项目的各个角落，大家只不过是不停地往上堆砌代码添加新功能罢了，迭代和维护成本已经出现了较严重的问题。第二步：梳理项目依赖树1. 项目整体依赖树2. 依赖树整体问题通过以上的依赖树图，可以看出来，架构各层依赖凌乱，同一层存在过多的横向依赖，各种耦合且没有内聚。librarys以上的架构，都是直接依赖整个libraries Layer，这种依赖方式太重，无法组件化和输出基础组件。3. librariesLayer 依赖树第三步：问题聚类，给出技术方案架构准则只有上层的组件才能依赖下层组件，不能反向依赖，会出现循环依赖的情况同一层之间的组件不能相互依赖，为了组件之间彻底解耦每一层级的问题聚类和解决方案libraries Layer1. 该层级职责边界自研基础功能组件（跟业务无关）、第三方SDK module封装maven统一管理2. 该层级问题描述结构不合理，上层如果直接依赖libraries Layer就会导致上层的各种组件、业务模块就算拆分了更细粒度和抽离公共模块，也无法实现平台化，因为别的平台不会因为使用一个基础组件，需要依赖这么多底层组件库3. 解决方案libraries Layer的结构重整，打破原有不合理的结构，每个基础库都是单独module组件且上传至maven上层按需依赖明确每个module的代码提交权限、Owner权限以及review机制创建组件库仓库独立管理framework Layer1. 该层级职责边界这一层提供两种组件，分别是一种是对更下层的SDK或开源库进行二次封装、定制和代理。比如BCutFresco，downloader、player、tts、asr等组件，另一种是根据上层业务抽象和实现基础能力，比如主编辑器引擎、guide、database组件等2. 该层级问题描述framework Layer 组件库之前有横向依赖，从架构的合理性来说，同一层的组件应该尽可能避免耦合和相互依赖3. 解决方案筛选出相互依赖的组件，根据功能边界和高内聚，进行局部重构，部分组件下沉至更底层libraries Layer；跟业务强关联的组件上浮至common Layercommon Layer1. 该层级职责边界支撑上层业务组件运行的基础业务服务，对一些系统通用的业务能力进行封装组件。例如主编辑器引擎服务池，虚拟形象服务池，鬼畜服务池、图文服务池等给业务定制和关联的组件，比如模板下载、草稿管理、导出组件等等2. 该层级问题描述包含业务模块module有些组件是跟业务无关的功能组件3. 解决方案业务模块module上浮至APP Module Layer，业务无关的功能组件下沉至framework LayerAPP module1. 该层级职责边界该层的组件就是我们真正的业务组件了，我们通常按照功能模块来划分业务组件，比如主编辑器模块、虚拟形象模块、轻图文模块、鬼畜模块、配音模块、BGM模块2. 该层级问题描述业务模块之前存在严重的耦合，模块过于臃肿3. 解决方案梳理业务，定义好业务边界，输出模块拆分计划业务代码解耦和内聚第四步：任务拆解老项目实施组件化，会比一个新项目开始组件化难度会大些，主要是对于老业务的影响和新业务的合入。如下是必剪老项目组件化的一些实践经验，供大家参考整体思路完成基础能力建设，gradle统一管理插件、创建组件仓库、组件版本管理插件、支持一键切换集成模式和非集成模式插件、按需编译插件等从底层往上层进行优化和重构，每一层需要做的事情都差不多，梳理现有的代码架构和业务架构，解耦&内聚，资源迁移和重命名、设计暴露API、实现功能。根据约定好的分层，放在对应的层级里具体任务拆解09 组件化改造结果必剪组件化改造后架构图项目架构介绍图中可以看到，从上往下分为5层：APP壳工程、业务层、基础业务服务层、自研组件层，商业&部门&主站&开源SDK层上往下分别是：1. APP壳工程壳工程依赖了需要集成的业务组件，主要是一些配置文件，没有任何代码逻辑，根据你的需要选择集成你的业务组件，不同的业务组件就组成了不同的APP2. 业务层该层的组件就是我们真正的业务组件了，我们通常按照功能模块来划分业务组件，比如主编辑器模块、虚拟形象模块、轻图文模块、鬼畜模块、配音模块、BGM模块等等，这里的每个业务组件都是一个小的APP，它必须可以单独编译，单独打包成APK在手机上运行。3. 基础业务服务层支撑上层业务组件运行的基础业务服务，对一些系统通用的业务能力进行封装组件。对于平台业务，抽象了平台级中间层协议，基础业务可支持平台化（复用至别的部门），对于各垂直业务抽象了暴露服务API。还实现和封装了主编辑器引擎服务池，虚拟形象服务池，鬼畜服务池、图文服务池等，其他业务只要集成对应的组件就可以使用该组件提供的能力集；例如主编剪辑引擎平台服务组件，封装和实现了基础剪辑能力。4. 自研组件层Framework Layer:这一层组件提供两种组件，一种是对更下层的SDK或开源库进行二次封装、定制和代理。比如BCutFresco，downloader、player、tts、asr等组件。为什么要对底层SDK进行封装或代理，代理的好处是替换底层SDK，上层业务可以做到无感知。为什么要对底层SDK机型修改定制，比如Fresco，Fresco RGB565配置不生效的兼容性修改；另一种组件是根据上层业务抽象和实现基础能力，比如主编辑器引擎组件、guide、database组件等Libraries Layer:自研基础功能组件和第三方SDK进行module封装上传至maven统一管理5. 商业&部门&主站&开源SDK层顾名思义，就是商业SDK、部门SDK、主站组件和开源组件容器层（每个SDK都进行maven统一管理）工程管理介绍1. Gradle通用配置统一管理1.1 能力集gradle基础配置信息，比如每个组件依赖的通用插件kotlin-androidkotlin-android-extensionskotlin-kaptBuildConfig注入业务基础信息Android系统相关SDK版本targetSdkVersionminSdkVersioncompileSdkVersionbuildToolsVersionAPP主工程集成打包自动依赖所有业务组件Java版本号lintOptionsresourcePrefixsourceSets编译耗时统计打包管理其他1.2 实现原理Gradle的统一管理实现方案有两种第一种是在项目中创建BuildConfig配置文件，把这些公共的配置项定义为共享变量，提供一些闭包封装配置操作，源码如下：ext {/** * Android SDK公共变量 */ ?android = [ ? ? ? ? ? ?compileSdkVersion: 31, ? ? ? ? ? ?buildToolsVersion: "31.0.0", ? ? ? ? ? ?minSdkVersion ? ?: 21, ? ? ? ? ? ?targetSdkVersion : 28 ? ?] ? /** * SDK maven版本号 */ ? ? ? ? masterlib = [ ? ? ? ? ? 'accountinfo' :"com.bilibili.lib:accountinfo{masterlibversionMap.accountVersion}", ? ? ? ? ? 'accountsui' ?: "com.bilibili.lib:accountsui{masterlibversionMap.accountVersion}", ? ? ? ? ? ?'updater' ? ?: "com.bilibili.lib:updater{masterlibversionMap.updaterVersion}", ? ? ? ? ? ?'neuron' ? ? : "com.bilibili.lib:neuron{masterlibversionMap.neuronVersion}", ? ? ? ? ? ? 'blkv' ? ? ?: "com.bilibili.lib:blkv{masterlibversionMap.blkvVersion}", ? ? ? ? ? 'foundation' ?: "com.bilibili.lib:foundation{masterlibversionMap.foundation}", ? ? ? ? ? 'downloader' ?: "com.bilibili.lib:downloader{masterlibversionMap.downloaderVersion}", ? ? ? ? ?'router_extras': "com.bilibili.lib:blrouter-extras{masterlibversionMap.blrouterVersion}", ? ? ? ? ? 'router' ? ? ?: "com.bilibili.lib:blrouter-compat{masterlibversionMap.blrouterVersion}", ? ? ? ? ? 'bconfig' ? ? : "com.bilibili.lib:bconfigmasterlibversionMap.bconfig", ? ? ? ? ? 'blconfig' ? ?: "com.bilibili.lib:blconfig:${masterlibversionMap.blconfig}" ? ?] /** * 设置Router依赖闭包 */ ?setRouterDependencies = { ? ? ? ?project -> ? ? ? ? ? ?project.dependencies { ? ? ? ? ? ? ? ?kapt masterlib.'router_apt' ? ? ? ? ? ? ? ?implementation masterlib.blrouter_api ? ? ? ? ? ? ? ?implementation masterlib.router_extras ? ? ? ? ? ? ? ?implementation masterlib.router ? ? ? ? ? ? ? ?implementation masterlib.routerbase ? ? ? ? ? ?} ? ?} }第一种技术方案实现有如下缺点：1. 类似的通用配置跟业务无关，不需要暴露给业务开发同学2. 工程的通用配置、业务配置项、各种插件的依赖、编译耗时统计、ilibrary和application动态切换等，代码就会显得比较臃肿。扩展性不高且无法复用至别的业务线第二种实现方案是自定义Gradle插件， 把gradle的所有配置项当成需求进行抽象和实现，提供一个可扩展和平台化的Gradle引擎。插件入口类：class EngineMain implements Plugin { ? ?@Override ? ?void apply(Project project) { ? ? ? ?PluginInfoManager.getInstance().setProject(project) ? ? ? ?PluginInfoManager.getInstance().initProjectConfig(project) ? ? ? ?if (!project.getName().equals(project.getRootProject().getName())) { ? ? ? ? ? ?switch (PluginInfoManager.getInstance().getProjectConfig().projectTypeDefine) { ? ? ? ? ? ? ? ?case ProjectTypeDefine.STUDIOMAINPROJECT: ? ? ? ? ? ? ? ? ? ?initStudioMainProjectGradleCF(project) ? ? ? ? ? ? ? ? ? ?break ? ? ? ? ? ? ? ?case ProjectTypeDefine.STUDIOMAVENLIBS: ? ? ? ? ? ? ? ? ? ?initStudioMavenlibsProjectGradleCF() ? ? ? ? ? ? ? ? ? ?break ? ? ? ? ? ? ? ?case ProjectTypeDefine.COMMPROJECT: ? ? ? ? ? ? ? ? ? ?initCommLibGradleCF() ? ? ? ? ? ? ? ? ? ?break ? ? ? ? ? ? ? ?default: ? ? ? ? ? ? ? ? ? ?println("请指定项目类型，ProjectTypeDefine") ? ? ? ? ? ? ? ? ? ?break ? ? ? ? ? ?} ? ? ? ?} ? ?}}抽象：每个配置项，抽象成一个task，且task都有对应的基类，比如apply plugin配置，library和application所有需要的apply plugin是不一样的。但又有共性，那是否可以对此进行抽象呢？答案是可以的，示例代码如下：代码.txt可扩展性不同类型的module配置信息，主工程、业务模块（library和application自动切换）、基础组件，示例代码如下：private void initStudioMainProjectGradleCF(Project project) { ? ? ? println("GradleEngine || initStudioMainProjectGradleCF") ? ? ? /** ? ? ? ?* 空壳APP Module（主工程） ? ? ? ?*/ ? ? ? if (project.getName().equals(project.getRootProject().ext.mainModuleName)) { ? ? ? ? ? println("GradleEngine || initStudioMainProjectGradleCF mainModuleName") ? ? ? ? ? PluginInfoManager.getInstance().executeAppConfigPipeline() ? ? ? ? ? PluginInfoManager.getInstance().executeBusinessModulePipeline() ? ? ? } else { ? ? ? ? ?/** ? ? ? ? ? * 业务modules ? ? ? ? ? */ ? ? ? ? ? project.getRootProject().ext.app_business_module.each { k, v -> ? ? ? ? ? ? ? if (v.contains(project.getName())) { ? ? ? ? ? ? ? ? ? println("GradleEngine || initStudioMainProjectGradleCF app_business_module") ? ? ? ? ? ? ? ? ? PluginInfoManager.getInstance().executeBusinessModulePipeline() ? ? ? ? ? ? ? ? ? targeted = true ? ? ? ? ? ? ? ? ? return ? ? ? ? ? ? ? } ? ? ? ? ? } ? ? ? ? ? /** ? ? ? ? ? ?* 基础组件 ? ? ? ? ? ?*/ ? ? ? ? ? ?println("GradleEngine || initStudioMainProjectGradleCF 其他和业务平级的module") ? ? ? ? ? ?PluginInfoManager.getInstance().executeBaseLibLayerPipeline() ? ? ? ? ? ? ? ? ? } ? }工作流扩展性，工作流的task支持任意拔插和组合，支持任意扩展和修改，示例代码如下：/** * 业务组件 */ ?public void executeBusinessModulePipeline() { ? ? System.out.println("GradleEngine || executeBusinessModulePipeline") ? ? BusinessModulePipeline.builder().setInitApplypluginTask(getBusinessAbstractTask(TaskTypeDefine.INITAPPLYPLUGIN)) ? ? ? ? ? ? ? ?.setInitApplicationIdTask(getBusinessAbstractTask(TaskTypeDefine.INITAPPLICATIONID)) ? ? ? ? ? ? ? ?.setInitBaseApplyMavenTask(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASEAPPLYPMAVEN)) ? ? ? ? ? ? ? ?.setInitSdkersionTask(getBusinessAbstractTask(TaskTypeDefine.INITSDKVERSION)) ? ? ? ? ? ? ? ?.setInitAbiFilterTask(getBusinessAbstractTask(TaskTypeDefine.INITABIFILTER)) ? ? ? ? ? ? ? ?.setInitBuildConfigFieldTask(getBusinessAbstractTask(TaskTypeDefine.INITBUILDCONFIGFIELD)) ? ? ? ? ? ? ? ?.setInitMainModuleDependenciesTask(getBusinessAbstractTask(TaskTypeDefine.INITDEPENDENCIES)) ? ? ? ? ? ? ? ?.setInitLintOptionsTask(getBusinessAbstractTask(TaskTypeDefine.INITLINTOPTIONS)) ? ? ? ? ? ? ? ?.setInitJavaCompileTask(getBusinessAbstractTask(TaskTypeDefine.INITJAVACOMPILE)) ? ? ? ? ? ? ? ?.setInitSourceSetsTask(getBusinessAbstractTask(TaskTypeDefine.INITSOURCESETS)) ? ? ? ? ? ? ? ?.setInitResourcePrefix(getBusinessAbstractTask(TaskTypeDefine.INITRESOURCEPREFIX)) ? ? ? ? ? ? ? ?.execute() ? ?} /** * 基础组件 */ ? void executeBaseLibLayerPipeline() { ? ? LibModulePipeline.builder().setInitBaseApplypluginTask(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASEAPPLYPLUGIN)) ? ? ? ? ? ? ? ?.setInitBaseApplyMavenTask(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASEAPPLYPMAVEN)) ? ? ? ? ? ? ? ?.setInitBaseBuildConfigField(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASEBUILDCONFIGFIELD)) ? ? ? ? ? ? ? ?.setInitBasesdkVersionTask(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASESDKVERSION)) ? ? ? ? ? ? ? ?.setInitBaseJavaCompileTask(getLibModuleAbstractTask(BaseLibTaskTypeDefine.INITBASEJAVACOMPILE)) ? ? ? ? ? ? ? ?.execute() ? ? }task代码示例主工程（壳工程module）自动集成所有的业务组件，示例代码如下：class InitDependenciesTask extends AbstractTask { ? ?@Override ? ?void input(Object ob) { ? ? ? ?super.input(ob) ? ?} ? ?@Override ? ?void doTask() { ? ? ? ?super.doTask() ? ? ? ?PluginInfoManager.getInstance().getProject().dependencies { ? ? ? ?if (PluginInfoManager.getInstance().getProject().getName().equals(PluginInfoManager.getInstance().getProject().getRootProject().ext.mainModuleName)) { ? ? ? ?if (PluginInfoManager.getInstance().projectConfig.getIntegrated()) { ? ? ? ? ? ?/** ? ? ? ? ? ? * 依赖各个业务module ? ? ? ? ? ? */ ? ? ? ? ? ? PluginInfoManager.getInstance().getProject().getRootProject().ext.app_business_module.each { k, v -> ? ? ? ? ? ? ? ? implementation PluginInfoManager.getInstance().getProject().project(v) ? ? ? ? ? ? ?} ? ? ? ? ? ?} ? ? ? ? ?} ? ? ? ?} ? ?} ? ?@Override ? ?Object output() { ? ? ? ?return super.output() ? ?} }2. 快编构建系统能力集编译耗时统计和分析按需编译全量编译10分钟降低至4分钟增量编译3分钟降低至1.2分钟每个同学每天编译耗时预计可以从50分钟降低至25分钟编译耗时统计分析，效果图如下：编译耗时统计分析实现原理比较简单，核心是主工程project实现TaskExecutionListener, BuildListener，核心代码如下：代码.txt快编插件（按需编译）插件UI交互快编实现原理按需编译的前置条件是工程需要组件化，每个组件做到单一职责。接下来就是提供组件发布和依赖的自动化脚本或插件了发布A 远程发布：一般是主分支的代码，才需要发布至远程仓库。然后发布的时机，可以根据自己部门或公司的实际情况进行自定义，比如CI阶段代码合并至主分支，增量发布对应的组件或者本地提供Androidstudio插件，进入总包阶段，每一天自动全量发布组件B 本地发布：开发阶段自己的工作分支，组件可以发布至本地，自己使用，不影响别的开发同学或业务线自动依赖当快编插件触发操作时，快编插件需要动态修改工程对应的配置文件，比如将bgm改成源码依赖，通过gradle substitute API将进行依赖替换比如substitute module(bgm) using project(bgm)，修改settings文件，include bgm module;动态修改组件版本号注意事项组件间的资源文件尽量不要跨组件依赖，如果出现了跨组件依赖，各组件进行了依赖替换的时候，编译会报Android Resource linking failed未来优化项组件做到按需编译后，全量和增量编译效率虽然都有了很大的提升，但还有继续优化的空间，下一个目标是实现秒编，代码和资源增量，推送至设备进行热部署10 总结组件化的基础思想是相通的，遵守组件化的基本规范，搭建组件化架构，再根据代码设计七大原则，抽离或下沉高内聚、低耦合、高复用的业务和功能组件。必剪的组件化改造是跟着迭代逐渐完善的，并且以后肯定也会随着业务和代码的变动不断的进行优化，这会是一个持续的过程。这次组件化改造的过程中涉及了太多的内容，其中很多点都能拿出来单独写一篇文章，比如快编的完整架构和实现细节，自定义Gradle插件–GradleEngine，gradle构建流程，AndroidStudio插件开发等等，由于篇幅有限并不能在文中一一详述，希望后续有时间可以分享更多的技术文章跟大家一起学习和交流。以上是今天的分享内容，如果你有什么想法或疑问，欢迎大家在留言区与我们互动，如果喜欢本期内容的话，请给我们点个赞吧！