面试重点: 来说说Dubbo SPI 机制

开发 后端
SPI是一种简称,全名叫 Service Provider Interface,Java本身提供了一套SPI机制,SPI 的本质是将接口实现类的全限定名配置在文件中,并由服务加载器读取配置文件,加载实现类,这样可以在运行时,动态为接口替换实现类,这也是很多框架组件实现扩展功能的一种手段。

 [[357484]]

SPI是什么

SPI是一种简称,全名叫 Service Provider Interface,Java本身提供了一套SPI机制,SPI 的本质是将接口实现类的全限定名配置在文件中,并由服务加载器读取配置文件,加载实现类,这样可以在运行时,动态为接口替换实现类,这也是很多框架组件实现扩展功能的一种手段。

而今天要说的Dubbo SPI机制和Java SPI还是有一点区别的,Dubbo 并未使用 Java 原生的 SPI 机制,而是对他进行了改进增强,进而可以很容易地对Dubbo进行功能上的扩展。

学东西得带着问题去学,我们先提几个问题,再接着看

1.什么是SPI(开头已经解释了)

2.Dubbo SPI和Java原生的有什么区别

3.两种实现应该如何写出来

Java SPI是如何实现的

先定义一个接口:

 

  1. public interface Car { 
  2.  void startUp(); 

然后创建两个类,都实现这个Car接口

 

  1. public class Truck implements Car{ 
  2.  @Override 
  3.  public void startUp() { 
  4.   System.out.println("The truck started"); 
  5.  } 
  6.  
  7. public class Train implements Car{ 
  8.  @Override 
  9.  public void startUp() { 
  10.   System.out.println("The train started"); 
  11.  } 

然后在项目META-INF/services文件夹下创建一个名称为接口的全限定名,com.example.demo.spi.Car。

文件内容写上实现类的全限定名,如下:

 

  1. com.example.demo.spi.Train 
  2. com.example.demo.spi.Truck 

最后写一个测试代码:

 

  1. public class JavaSPITest { 
  2.  @Test 
  3.  public void testCar() { 
  4.   ServiceLoader<Car> serviceLoader = ServiceLoader.load(Car.class); 
  5.   serviceLoader.forEach(Car::startUp); 
  6.  } 

执行完的输出结果:

 

  1. The train started 
  2. The truck started 

Dubbo SPI是如何实现的

Dubbo 使用的SPI并不是Java原生的,而是重新实现了一套,其主要逻辑都在ExtensionLoader类中,逻辑也不难,后面会稍带讲一下

看看使用,和Java的差不了太多,基于前面的例子来看下,接口类需要加上@SPI注解:

 

  1. @SPI 
  2. public interface Car { 
  3.  void startUp(); 

实现类不需要改动

配置文件需要放在META-INF/dubbo下面,配置写法有些区别,直接看代码:

 

  1. train = com.example.demo.spi.Train 
  2. truck = com.example.demo.spi.Truck 

最后就是测试类了,先看代码:

 

  1. public class JavaSPITest { 
  2.  @Test 
  3.  public void testCar() { 
  4.   ExtensionLoader<Car> extensionLoader = ExtensionLoader.getExtensionLoader(Car.class); 
  5.   Car car = extensionLoader.getExtension("train"); 
  6.   car.startUp(); 
  7.  } 

执行结果:

  1. The train started 

Dubbo SPI中常用的注解

  • @SPI 标记为扩展接口
  • @Adaptive自适应拓展实现类标志
  • @Activate 自动激活条件的标记

总结一下两者区别:

  • 使用上的区别Dubbo使用ExtensionLoader而不是ServiceLoader了,其主要逻辑都封装在这个类中
  • 配置文件存放目录不一样,Java的在META-INF/services,Dubbo在META-INF/dubbo,META-INF/dubbo/internal
  • Java SPI 会一次性实例化扩展点所有实现,如果有扩展实现初始化很耗时,并且又用不上,会造成大量资源被浪费
  • Dubbo SPI 增加了对扩展点 IOC 和 AOP 的支持,一个扩展点可以直接 setter 注入其它扩展点
  • Java SPI加载过程失败,扩展点的名称是拿不到的。比如:JDK 标准的 ScriptEngine,getName() 获取脚本类型的名称,如果 RubyScriptEngine 因为所依赖的 jruby.jar 不存在,导致 RubyScriptEngine 类加载失败,这个失败原因是不会有任何提示的,当用户执行 ruby 脚本时,会报不支持 ruby,而不是真正失败的原因

前面的3个问题是不是已经能回答出来了?是不是非常简单

Dubbo SPI源码分析

Dubbo SPI使用上是通过ExtensionLoader的getExtensionLoader方法获取一个 ExtensionLoader 实例,然后再通过 ExtensionLoader 的 getExtension 方法获取拓展类对象。这其中,getExtensionLoader 方法用于从缓存中获取与拓展类对应的 ExtensionLoader,如果没有缓存,则创建一个新的实例,直接上代码:

 

  1. public T getExtension(String name) { 
  2.     if (name == null || name.length() == 0) { 
  3.         throw new IllegalArgumentException("Extension name == null"); 
  4.     } 
  5.     if ("true".equals(name)) { 
  6.         // 获取默认的拓展实现类 
  7.         return getDefaultExtension(); 
  8.     } 
  9.     // 用于持有目标对象 
  10.     Holder<Object> holder = cachedInstances.get(name); 
  11.     if (holder == null) { 
  12.         cachedInstances.putIfAbsent(name, new Holder<Object>()); 
  13.         holder = cachedInstances.get(name); 
  14.     } 
  15.     Object instance = holder.get(); 
  16.     // DCL 
  17.     if (instance == null) { 
  18.         synchronized (holder) { 
  19.             instance = holder.get(); 
  20.             if (instance == null) { 
  21.                 // 创建扩展实例 
  22.                 instance = createExtension(name); 
  23.                 // 设置实例到 holder 中 
  24.                 holder.set(instance); 
  25.             } 
  26.         } 
  27.     } 
  28.     return (T) instance; 

上面这一段代码主要做的事情就是先检查缓存,缓存不存在创建扩展对象

接下来我们看看创建的过程:

 

  1. private T createExtension(String name) { 
  2.     // 从配置文件中加载所有的扩展类,可得到“配置项名称”到“配置类”的映射关系表 
  3.     Class<?> clazz = getExtensionClasses().get(name); 
  4.     if (clazz == null) { 
  5.         throw findException(name); 
  6.     } 
  7.     try { 
  8.         T instance = (T) EXTENSION_INSTANCES.get(clazz); 
  9.         if (instance == null) { 
  10.             // 反射创建实例 
  11.             EXTENSION_INSTANCES.putIfAbsent(clazz, clazz.newInstance()); 
  12.             instance = (T) EXTENSION_INSTANCES.get(clazz); 
  13.         } 
  14.         // 向实例中注入依赖 
  15.         injectExtension(instance); 
  16.         Set<Class<?>> wrapperClasses = cachedWrapperClasses; 
  17.         if (wrapperClasses != null && !wrapperClasses.isEmpty()) { 
  18.             // 循环创建 Wrapper 实例 
  19.             for (Class<?> wrapperClass : wrapperClasses) { 
  20.                 // 将当前 instance 作为参数传给 Wrapper 的构造方法,并通过反射创建 Wrapper 实例。 
  21.                 // 然后向 Wrapper 实例中注入依赖,最后将 Wrapper 实例再次赋值给 instance 变量 
  22.                 instance = injectExtension( 
  23.                     (T) wrapperClass.getConstructor(type).newInstance(instance)); 
  24.             } 
  25.         } 
  26.         return instance; 
  27.     } catch (Throwable t) { 
  28.         throw new IllegalStateException("Extension instance (name: " + name + ", class: " + 
  29.                     type + ") couldn't be instantiated: " + t.getMessage(), t); 
  30.     } 

这段代码看着繁琐,其实也不难,一共只做了4件事情:

1.通过getExtensionClasses获取所有配置扩展类

2.反射创建对象

3.给扩展类注入依赖

4.将扩展类对象包裹在对应的Wrapper对象里面

我们在通过名称获取扩展类之前,首先需要根据配置文件解析出扩展类名称到扩展类的映射关系表,之后再根据扩展项名称从映射关系表中取出相应的拓展类即可。相关过程的代码如下:

 

  1. private Map<String, Class<?>> getExtensionClasses() { 
  2.     // 从缓存中获取已加载的拓展类 
  3.     Map<String, Class<?>> classes = cachedClasses.get(); 
  4.     // DCL 
  5.     if (classes == null) { 
  6.         synchronized (cachedClasses) { 
  7.             classes = cachedClasses.get(); 
  8.             if (classes == null) { 
  9.                 // 加载扩展类 
  10.                 classes = loadExtensionClasses(); 
  11.                 cachedClasses.set(classes); 
  12.             } 
  13.         } 
  14.     } 
  15.     return classes; 

这里也是先检查缓存,若缓存没有,则通过一次双重锁检查缓存,判空。此时如果 classes 仍为 null,则通过 loadExtensionClasses 加载拓展类。下面是 loadExtensionClasses 方法的代码

 

  1. private Map<String, Class<?>> loadExtensionClasses() { 
  2.     // 获取 SPI 注解,这里的 type 变量是在调用 getExtensionLoader 方法时传入的 
  3.     final SPI defaultAnnotation = type.getAnnotation(SPI.class); 
  4.     if (defaultAnnotation != null) { 
  5.         String value = defaultAnnotation.value(); 
  6.         if ((value = value.trim()).length() > 0) { 
  7.             // 对 SPI 注解内容进行切分 
  8.             String[] names = NAME_SEPARATOR.split(value); 
  9.             // 检测 SPI 注解内容是否合法,不合法则抛出异常 
  10.             if (names.length > 1) { 
  11.                 throw new IllegalStateException("more than 1 default extension name on extension..."); 
  12.             } 
  13.  
  14.             // 设置默认名称,参考 getDefaultExtension 方法 
  15.             if (names.length == 1) { 
  16.                 cachedDefaultName = names[0]; 
  17.             } 
  18.         } 
  19.     } 
  20.  
  21.     Map<String, Class<?>> extensionClasses = new HashMap<String, Class<?>>(); 
  22.     // 加载指定文件夹下的配置文件 
  23.     loadDirectory(extensionClasses, DUBBO_INTERNAL_DIRECTORY); 
  24.     loadDirectory(extensionClasses, DUBBO_DIRECTORY); 
  25.     loadDirectory(extensionClasses, SERVICES_DIRECTORY); 
  26.     return extensionClasses; 

loadExtensionClasses 方法总共做了两件事情,一是对 SPI 注解进行解析,二是调用 loadDirectory 方法加载指定文件夹配置文件。SPI 注解解析过程比较简单,无需多说。下面我们来看一下 loadDirectory 做了哪些事情

 

  1. private void loadDirectory(Map<String, Class<?>> extensionClasses, String dir) { 
  2.     // fileName = 文件夹路径 + type 全限定名  
  3.     String fileName = dir + type.getName(); 
  4.     try { 
  5.         Enumeration<java.net.URL> urls; 
  6.         ClassLoader classLoader = findClassLoader(); 
  7.         // 根据文件名加载所有的同名文件 
  8.         if (classLoader != null) { 
  9.             urls = classLoader.getResources(fileName); 
  10.         } else { 
  11.             urls = ClassLoader.getSystemResources(fileName); 
  12.         } 
  13.         if (urls != null) { 
  14.             while (urls.hasMoreElements()) { 
  15.                 java.net.URL resourceURL = urls.nextElement(); 
  16.                 // 加载资源 
  17.                 loadResource(extensionClasses, classLoader, resourceURL); 
  18.             } 
  19.         } 
  20.     } catch (Throwable t) { 
  21.         logger.error("Exception occurred when loading extension class (interface: " + 
  22.                     type + ", description file: " + fileName + ").", t); 
  23.     } 

loadDirectory 方法先通过 classLoader 获取所有资源链接,然后再通过 loadResource 方法加载资源。我们继续跟下去,看一下 loadResource 方法的实现

 

  1. private void loadResource(Map<String, Class<?>> extensionClasses, ClassLoader classLoader, 
  2.                           java.net.URL resourceURL) { 
  3.     try { 
  4.         BufferedReader reader = new BufferedReader( 
  5.             new InputStreamReader(resourceURL.openStream(), "utf-8")); 
  6.         try { 
  7.             String line; 
  8.             // 按行读取配置内容 
  9.             while ((line = reader.readLine()) != null) { 
  10.                 // 定位 # 字符 
  11.                 final int ci = line.indexOf('#'); 
  12.                 if (ci >= 0) { 
  13.                     // 截取 # 之前的字符串,# 之后的内容为注释,需要忽略 
  14.                     line = line.substring(0, ci); 
  15.                 } 
  16.                 line = line.trim(); 
  17.                 if (line.length() > 0) { 
  18.                     try { 
  19.                         String name = null
  20.                         int i = line.indexOf('='); 
  21.                         if (i > 0) { 
  22.                             // 以等于号 = 为界,截取键与值 
  23.                             name = line.substring(0, i).trim(); 
  24.                             line = line.substring(i + 1).trim(); 
  25.                         } 
  26.                         if (line.length() > 0) { 
  27.                             // 加载类,并通过 loadClass 方法对类进行缓存 
  28.                             loadClass(extensionClasses, resourceURL,  
  29.                                       Class.forName(line, true, classLoader), name); 
  30.                         } 
  31.                     } catch (Throwable t) { 
  32.                         IllegalStateException e = 
  33.                           new IllegalStateException("Failed to load extension class..."); 
  34.                     } 
  35.                 } 
  36.             } 
  37.         } finally { 
  38.             reader.close(); 
  39.         } 
  40.     } catch (Throwable t) { 
  41.         logger.error("Exception when load extension class..."); 
  42.     } 

loadResource 方法用于读取和解析配置文件,并通过反射加载类,最后调用 loadClass 方法进行其他操作。loadClass 方法用于主要用于操作缓存,该方法的逻辑如下:

 

  1. private void loadClass(Map<String, Class<?>> extensionClasses, java.net.URL resourceURL,  
  2.     Class<?> clazz, String name) throws NoSuchMethodException { 
  3.      
  4.     if (!type.isAssignableFrom(clazz)) { 
  5.         throw new IllegalStateException("..."); 
  6.     } 
  7.  
  8.     // 检测目标类上是否有 Adaptive 注解 
  9.     if (clazz.isAnnotationPresent(Adaptive.class)) { 
  10.         if (cachedAdaptiveClass == null) { 
  11.             // 设置 cachedAdaptiveClass缓存 
  12.             cachedAdaptiveClass = clazz; 
  13.         } else if (!cachedAdaptiveClass.equals(clazz)) { 
  14.             throw new IllegalStateException("..."); 
  15.         } 
  16.          
  17.     // 检测 clazz 是否是 Wrapper 类型 
  18.     } else if (isWrapperClass(clazz)) { 
  19.         Set<Class<?>> wrappers = cachedWrapperClasses; 
  20.         if (wrappers == null) { 
  21.             cachedWrapperClasses = new ConcurrentHashSet<Class<?>>(); 
  22.             wrappers = cachedWrapperClasses; 
  23.         } 
  24.         // 存储 clazz 到 cachedWrapperClasses 缓存中 
  25.         wrappers.add(clazz); 
  26.          
  27.     // 程序进入此分支,表明 clazz 是一个普通的拓展类 
  28.     } else { 
  29.         // 检测 clazz 是否有默认的构造方法,如果没有,则抛出异常 
  30.         clazz.getConstructor(); 
  31.         if (name == null || name.length() == 0) { 
  32.             // 如果 name 为空,则尝试从 Extension 注解中获取 name,或使用小写的类名作为 name 
  33.             name = findAnnotationName(clazz); 
  34.             if (name.length() == 0) { 
  35.                 throw new IllegalStateException("..."); 
  36.             } 
  37.         } 
  38.         // 切分 name 
  39.         String[] names = NAME_SEPARATOR.split(name); 
  40.         if (names != null && names.length > 0) { 
  41.             Activate activate = clazz.getAnnotation(Activate.class); 
  42.             if (activate != null) { 
  43.                 // 如果类上有 Activate 注解,则使用 names 数组的第一个元素作为键, 
  44.                 // 存储 name 到 Activate 注解对象的映射关系 
  45.                 cachedActivates.put(names[0], activate); 
  46.             } 
  47.             for (String n : names) { 
  48.                 if (!cachedNames.containsKey(clazz)) { 
  49.                     // 存储 Class 到名称的映射关系 
  50.                     cachedNames.put(clazz, n); 
  51.                 } 
  52.                 Class<?> c = extensionClasses.get(n); 
  53.                 if (c == null) { 
  54.                     // 存储名称到 Class 的映射关系 
  55.                     extensionClasses.put(n, clazz); 
  56.                 } else if (c != clazz) { 
  57.                     throw new IllegalStateException("..."); 
  58.                 } 
  59.             } 
  60.         } 
  61.     } 

综上,loadClass方法操作了不同的缓存,比如cachedAdaptiveClass、cachedWrapperClasses和cachedNames等等

到这里基本上关于缓存类加载的过程就分析完了,其他逻辑不难,认真地读下来加上Debug一下都能看懂的。

总结

从设计思想上来看的话,SPI是对迪米特法则和开闭原则的一种实现。

开闭原则:对修改关闭对扩展开放。这个原则在众多开源框架中都非常常见,Spring的IOC容器也是大量使用。

迪米特法则:也叫最小知识原则,可以解释为,不该直接依赖关系的类之间,不要依赖;有依赖关系的类之间,尽量只依赖必要的接口。

那Dubbo的SPI为什么不直接使用Spring的呢,这一点从众多开源框架中也许都能窥探一点端倪出来,因为本身作为开源框架是要融入其他框架或者一起运行的,不能作为依赖被依赖对象存在。

再者对于Dubbo来说,直接用Spring IOC AOP的话有一些架构臃肿,完全没必要,所以自己实现一套轻量级反而是最优解

 本文转载自微信公众号「 架构技术专栏」,可以通过以下二维码关注。转载本文请联系 架构技术专栏公众号。

 

责任编辑:武晓燕 来源: 架构技术专栏
相关推荐

2021-09-10 08:31:19

DubboSPI框架

2021-01-09 14:03:37

Vrrp协议网关

2022-08-17 08:17:01

SPI机制接口

2023-12-19 09:24:22

LinuxBIOSUEFI

2021-05-30 07:54:24

SPI机制场景

2024-01-15 08:25:53

SPI机制JavaDubbo

2020-11-27 07:45:31

JVM垃圾回收

2018-04-24 14:34:54

机器学习机器人互联网

2021-06-29 09:47:34

ReactSetState机制

2021-06-30 07:19:36

React事件机制

2021-01-07 07:33:06

Tomcat启动工具

2011-11-30 14:35:19

JavaSPI

2020-10-05 21:46:54

线程

2023-03-04 21:31:57

大数据采集抽样式

2019-05-10 10:50:04

Spring AOPJDK动态代理CGLIB动态代理

2022-05-06 08:26:32

JavaSPI机制

2023-12-11 07:21:12

SPI机制插件

2021-09-29 06:28:13

C# 9DotnetRecord

2021-08-28 09:06:11

Dubbo架构服务

2021-06-10 07:51:07

Node.js循环机制
点赞
收藏

51CTO技术栈公众号