【父子线程传值TransmittableThreadLocal使用踩坑-及相关知识拓展】

文章目录

    • 一.业务背景
    • 二.TransmittableThreadLocal是什么?
    • 三.问题复现
      • 1.定义注解@DigitalAngel
      • 2.定义切面
      • 3.TransmittableThreadLocal相关
      • 4.线程池配置信息
      • 5.Controller
      • 6.Service
      • 7.测试结果
      • 8.问题分析
      • 9 解决办法及代码改造
      • 10.最终测试:
    • 四.与 ThreadLocal 和 InheritableThreadLocal 的对比
    • 五.TransmittableThreadLocal典型应用场景
    • 六.小结

一.业务背景

  • 这版本我有一个需求是这样的:要针对项目里面总计归纳有6个接口,要去判断有没有天使用户角色:“DIGITAL_ANGEL”,来做特殊化查询逻辑。如果登录用户有这天使用户角色,那么看到的数据范围更大。否则就只能看到登录用户自己权限范围内的数据。不知道我描述的这业务逻辑是否清楚了0.0,小伙伴们能get到这意思吗…
  • 这6个接口是其他同事做的(已上线),此次需求交给我来做了,因为是已上线接口,我尽量做到业务侵入最小化,植入我此次需求最小代码。

好的,然后我的设计思路是这样来做的:

  1. 定义注解@DigitalAngel,放到6个请求接口上
  2. 定义切面切注解,然后切面里面统一判断当前登录用户是否有"DIGITAL_ANGEL"角色,有则把这个布尔值存入TransmittableThreadLocal(因为有些接口里面开了子线程,涉及到父子线程传值)
  3. 在接口业务层面,拿到TransmittableThreadLocal里面的布尔值,如果为true ?执行我们的天使用户查询逻辑 :执行历史逻辑

一顿操作猛如虎,开始开发环境测试,刚开始都喜笑颜开,小小需求,随便拿捏。 后面等我多测几次发现不对劲了,出现了诡异的事情,切面里面判断某个人有这角色,布尔值为true,然后子线程里面里面竟然出现了false!!!,然后这问题还是偶发,有个时候又频率高有个时候又没问题,我都一脸懵逼了,课余赶紧补充知识。。。

二.TransmittableThreadLocal是什么?

  • ‌TransmittableThreadLocal(TTL)是阿里巴巴提供的一个工具包中的类,主要用于解决线程池场景下的变量传递问题。‌
    它继承自InheritableThreadLocal,提供了一种机制,使得在线程池中的线程能够传递和继承ThreadLocal变量的值‌。
  • TTL与普通的ThreadLocal不同,普通的ThreadLocal变量在线程之间是隔离的,每个线程只能访问自己的ThreadLocal变量,无法在线程切换时传递变量值。而TTL允许在线程切换时保留原始线程的变量值,并在新线程中恢复这些值,使得新线程能够继续使用原始线程的变量‌。
  • TTL的核心工作原理基于Java的ThreadLocal机制,并通过扩展InheritableThreadLocal来实现。在任务提交到线程池之前,会将当前线程的ThreadLocal变量值保存到一个中间结构中。当任务在子线程中执行时,会从这个中间结构中恢复这些变量值并设置到子线程的ThreadLocal副本中,从而实现跨线程传递‌

三.问题复现

因为我们是内网开发,不方便给大家直观展示,我把实现思路这里简单写一遍,一样的可以复现。

1.定义注解@DigitalAngel

@Target(ElementType.METHOD)
@Retention(RetentionPolicy.RUNTIME)
public @interface DigitalAngel {String memo();
}

2.定义切面

@Aspect
@Component
@Slf4j
public class RoleCheckAspect {@Around("@annotation(com.tuling.tulingmall.annotation.DigitalAngel)")public Object checkRole(ProceedingJoinPoint joinPoint) throws Throwable {// 模拟角色检查逻辑,这里检查是否拥有 "DIGITAL_ANGEL" 角色boolean hasRole = Math.random() > 0.5;log.info("Aspect: 检查角色,是否拥有DIGITAL_ANGEL角色:{} " , hasRole);RoleContext.setHasRole(hasRole);try {return joinPoint.proceed();} finally {// 清理 ThreadLocal,避免内存泄漏RoleContext.clear();}}
}

3.TransmittableThreadLocal相关

public class RoleContext {private static final TransmittableThreadLocal<Boolean> hasDigitalAngelRole = new TransmittableThreadLocal<>();public static void setHasRole(Boolean hasRole) {hasDigitalAngelRole.set(hasRole);}public static Boolean getHasRole() {return hasDigitalAngelRole.get();}public static void clear() {hasDigitalAngelRole.remove();}
}

4.线程池配置信息

为了让问题更容易复现:

  1. 使用线程池中的线程复用问题:可以增加线程池的复用频率和负载,减少线程重新创建的机会。通过设置线程池的核心线程数较小,同时增加任务提交量,让线程池更频繁地复用同一个线程,这样在上下文未正确传播时更容易复现问题。
  2. 控制 TransmittableThreadLocal 的传递与清理:在一些关键位置手动调用 RoleContext.clear(),或者模拟在子线程中上下文值被修改或清理的场景。
  3. 延迟任务执行:可以通过引入一定的延迟或模拟复杂任务,使得线程的生命周期较长,以增加上下文丢失的几率
  4. 多个异步任务并行运行:提交大量异步任务给线程池,增加并发量,让上下文丢失更容易出现

我把核心线程数变小,同时提交10个异步任务,然后给任务引入一定的延迟来增大问题复现概率

@Configuration
public class ThreadPoolConfiguration {@Bean("commonPool")public ExecutorService commonThreadPoolExecutor(){return new TulingMallThreadPoolExecutor("测试用例专用线程池",2,5).getLhrmsThreadPoolExecutor();}
}

5.Controller

@ApiOperation("测试-TransmittableThreadLocal")
@DigitalAngel(memo = "标注该接口需要校验是否存在DIGITAL_ANGEL角色")
@RequestMapping(value = "/testTransmittableThreadLocal", method = RequestMethod.POST)
public CommonResult<String> testTransmittableThreadLocal() {testCaseService.testTransmittableThreadLocal();return CommonResult.success("成功");
}

6.Service

	@Autowired@Qualifier("commonPool")private ExecutorService tulingThreadPoolExecutor;@Overridepublic void testTransmittableThreadLocal() {// 主线程获取角色信息Boolean hasRole = RoleContext.getHasRole();log.info("主线程: 获取角色信息,是否拥有 'DIGITAL_ANGEL' 角色: " + hasRole);// 提交多个任务到自定义线程池for (int i = 0; i < 10; i++) {CompletableFuture.runAsync(() -> {try {// 增加任务的执行时间,模拟长时间运行的任务TimeUnit.MILLISECONDS.sleep((long) (Math.random() * 1000));// 在子线程中获取角色信息Boolean childThreadHasRole = RoleContext.getHasRole();log.info("子线程: 获取角色信息,是否拥有 'DIGITAL_ANGEL' 角色: " + childThreadHasRole);} catch (InterruptedException e) {e.printStackTrace();}}, tulingThreadPoolExecutor);}}

7.测试结果

正常我们如果没有仔细了解过TransmittableThreadLocal,是不是认为都使用TransmittableThreadLocal了,在切面里面(主线程)都打印有这个DIGITAL_ANGEL角色编码了,那么子线程拿到的肯定是true对吧。但是上面代码经测试会出现下面的异常情况:切面和主线程判断是有这个角色编码的,可是我们的子线程获取的都是false,认为它没有天使用户角色!从而造成我们的业务逻辑查的有问题!!!
在这里插入图片描述

8.问题分析

然后去查资料,总结了精辟的点。遇到的问题与 线程池复用 和 TransmittableThreadLocal 的传播机制 有关。
TransmittableThreadLocal 可以在父子线程之间传递值,但需要满足一些前提条件,比如子线程是在父线程创建后立即启动的。如果业务逻辑涉及到线程池或者异步执行任务,可能会出现以下两种情况:

  1. 线程池线程复用问题
    在线程池中,线程是被复用的,因此当某个线程完成任务后会被放回线程池,而不会立即销毁。接下来的任务可能会复用这个线程。在这种情况下,如果你没有正确清理 TransmittableThreadLocal,线程复用后可能获取到之前任务的值,或者无法获取到期望的值

解决方案:手动清理 TransmittableThreadLocal 的值。确保每次在线程池中使用线程执行任务时,清理上一次任务残留的数据。

try {// 在子线程中执行任务,并获取 TTL 中的布尔值
} finally {// 任务执行结束,清理 TransmittableThreadLocalTransmittableThreadLocal.clear();
}
  1. 子线程启动时机问题
    TransmittableThreadLocal 的值只能在子线程创建时从父线程中拷贝。如果子线程是在父线程存储值之前启动的,那么子线程可能无法获取父线程的 ThreadLocal 值。如果有异步任务,尤其是使用 @Async 或其他异步编程模型的情况下,线程的启动顺序可能会影响值的传递。

解决方案:确保在启动子线程之前,父线程已经将值存入 TransmittableThreadLocal。可以通过控制异步任务的触发时机来避免这一问题。

// 在主线程中存入 TransmittableThreadLocal 的值
boolean roleExists = checkRole();
TransmittableThreadLocal.set(roleExists);// 确保子线程在设置完值后启动
executorService.submit(() -> {// 子线程中获取值Boolean value = TransmittableThreadLocal.get();// 执行业务逻辑
});
  1. 异步框架或线程池管理问题
    如果你使用了异步框架(比如 Spring 的 @Async)或自定义的线程池管理逻辑,确保这些线程池或任务管理器支持 TransmittableThreadLocal 的上下文传播。默认的线程池可能不支持自动传播上下文数据,导致无法在子线程中获取到父线程的数据。

解决方案:确保线程池或任务管理框架使用了 TTL 的增强版线程池(TTLExecutorService 等),这可以保证 TransmittableThreadLocal 的值在线程池中正确传播。

// 使用 TTL 版本的线程池来保证父子线程之间的值传递
ExecutorService ttlExecutorService = TtlExecutors.getTtlExecutorService(executorService);ttlExecutorService.submit(() -> {Boolean value = TransmittableThreadLocal.get();// 子线程中业务逻辑
});

很明显,我们上面的代码问题符合上面“异步框架或线程池管理问题”。我们的线程池没有使用TTL 的增强版线程池!!!

  1. 总结如下3点:
  • 线程池复用 导致的值残留或丢失。
  • 子线程启动时机 导致的值未传递。
  • 线程池的上下文传播 未正确设置。
    可以从这几方面排查和修正你的问题,确保 TransmittableThreadLocal 在父子线程之间正确传播值。

9 解决办法及代码改造

因为我们项目里面的线程池是放在了Spring容器中,然后有其他场景也在使用,为了影响最小化。直接在开异步任务的时候,CompletableFuture传入 TTL 的增强版线程池(TTLExecutorService )。

  @Autowired@Qualifier("commonPool")private ExecutorService tulingThreadPoolExecutor;@Overridepublic void testTransmittableThreadLocal() {// 主线程获取角色信息Boolean hasRole = RoleContext.getHasRole();log.info("主线程: 获取角色信息,是否拥有 'DIGITAL_ANGEL' 角色: " + hasRole);// 提交多个任务到自定义线程池for (int i = 0; i < 10; i++) {CompletableFuture.runAsync(() -> {try {// 增加任务的执行时间,模拟长时间运行的任务TimeUnit.MILLISECONDS.sleep((long) (Math.random() * 1000));// 在子线程中获取角色信息Boolean childThreadHasRole = RoleContext.getHasRole();log.info("子线程: 获取角色信息,是否拥有 'DIGITAL_ANGEL' 角色: " + childThreadHasRole);} catch (InterruptedException e) {e.printStackTrace();}}, TtlExecutors.getTtlExecutorService(tulingThreadPoolExecutor));}}

10.最终测试:

请求了10次,每次结果都是主线程认为没有角色权限则子线程也没有角色权限,主线程认为有角色权限则子线程也有角色权限。
在这里插入图片描述

四.与 ThreadLocal 和 InheritableThreadLocal 的对比

在这里插入图片描述

  1. 传统 ThreadLocal 的局限性
    ThreadLocal 是 Java 提供的线程本地存储工具,用于每个线程存储和访问自己的独立变量副本。但是在多线程环境下,尤其是线程池场景中,ThreadLocal 有以下局限性:
  • 线程隔离:每个线程有自己独立的 ThreadLocal 值,子线程不能继承父线程中的 ThreadLocal 值。
  • 线程复用问题:在线程池中,线程会被复用,导致某些上下文信息(例如 ThreadLocal值)在不同任务之间泄漏,或未能正确传递到子线程中。
  1. InheritableThreadLocal 的不足
    InheritableThreadLocal 是 ThreadLocal 的一个子类,它允许子线程继承父线程的 ThreadLocal 值,但它有以下几个问题:
  • 线程池场景不适用:InheritableThreadLocal 只能在父线程创建子线程时传递 ThreadLocal值,对于线程池中的线程复用场景无效,因为线程池中的线程在父线程运行之前就已创建。
  • 线程复用导致的值污染:线程池中的线程在执行完一个任务后会被重复利用,如果 InheritableThreadLocal
    的值没有被清理干净,可能导致数据污染。
  1. TransmittableThreadLocal 的原理
    TransmittableThreadLocal 解决了 ThreadLocal 和 InheritableThreadLocal 在多线程和线程池环境中的局限性,能够在父线程和子线程(包括线程池中的线程)之间传递 ThreadLocal 的值。
    其核心思想是通过任务提交的时机,在任务进入线程池执行前,主动捕获当前线程的 ThreadLocal 值并在子线程中恢复,从而确保上下文的传递。
    核心技术原理:
    1.拦截任务提交:在任务提交给线程池时,TransmittableThreadLocal 会拦截任务并记录当前父线程中的 ThreadLocal 值。这是通过对 ExecutorService、Runnable、Callable 等任务接口的增强来实现的。
    2.线程上下文的传递:当任务在子线程中执行时,TransmittableThreadLocal 将会把父线程的 ThreadLocal 上下文传递到子线程,并在子线程执行任务时还原这些上下文。
    3.任务执行完成后的清理:任务执行结束后,TransmittableThreadLocal 会清理子线程中的上下文,避免这些上下文在线程复用时污染其他任务。

  2. 工作流程
    以下是 TransmittableThreadLocal 在多线程场景下的典型工作流程:
    1.父线程设置 ThreadLocal 值:在父线程中使用 TransmittableThreadLocal 设置一些上下文信息,例如用户信息、请求 ID 等。
    2.任务提交到线程池:父线程将任务提交给线程池执行,此时 TransmittableThreadLocal 会通过 capture() 方法捕获当前线程的 ThreadLocal 值。
    3.子线程执行任务:在线程池中的某个子线程执行任务之前,TransmittableThreadLocal 的 replay() 方法会在子线程中恢复父线程的 ThreadLocal 值。
    4.任务执行完成后清理上下文:任务执行结束后,TransmittableThreadLocal 的 restore() 方法会清理子线程中的 ThreadLocal 上下文,防止上下文污染。

五.TransmittableThreadLocal典型应用场景

TransmittableThreadLocal 特别适用于以下场景:

  • 分布式追踪:在分布式系统中,传递请求上下文信息(如 Trace ID)到不同线程,保证日志或追踪信息的一致性。
  • 异步任务处理:在异步任务执行中,需要传递用户会话信息或安全上下文到不同线程。 线程池环境下的上下文传递:解决线程池复用带来的
  • ThreadLocal 上下文传递问题。

六.小结

  • TransmittableThreadLocal 是对 ThreadLocal 和 InheritableThreadLocal
    的增强,解决了线程池复用和父子线程上下文传递问题。它在异步编程和多线程环境中,尤其是线程池场景下,有很大的应用价值,适用于需要传递线程上下文信息的各种场景,如分布式追踪、会话管理、日志追踪等。
  • 使用异步编程的时候,我们肯定会接触到父子线程传值问题,如果不使用TransmittableThreadLocal就得自己手动设置到每个子线程里面去,很是麻烦。如果使用TransmittableThreadLocal需要注意线程池复用、子线程启动时机、线程池的上下文传播以及清理ThreadLocal避免内存泄漏哦!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/444993.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

02复写零

复写零 我们先进行异地复写&#xff1a;代码如下 public class Test {public static void main(String[] args) {int []array {1,0,2,3,0,4};duplicateZeros(array);}public static void duplicateZeros(int[] arr) {int [] elemnew int[arr.length];for(int cur0,dest0;des…

QD1-P17 HTML 下拉框标签(select、option)

本节学习 HTML 常用标签&#xff1a;select和option ‍ 本节视频 www.bilibili.com/video/BV1n64y1U7oj?p17 ‍ 知识点1&#xff1a;select标签用法 演示 ​​ HTML <select name"city"><option>北京</option><option>上海</opti…

新版Win32高级编程教程-学习笔记01:应用程序分类

互联网行业 算法研发工程师 目录 新版Win32高级编程教程-学习笔记01&#xff1a;应用程序分类 控制台程序 强烈注意 窗口程序 启动项 程序入口函数 库程序 静态库 动态库程序 几种应用程序的区别 控制台程序 本身没有窗口&#xff0c;其中的doc窗口&#xff0c;是管…

【通信协议讲解】单片机基础重点通信协议解析与总结(IIC,CAN,MODBUS...)

目录 一.IIC总线 基础特性&#xff1a; 配置特性&#xff1a; 时序特性&#xff1a; 二.SPI总线 基础特性&#xff1a; 配置特性&#xff1a; 时序特性&#xff1a; 三.串口通信 基础特性&#xff1a; 配置特性&#xff1a; 时序特性&#xff1a; 四.CAN总线 基础特性…

三款GIS工具多角度对比:免费的倾斜摄影OSGB/3Dtiles编辑转换发布平台

GIS数据处理工具在现代技术与应用中扮演着至关重要的角色&#xff0c;它们不仅是连接原始地理信息与可分析、可视化数据的桥梁&#xff0c;更是推动地理信息系统&#xff08;GIS&#xff09;在各个行业领域深入发展与应用不可或缺的关键工具。选择一款合适的工具直接关系到数据…

HttpURLConnection学习

介绍 HttpURLConnection类是位于java.net包下继承了URLConnection类的一个抽象类&#xff0c;每个 HttpURLConnection 实例都用于发出单个请求。 URL HttpURLConnection的使用需要依赖URL类&#xff0c;URL类位于java.net包下&#xff0c;有很多种构造方法。 HttpURLConnect…

AI引起用人格局变动,个人如何应对这一趋势

大家好&#xff0c;我是Shelly&#xff0c;一个专注于输出AI工具和科技前沿内容的AI应用教练&#xff0c;体验过300款以上的AI应用工具。关注科技及大模型领域对社会的影响10年。关注我一起驾驭AI工具&#xff0c;拥抱AI时代的到来。 人工智能的发展带来的就业结构变革&#xf…

论文笔记:D-vlog 用于抑郁症检测的多模态数据集

整理了AAAI2022 D-vlog: Multimodal Vlog Dataset for Depression Detection 论文的阅读笔记 背景方法特征提取模型 实验数据集主实验不同模态的性能性别的影响 背景 以往关于抑郁症检测的工作大多集中在实验室环境下对抑郁症个体的检测&#xff0c;难以在实践中推广。本文提出…

图解C#高级教程(五):枚举器和迭代器

本章主要介绍 C# 当中枚举器、可枚举类型以及迭代器相关的知识。 文章目录 1. 枚举器和可枚举类型2. IEnumerator 和 IEnumerable 接口2.1 IEnumerator 接口2.2 IEnumerable 接口 3. 泛型枚举接口4. 迭代器4.1 使用迭代器创建枚举器4.2 使用迭代器创建可枚举类4.3 迭代器作为属…

消峰限流有哪几种方式?

消峰限流的方式 业务视角 验证码回答问题环节 技术视角 消息队列异步化用户请求 限流&#xff0c;对流量进行层层过滤 nginx 层限流&#xff0c; 一是控制速率 limit_req 漏桶算法 limit_req_zone $binary_remote_addr zonemylimit:10m rate2r/s; server { location / { lim…

leetcode链表(三)-反转链表

题目 . - 力扣&#xff08;LeetCode&#xff09; 给你单链表的头节点 head &#xff0c;请你反转链表&#xff0c;并返回反转后的链表。 思路 首先定义一个cur指针&#xff0c;指向头结点&#xff0c;再定义一个pre指针&#xff0c;初始化为None。 然后就要开始反转了&…

其他浏览器可以联网,但edge不能联网

问题描述&#xff1a; 今早edge无法上网&#xff0c;检测网络连接正常&#xff0c;而且其他chrome&#xff0c;Firefox和360浏览器都可以上网。 解决方案&#xff1a; 注意&#xff1a;为防止是代理问题&#xff0c;可以在扩展中禁用后再试试 如果没有代理或者禁用代理也不…

基于SpringBoot摄影师分享交流社区【附源码】

基于SpringBoot摄影师分享交流社区 效果如下&#xff1a; 系统首页界面 用户注册界面 作品信息页面 公告资讯页面 管理员登录页面 管理员功能界面 作品类别界面 作品信息界面 研究背景 随着互联网技术的快速发展&#xff0c;数字摄影技术的普及使得越来越多的摄影爱好者渴望…

Python、R语言Lasso、Ridge岭回归、XGBoost分析Airbnb房屋数据:旅游市场差异、价格预测|数据分享...

全文链接&#xff1a;https://tecdat.cn/?p37839 分析师&#xff1a;Kefan Yu 在大众旅游蓬勃发展的背景下&#xff0c;乡村旅游已成为推动乡村经济、社会和文化发展的关键力量。当前&#xff0c;乡村旅游接待设施主要以招待所、小宾馆和农家乐等形式存在。然而&#xff0c;一…

企业远控私有化部署解决方案-内信互联

内信互联&#xff08;DoLink&#xff09;&#xff0c;是点量软件新推出的企业私有化远程控制系统解决方案。很多朋友对这个产品还不是很了解&#xff0c;今天点量小编就对其基础功能做一些详细说明&#xff0c;如果您想快速拥有自己的企业私有远程控制系统&#xff0c;欢迎联系…

基于SpringBoot+Vue+MySQL的企业招聘管理系统

系统展示 用户前台界面 管理员后台界面 企业后台界面 系统背景 在当今数字化转型的大潮中&#xff0c;企业对于高效、智能化的人力资源管理系统的需求日益增长。招聘作为人力资源管理的首要环节&#xff0c;其效率与效果直接影响到企业的人才储备与竞争力。传统的招聘方式不仅耗…

摩托车一键启动兼容机械钥匙点火

摩托车无钥匙一键启动 工作原理 摩托车无钥匙一键启动系统的工作原理主要依赖于RFID无线射频技术和车辆身份编码识别系统。这种技术能够通过小型化、小功率的射频天线来识别车辆的身份&#xff0c;并与遥控系统结合&#xff0c;实现双重射频系统和双重防盗保护。这意味着&…

《深度学习》【项目】OpenCV 答题卡识别 项目流程详解

目录 一、项目上半部分 1、定义展示图像函数 2、预处理 运行结果&#xff1a; 3、轮廓检测并绘制 运行结果&#xff1a; 4、排序轮廓 5、定义排序点函数 6、透视变换 1&#xff09;定义透视变换处理函数 2&#xff09;执行透视变换 运行结果&#xff1a; 7、二值化…

信息安全工程师(28)机房安全分析与防护

前言 机房安全分析与防护是一个复杂而细致的过程&#xff0c;涉及到物理安全、环境控制、电力供应、数据安全、设备管理、人员管理以及紧急预案等多个方面。 一、机房安全分析 1. 物理安全威胁 非法入侵&#xff1a;未经授权的人员可能通过门窗、通风口等进入机房&#xff0c;…

解决无法安装“vue.volar“扩展,跟vscode版本不兼容问题

问题&#xff1a;安装volar插件的时候提示跟vscode版本不兼容 解决方案 1、进入VSCode插件市场&#xff0c;搜索Vue.volar&#xff08;直达链接&#xff1a;volar下载界面&#xff09; 2、点击download Extension&#xff08;下载插件&#xff09; 3、下载.vsix文件完成后&a…