Bendi新闻
>
.NET8极致性能优化-线程

.NET8极致性能优化-线程

5月前

前言

首先来看下,为什么性能会一直持续性优化。.NET8引入的SSE-XMM(16字节)Register和AVX-YMM(32字节)Register是关键,传统的Register一般指令集层次能移动的最多只有8位,就算是最新的x64系统。但是SSE和AVX改变了这种局面,它们能一次性移动64位系统的一倍乃至四倍,这就是优化的关键。

之前的多篇文章展示了很多.NET8的性能优化,基本上都是核心级的CLR/JIT优化,包括了VMZeroingCHRLExceptionNon_GC ,BranchGCReflectionAOTEnumDateTime等等。但是漏掉了一个较为重要的东西:线程。本篇来看下.NET8里面的线程优化。

ThreadStatic

.NET在新的版本中,对线程,并发,并行,异步等方面做出了非常大的改进。比如ThreadPool完全重写,异步方法基础部分的完全重写,ConcurrentQueue队列的完全重写等等。.NET8在这些的基础上,进行了更为深思熟虑的和更为有影响力的改进。比如ThreadStatic。

.NET运行时里面运用本地数据和线程的关联,就是本地线程存储(TLS)。在托管代码上实现这一点,最常用的方法就是用[ThreadStatic]属性注解一个静态字段(当然这里还有个用途更高级的ThreadLocal<T>),这样就会导致.NET运行时会把这个静态字段的存储复制到每个线程,而不是全局的进程上面。

例如以下ThreadStaitc属性注解的用法

private static int s_onePerProcess;
[ThreadStatic]private static int t_onePerThread;

在.NET8之前访问被TheadStatic标记的字段,需要一个JIT的非内联辅助方法CORINFO_HELP_GETSHARED_NONGCTHREADSTATIC_BASE_NOCTOR。它的原型实际上就是JIT_GetSharedNonGCThreadStaticBase。如下:

#include <optsmallperfcritical.h>HCIMPL2(void*, JIT_GetSharedNonGCThreadStaticBase, DomainLocalModule *pDomainLocalModule, DWORD dwClassDomainID){    //为了便于观看,此处省略    return HCCALL1(JIT_GetNonGCThreadStaticBase_Helper, pMT);}HCIMPLEND

因为这个方法本身是有优化空间的,经过dotnet/runtime#82973 and dotnet/runtime#85619它的函数本体被内联到了调用者当中了。省略了函数调用以及跳转的成本。通过一个基准测试来看下这个效果。

// dotnet run -c Release -f net7.0 --filter "*" --runtimes net7.0 net8.0// dotnet run -c Release -f net7.0 --filter "*" --runtimes nativeaot7.0 nativeaot8.0using BenchmarkDotNet.Attributes;using BenchmarkDotNet.Running;BenchmarkSwitcher.FromAssembly(typeof(Tests).Assembly).Run(args);[HideColumns("Error", "StdDev", "Median", "RatioSD")]public partial class Tests{    [ThreadStatic]    private static int t_value;
[Benchmark] public int Increment() => ++t_value;}

测试结果如下,提升明显:

方法运行时平均值比率
Increment.NET 7.08.492 ns1.00
Increment.NET 8.01.453 ns0.17

同样的通过

dotnet/runtime#84566 和 dotnet/runtime#87148为.NET AOT做的一个优化,提升同样明显。

方法运行时平均值比率
IncrementNativeAOT 7.02.305 ns1.00
IncrementNativeAOT 8.01.325 ns0.57

ThreadPool

TheadPool优化在于线程池方面,之前老版本的.NET基本上都是通过封装Windows线程池,然后通过托管代码调用。但是在.NET6里面开始.NET运行时实现了自己的托管线程池,也就是说新版的.NET包含了两个线程池。分别为托管调用的windows线程池,以及托管代码自己实现的托管线程池。现在,在.NET8里面可以自由切换这两个线程池,你想使用哪个就用哪个,以提升程序的性能。

我们来看下,这个过程。首先新建一个.NET8.0控制台应用程序,代码如下

static void Main(string[] args){    Task.Run(() => Console.WriteLine(Environment.StackTrace)).Wait();    Console.ReadLine();}

并在 .csproj 中添加 <PublishAot>true</PublishAot>。先运行下它,结果显示如下:

at System.Environment.get_StackTrace()at ThreadPool_.Program.<>c.<Main>b__0_0() in E:\Visual Studio Project\Test_\ThreadPool_\Program.cs:line 7at System.Threading.ExecutionContext.RunFromThreadPoolDispatchLoop(Thread threadPoolThread, ExecutionContext executionContext, ContextCallback callback, Object state)at System.Threading.Tasks.Task.ExecuteWithThreadLocal(Task& currentTaskSlot, Thread threadPoolThread)at System.Threading.ThreadPoolWorkQueue.Dispatch()at System.Threading.PortableThreadPool.WorkerThread.WorkerThreadStart()

PortableThreadPool这个就是.NET6以来新增的托管线程池操控的代码。我们下面再来看下Windows线程池方面,把上面代码进行AOT编译

dotnet publish -c Release -r win-x64

我们运行下路径\bin\Release\net8.0\win-x64\publish里的exe文件,可以看到如下:

at System.Environment.get_StackTrace() + 0x21at ThreadPool_.Program.<>c.<Main>b__0_0() + 0x9at System.Threading.ExecutionContext.RunFromThreadPoolDispatchLoop(Thread, ExecutionContext, ContextCallback, Object) + 0x3dat System.Threading.Tasks.Task.ExecuteWithThreadLocal(Task&, Thread) + 0xccat System.Threading.ThreadPoolWorkQueue.Dispatch() + 0x289at System.Threading.WindowsThreadPool.DispatchCallback(IntPtr, IntPtr, IntPtr) + 0x45

很明显的看到这里是WindowsThreadPool(Windows线程池调用),而上面的则是PortableThreadPool(.NET运行时自己实现的托管线程池)。这里有个疑问,为什么AOT可以看到Windows线程池,因为AOT是本地预编译机器码,它不包含托管代码,所以只能Windows自带线程池调用。但是如果是托管代码,不是AOT化,那么可以看到原汁原味的托管线程池调用。

通过issuse:dotnet/runtime#85373,Windows上运行的.NET8应用程序可以选择任何一个线程池。

可以在 .csproj 中的 <PropertyGroup/> 中,添加 :

<UseWindowsThreadPool>false</UseWindowsThreadPool>

false表示不使用Windows线程池,True表示使用。其它的,也可以设置环境变量,来使用Windows线程池,设置0则不使用。

DOTNET_ThreadPool_UseWindowsThreadPool=1

目前来说,没有确切的证据证明哪个线程池好用,或者效率更高。但是开发者可以使用上面的选项来进行自己的选择,有一个测试就是在Windows线程池在比较大的机器上的IO扩展性不太好。如果你的应用程序已经大量的使用了Windows线程池,那么可以通过以上设置为另一个线程池操作也是可以的。此外,线程池经常被阻塞,Windows线程池对此有更多的处理,也能更有效的比托管线程处理的更好。如以下代码:

// dotnet run -c Release -f net8.0
using System.Diagnostics;var sw = Stopwatch.StartNew();var barrier = new Barrier(Environment.ProcessorCount * 2 + 1);for (int i = 0; i < barrier.ParticipantCount; i++){ ThreadPool.QueueUserWorkItem(id => { Console.WriteLine($"{sw.Elapsed}: {id}"); barrier.SignalAndWait(); }, i);}
barrier.SignalAndWait();Console.WriteLine($"Done: {sw.Elapsed}");

以上创建了很多工作项,所有的工作项都会被阻塞,直到所有工作项都被处理完毕。这里可以设置DOTNET_ThreadPool_UseWindowsThreadPool 为 1。看下对比的结果,显示Windows线程池处理的更好。

END



“老实人”程序员遇渣女



这里有最新开源资讯、软件更新、技术干货等内容

点这里 ↓↓↓ 记得 关注✔ 标星⭐ 哦~

微信扫码关注该文公众号作者

来源:OSC开源社区

相关新闻

多线程性能优化最大的坑,99%的人都不自知!提醒丨中国驻泰国使馆将对护照/旅行证办理程序进行优化调整此国宣布:进一步优化中国游客入境程序SpringBoot + 虚拟线程,鸟枪换大炮虚拟线程:Java的新利器?Java线程池的实现原理及其在业务中的最佳实践英特尔 N250 低功耗处理器曝光:4 核 4 线程,1.2 GHz 频率华硕官网泄露 AMD 锐龙 AI 9 HX 170 处理器:12 核 24 线程、77 TOPS AI 算力英特尔 Arrow Lake 桌面处理器 20 核与 24 核型号现身,确认不搭载超线程技术AMD R5 7235H / HS 处理器现身官网:4 核 8 线程 4.2GHz,无核显Spring Boot 3.2 和 Spring Framework 6.1添加对 Java 21、虚拟线程和 CRaC 的支持这些年背过的面试题——多线程篇英特尔 Arrow Lake-S 处理器规格泄露:最高 24 核 32 线程,原生支持雷电 4Redis7 单线程VS多线程并发王座易主?Java 21 虚拟线程强势崛起,Go & Kotlin还稳得住吗 | 盘点原来,这才是 JDK 推荐的线程关闭方式中国零售企业全球化征程的关键一跃热烈祝贺中国科学院自动化研究所程龙研究员荣登IEEE Xplore封面作者!43.7%增速领跑 奇瑞进一步擦亮技术招牌 开启全球化新征程从素质教育到素质学科化,少儿编程教育迎来「大浪淘沙」后的全新格局?如何落地AI编程和可观测智能化?怎么从 0 到 1 训练大模型?阿里多位专家出席 ArchSummit 现身说法Stability AI开年首个大模型:专写代码,支持18种编程语言,上下文100K,苹果笔记本离线就能跑竞赛起跑线:尔湾学区官方认证的科技编程夏令营开始报名国内数智化程度最高,今日交付!
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。