.netCore HttpClient正确用法

  • A+
所属分类:.NET技术
摘要

        HttpClient 这个组件从.net framework延续到.net Core,在使用时稍微不注意,将引发性能问题。实际上文档已提及HttpClient 用于在应用程序的整个生存期内实例化一次并重复使用。


.netCore HttpClient正确用法

        HttpClient 这个组件从.net framework延续到.net Core,在使用时稍微不注意,将引发性能问题。实际上文档已提及HttpClient 用于在应用程序的整个生存期内实例化一次并重复使用。

HttpClient is intended to be instantiated once and re-used throughout the life of an application. Instantiating an HttpClient class for every request will exhaust the number of sockets available under heavy loads.This will result in SocketException errors.

让我们再来验证下,我们使用HttpClient请求这个网站https://www.yicai.com 首页20次。

.netCore HttpClient正确用法

当某个同学是这么用的

public static async Task Main(string[] args)
{
     Console.WriteLine("Starting connections");
     for (int i = 0; i < 20; i++)
     {
         await RequestByUsing();
     }
     Console.WriteLine("Connections done");
     Console.ReadLine();
}

private static async Task RequestByUsing()
{
     using (var client = new HttpClient())
     {
         var result = await client.GetAsync(TEST_URL);
         Console.WriteLine(result.StatusCode);
     }
}

运行测试程序

dotnet run --project ./HttpclientTestapp/HttpclientTestapp.csproj

.netCore HttpClient正确用法

下载TCPViewer, 也可以使用NETSTAT,程序进程还在运行中,但还是 TCP TIME_WAIT这么多个 Remote Address 与之前我们PING是类似的,我们等待1分钟还释放。

实际影响生产环境性能。

.netCore HttpClient正确用法

什么是TIME_WAIT, 请回顾TCP的状态图, 图来自https://www4.cs.fau.de/Projects/JX/Projects/TCP/tcpstate.html

.netCore HttpClient正确用法

TCP Connection Termination Procedure(TCP连接终止过程)

.netCore HttpClient正确用法

它们处于TIME_WAIT状态,这意味着连接已在一端(我们的)关闭,但我们仍在等待是否有任何额外的数据包进入,因为它们可能已在网络上的某个地方延迟。我们不可以停止程序。
当我们的代码修改为

/// <summary>
/// static_client
/// </summary>
private static readonly HttpClient static_client = new HttpClient();
/// <summary>
/// TEST_URL
/// </summary>
private static readonly string TEST_URL = "https://www.yicai.com";

/// <summary>
/// HttpClient test main
/// </summary>
/// <see cref="https://docs.microsoft.com/zh-cn/dotnet/api/system.net.http.httpclient?view=netcore-2.2"/>
/// <param name="args">args</param>
/// <returns></returns>
public static async Task Main(string[] args)
{
     Console.WriteLine("Starting connections");
     for (int i = 0; i < 20; i++)
     {
         await StaticClientWay();
     }
     Console.WriteLine("Connections done");
     Console.ReadLine();
}

private static async Task StaticClientWay()
{
     var result = await static_client.GetAsync(TEST_URL);
     Console.WriteLine(result.StatusCode);
}

再次监控TCP请求,已没有TIME_WAIT,只有Established,由于此域名解析IP变化

.netCore HttpClient正确用法

完整Testing代码

目前微服务的时代,我们系统中服务之间相互通讯,还是有HTTP方式。当socket达到4000时,在峰值时将超过 5000 个,有效地压垮了服务器上的可用资源,从而导致服务崩溃。实施更改后,正在使用的套接字从平均超过 4000 个下降到始终小于 400 个,并且通常在 100 个左右。

.netCore HttpClient正确用法

我们一直在努力解决的socket耗尽问题令人失望,我们不能低估这个错误是多么不明显。多年来,我们习惯于释放实现IDisposable的对象,许多重构工具(如R#和CodeRush)实际上会警告你。在这种情况下,处理HttpClient是错误的事情。

1. 使用 HttpClient 时静态化
2. 请勿在使用dispose of or wrap的 HttpClient,除非明确地要查找特定行为。

除了HttpClient还有一些组件可以考虑

https://github.com/tmenier/Flurl

https://github.com/restsharp/RestSharp

https://github.com/App-vNext/Polly

由于这个Http连接始终保持连接状态,所以当请求地址的DNS发生更新的时候并不会应用到这个Http连接上。这个问题在微服务,高可用时代更加常见

[Singeton HttpClient doesn't respect DNS changes](https://github.com/dotnet/corefx/issues/11224), 博友解决方案


今天先到这儿,希望对云原生,技术领导力, 企业管理,系统架构设计与评估,团队管理, 项目管理, 产品管管,团队建设 有参考作用 , 您可能感兴趣的文章:
领导人怎样带领好团队
构建创业公司突击小团队
国际化环境下系统架构演化
微服务架构设计
视频直播平台的系统架构演化
微服务与Docker介绍
Docker与CI持续集成/CD
互联网电商购物车架构演变案例
互联网业务场景下消息队列架构
互联网高效研发团队管理演进之一
消息系统架构设计演进
互联网电商搜索架构演化之一
企业信息化与软件工程的迷思
企业项目化管理介绍
软件项目成功之要素
人际沟通风格介绍一
精益IT组织与分享式领导
学习型组织与企业
企业创新文化与等级观念
组织目标与个人目标
初创公司人才招聘与管理
人才公司环境与企业文化
企业文化、团队文化与知识共享
高效能的团队建设
项目管理沟通计划
构建高效的研发与自动化运维
某大型电商云平台实践
互联网数据库架构设计思路
IT基础架构规划方案一(网络系统规划)
餐饮行业解决方案之客户分析流程
餐饮行业解决方案之采购战略制定与实施流程
餐饮行业解决方案之业务设计流程
供应链需求调研CheckList
企业应用之性能实时度量系统演变

如有想了解更多软件设计与架构, 系统IT,企业信息化, 团队管理 资讯,请关注我的微信订阅号:

.netCore HttpClient正确用法

作者:Petter Liu
出处:http://www.cnblogs.com/wintersun/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。 该文章也同时发布在我的独立博客中-Petter Liu Blog。