新闻中心

Golang如何实现并发HTTP请求_Golang HTTP请求并发处理方法

2025-12-02
浏览次数:
返回列表
Go语言通过goroutine和channel实现高效并发HTTP请求,示例中使用多个goroutine并行执行fetch函数并通过channel接收结果;为避免资源耗尽,可引入sync.WaitGroup与协程池控制并发数;同时需设置超时机制,推荐使用context.WithTimeout进行请求级超时控制,确保程序健壮性。

golang如何实现并发http请求_golang http请求并发处理方法

在Go语言中,实现并发HTTP请求非常简单且高效,得益于其原生支持的goroutine和channel机制。通过合理使用这些特性,可以轻松地同时发起多个HTTP请求,提升程序性能,特别是在需要获取多个独立资源时。

使用Goroutine并发发起HTTP请求

每个HTTP请求可以在独立的goroutine中执行,从而实现并发。标准库net/http本身是线程安全的,可以直接在多个goroutine中调用。

示例代码:

package main
<p>import (
"fmt"
"io/ioutil"
"net/http"
)</p><p>func fetch(url string, ch chan<- string) {
resp, err := http.Get(url)
if err != nil {
ch <- fmt.Sprintf("Error: %s", url)
return
}
defer resp.Body.Close()
body, _ := ioutil.ReadAll(resp.Body)
ch <- fmt.Sprintf("URL: %s, Status: %d, Body size: %d", url, resp.StatusCode, len(body))
}</p><p>func main() {
urls := []string{
"<a href="https://www.php.cn/link/5f69e19efaba426d62faeab93c308f5c">https://www.php.cn/link/5f69e19efaba426d62faeab93c308f5c</a>",
"<a href="https://www.php.cn/link/98a733901e53052474f2320d0a3a9473">https://www.php.cn/link/98a733901e53052474f2320d0a3a9473</a>",
"<a href="https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735">https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735</a>",
}</p><pre class='brush:php;toolbar:false;'>ch := make(chan string, len(urls)) // 缓冲channel避免阻塞

for _, url := range urls {
    go fetch(url, ch)
}

for range urls {
    fmt.Println(<-ch)
}

}

灵感PPT 灵感PPT

AI灵感PPT - 免费一键PPT生成工具

灵感PPT 308 查看详情 灵感PPT

在这个例子中,每个fetch函数运行在一个独立的goroutine中,结果通过channel返回。主函数等待所有结果返回后打印输出。

控制并发数量:使用WaitGroup与协程池思想

如果请求量很大,直接为每个请求启动goroutine可能导致系统资源耗尽。可以通过sync.WaitGroup配合固定数量的工作协程来控制并发数。

package main
<p>import (
"fmt"
"net/http"
"sync"
)</p><p>func worker(jobs <-chan string, results chan<- string, wg *sync.WaitGroup) {
defer wg.Done()
for url := range jobs {
resp, err := http.Get(url)
if err != nil {
results <- fmt.Sprintf("Failed: %s", url)
continue
}
results <- fmt.Sprintf("OK: %s, Status: %d", url, resp.StatusCode)
resp.Body.Close()
}
}</p><p>func main() {
urls := []string{
"<a href="https://www.php.cn/link/4d2fe2e8601f7a8018594d98f28706f2">https://www.php.cn/link/4d2fe2e8601f7a8018594d98f28706f2</a>",
"<a href="https://www.php.cn/link/98a733901e53052474f2320d0a3a9473">https://www.php.cn/link/98a733901e53052474f2320d0a3a9473</a>",
"<a href="https://www.php.cn/link/7ac09a39f051ff62eefbafd363b1bbb3">https://www.php.cn/link/7ac09a39f051ff62eefbafd363b1bbb3</a>",
"<a href="https://www.php.cn/link/dc17d9b4862d86f8054735577c04462a">https://www.php.cn/link/dc17d9b4862d86f8054735577c04462a</a>",
"<a href="https://www.php.cn/link/0ad3140ed0cf59e84008db87c8c1106c">https://www.php.cn/link/0ad3140ed0cf59e84008db87c8c1106c</a>",
}</p><pre class='brush:php;toolbar:false;'>const numWorkers = 3
jobs := make(chan string, len(urls))
results := make(chan string, len(urls))
var wg sync.WaitGroup

// 启动工作协程
for i := 0; i < numWorkers; i++ {
    wg.Add(1)
    go worker(jobs, results, &wg)
}

// 发送任务
for _, url := range urls {
    jobs <- url
}
close(jobs)

// 等待完成并关闭结果通道
go func() {
    wg.Wait()
    close(results)
}()

// 收集结果
for result := range results {
    fmt.Println(result)
}

}

这种方式能有效限制同时运行的goroutine数量,避免过多网络连接带来的压力。

超时控制与错误处理

并发请求中必须设置超时,防止某个请求长时间阻塞整个流程。可以通过自定义http.Client来实现。

client := &http.Client{
    Timeout: 5 * time.Second,
}
resp, err := client.Get(url)

也可以使用context实现更灵活的超时控制:

ctx, cancel := context.WithTimeout(context.Background(), 3*time.Second)
defer cancel()
<p>req, _ := http.NewRequestWithContext(ctx, "GET", url, nil)
resp, err := http.DefaultClient.Do(req)</p>

结合context可以在请求级别控制超时、取消等行为,更适合复杂场景。

基本上就这些。Go的并发模型让HTTP请求处理变得简洁而强大,关键是合理控制资源、处理错误,并利用channel协调数据流动。不复杂但容易忽略细节。

以上就是Golang如何实现并发HTTP请求_Golang HTTP请求并发处理方法的详细内容,更多请关注其它相关文章!


# json  # go  # golang  # go语言  # js  # 邀约客户推广网站有哪些  # 界首网站推广教程  # 平山通用响应式网站推广  # 湖州安吉推广营销  # 嘉兴网站建设优惠  # 揭阳长沙seo优化价格  # 庆阳seo优化排名  # 网站建设搭建步骤  # 肇庆网站建设技术支持  # 淄博优质关键词排名公示  # 长时间  # 推荐使用  # 如何在  # 在这个  # 是在  # 资源管理  # 可以通过  # 如何实现  # 加载  # 多个  # 标准库  # 并发请求  # ai 


相关栏目: 【 科技资讯46185 】 【 网络学院92790


相关推荐: 网站内容防复制粘贴的实现策略与局限性  b站赚钱渠道_b站收益来源  不同用户不同价格! 索尼开启账户个性化定价测试  在Socket.IO连接中实现Access Token自动更新与动态重连  可靠CSGO开箱平台解析 CSGO开箱网合集  excel如何生成目录 excel一键生成工作表目录超链接  CSS布局中意外空白:解决padding-top导致的顶部间距问题  R星幕后开发视频泄露 包含《GTA6》等多款大作  知音漫客正版漫画平台_知音漫客官网账号登录  AO3网页版合集入口 Archive of Our Own同人作品浏览指南  批改网学生版PC登录 批改网官网登录系统入口  夸克浏览器网页版最新地址 夸克浏览器官方入口合集  sublime如何配置Go语言开发环境_sublime搭建Golang编译运行系统  Win11怎么开启卓越性能模式 Win11电源选项启用高性能释放硬件潜力【方法】  PrimeNG Sidebar背景色自定义指南:CSS覆盖与主题化实践  品牌机怎么重装系统 联想/戴尔/惠普笔记本恢复出厂系统教程  “音游” × “怪文书” 题材的节奏冒险游戏 《晕晕电波症候群》确定于2026年4月发售!  钉钉视频会议声音异常如何处理 钉钉会议音频修复技巧  妖精动漫免费平台 妖精动漫官网资源观看网址  拼多多视频播放卡顿如何处理 拼多多视频播放优化技巧  中兴Axon42Ultra怎样在文件App筛图_iPhone中兴Axon42Ultra文件App筛图【图片筛选】  微信怎么把收藏的内容分类管理 微信收藏内容标签分类方法  c++如何使用Catch2编写单元测试_c++简洁易用的BDD风格测试框架  微博网页版主页入口 微博官方网站免登录访问  Flexbox布局实践:实现粘性导航栏与底部固定页脚  12306几点到几点不能订票? | 官方最新系统维护时间全解析  Golang如何实现Web文件静态资源服务器_Golang静态资源服务器开发与实践  C++ typeid如何获取类型信息_C++ RTTI运行时类型识别用法  地铁跑酷免费秒玩入口链接 地铁跑酷小游戏免费秒玩网站  荣耀Play7T运行卡顿解决_荣耀Play7T性能优化  谷歌学术网站直达地址 谷歌学术搜索网页版一键进入  outlook中文官网入口地址 outlook官方中文版直达首页链接  QQ邮箱网页版入口登录 QQ邮箱在线邮箱官方通道  QQ邮箱网页版入口页面 QQ邮箱在线登录入口官网  在Pyomo中实现基于变量的条件约束:Big-M方法详解  消息称三星明年 2 月正式发布 HBM4,与 SK 海力士同台竞技  Win11怎么设置开机NumLock亮 Win11修改注册表InitialKeyboardIndicators值  J*aScript对象创建方式_J*aScript设计模式应用  Win11如何开启讲述人功能 Win11屏幕阅读器(讲述人)开启与关闭【教程】  qq游戏网页版直接玩_qq游戏免下载快速入口  qq游戏跨平台入口_qq游戏多设备同步登录  C++如何实现异步操作_C++11使用std::future和std::async进行异步编程  J*aScript中高效清空DOM列表元素:解决for循环中断与任务管理问题  苹果手机指南针不准怎么校准 传感器校准方法详解【建议收藏】  在J*a中如何开发简易博客标签推荐系统_博客标签推荐项目实战解析  qq浏览器如何查看和导出已保存的密码 qq浏览器密码管理器数据备份教程  LINUX下如何进行磁盘分区_fdisk与parted工具在LINUX中的使用对比  如何在低配置电脑上搭建轻量级J*a环境_占用更小的环境选择技巧  蛙漫安全无毒 官方认证的绿色入口  Django通过AJAX异步上传图片并保存至模型的完整指南 

搜索