新闻中心
Golang如何实现并发HTTP请求_Golang HTTP请求并发处理方法
Go语言通过goroutine和channel实现高效并发HTTP请求,示例中使用多个goroutine并行执行fetch函数并通过channel接收结果;为避免资源耗尽,可引入sync.WaitGroup与协程池控制并发数;同时需设置超时机制,推荐使用context.WithTimeout进行请求级超时控制,确保程序健壮性。

在Go语言中,实现并发HTTP请求非常简单且高效,得益于其原生支持的goroutine和channel机制。通过合理使用这些特性,可以轻松地同时发起多个HTTP请求,提升程序性能,特别是在需要获取多个独立资源时。
使用Goroutine并发发起HTTP请求
每个HTTP请求可以在独立的goroutine中执行,从而实现并发。标准库net/http本身是线程安全的,可以直接在多个goroutine中调用。
示例代码:
package main
<p>import (
"fmt"
"io/ioutil"
"net/http"
)</p><p>func fetch(url string, ch chan<- string) {
resp, err := http.Get(url)
if err != nil {
ch <- fmt.Sprintf("Error: %s", url)
return
}
defer resp.Body.Close()
body, _ := ioutil.ReadAll(resp.Body)
ch <- fmt.Sprintf("URL: %s, Status: %d, Body size: %d", url, resp.StatusCode, len(body))
}</p><p>func main() {
urls := []string{
"<a href="https://www.php.cn/link/5f69e19efaba426d62faeab93c308f5c">https://www.php.cn/link/5f69e19efaba426d62faeab93c308f5c</a>",
"<a href="https://www.php.cn/link/98a733901e53052474f2320d0a3a9473">https://www.php.cn/link/98a733901e53052474f2320d0a3a9473</a>",
"<a href="https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735">https://www.php.cn/link/c2148796071914983ed6b6e9dbbff735</a>",
}</p><pre class='brush:php;toolbar:false;'>ch := m
ake(chan string, len(urls)) // 缓冲channel避免阻塞
for _, url := range urls {
go fetch(url, ch)
}
for range urls {
fmt.Println(<-ch)
}}
灵感PPT
AI灵感PPT - 免费一键PPT生成工具
308
查看详情
在这个例子中,每个fetch函数运行在一个独立的goroutine中,结果通过channel返回。主函数等待所有结果返回后打印输出。
控制并发数量:使用WaitGroup与协程池思想
如果请求量很大,直接为每个请求启动goroutine可能导致系统资源耗尽。可以通过sync.WaitGroup配合固定数量的工作协程来控制并发数。
package main
<p>import (
"fmt"
"net/http"
"sync"
)</p><p>func worker(jobs <-chan string, results chan<- string, wg *sync.WaitGroup) {
defer wg.Done()
for url := range jobs {
resp, err := http.Get(url)
if err != nil {
results <- fmt.Sprintf("Failed: %s", url)
continue
}
results <- fmt.Sprintf("OK: %s, Status: %d", url, resp.StatusCode)
resp.Body.Close()
}
}</p><p>func main() {
urls := []string{
"<a href="https://www.php.cn/link/4d2fe2e8601f7a8018594d98f28706f2">https://www.php.cn/link/4d2fe2e8601f7a8018594d98f28706f2</a>",
"<a href="https://www.php.cn/link/98a733901e53052474f2320d0a3a9473">https://www.php.cn/link/98a733901e53052474f2320d0a3a9473</a>",
"<a href="https://www.php.cn/link/7ac09a39f051ff62eefbafd363b1bbb3">https://www.php.cn/link/7ac09a39f051ff62eefbafd363b1bbb3</a>",
"<a href="https://www.php.cn/link/dc17d9b4862d86f8054735577c04462a">https://www.php.cn/link/dc17d9b4862d86f8054735577c04462a</a>",
"<a href="https://www.php.cn/link/0ad3140ed0cf59e84008db87c8c1106c">https://www.php.cn/link/0ad3140ed0cf59e84008db87c8c1106c</a>",
}</p><pre class='brush:php;toolbar:false;'>const numWorkers = 3
jobs := make(chan string, len(urls))
results := make(chan string, len(urls))
var wg sync.WaitGroup
// 启动工作协程
for i := 0; i < numWorkers; i++ {
wg.Add(1)
go worker(jobs, results, &wg)
}
// 发送任务
for _, url := range urls {
jobs <- url
}
close(jobs)
// 等待完成并关闭结果通道
go func() {
wg.Wait()
close(results)
}()
// 收集结果
for result := range results {
fmt.Println(result)
}}
这种方式能有效限制同时运行的goroutine数量,避免过多网络连接带来的压力。
超时控制与错误处理
并发请求中必须设置超时,防止某个请求长时间阻塞整个流程。可以通过自定义http.Client来实现。
client := &http.Client{
Timeout: 5 * time.Second,
}
resp, err := client.Get(url)
也可以使用context实现更灵活的超时控制:
ctx, cancel := context.WithTimeout(context.Background(), 3*time.Second) defer cancel() <p>req, _ := http.NewRequestWithContext(ctx, "GET", url, nil) resp, err := http.DefaultClient.Do(req)</p>
结合context可以在请求级别控制超时、取消等行为,更适合复杂场景。
基本上就这些。Go的并发模型让HTTP请求处理变得简洁而强大,关键是合理控制资源、处理错误,并利用channel协调数据流动。不复杂但容易忽略细节。
以上就是Golang如何实现并发HTTP请求_Golang HTTP请求并发处理方法的详细内容,更多请关注其它相关文章!
# json
# go
# golang
# go语言
# js
# 邀约客户推广网站有哪些
# 界首网站推广教程
# 平山通用响应式网站推广
# 湖州安吉推广营销
# 嘉兴网站建设优惠
# 揭阳长沙seo优化价格
# 庆阳seo优化排名
# 网站建设搭建步骤
# 肇庆网站建设技术支持
# 淄博优质关键词排名公示
# 长时间
# 推荐使用
# 如何在
# 在这个
# 是在
# 资源管理
# 可以通过
# 如何实现
# 加载
# 多个
# 标准库
# 并发请求
# ai
相关栏目:
【
科技资讯46185 】
【
网络学院92790 】
相关推荐:
网站内容防复制粘贴的实现策略与局限性
b站赚钱渠道_b站收益来源
不同用户不同价格! 索尼开启账户个性化定价测试
在Socket.IO连接中实现Access Token自动更新与动态重连
可靠CSGO开箱平台解析 CSGO开箱网合集
excel如何生成目录 excel一键生成工作表目录超链接
CSS布局中意外空白:解决padding-top导致的顶部间距问题
R星幕后开发视频泄露 包含《GTA6》等多款大作
知音漫客正版漫画平台_知音漫客官网账号登录
AO3网页版合集入口 Archive of Our Own同人作品浏览指南
批改网学生版PC登录 批改网官网登录系统入口
夸克浏览器网页版最新地址 夸克浏览器官方入口合集
sublime如何配置Go语言开发环境_sublime搭建Golang编译运行系统
Win11怎么开启卓越性能模式 Win11电源选项启用高性能释放硬件潜力【方法】
PrimeNG Sidebar背景色自定义指南:CSS覆盖与主题化实践
品牌机怎么重装系统 联想/戴尔/惠普笔记本恢复出厂系统教程
“音游” × “怪文书” 题材的节奏冒险游戏 《晕晕电波症候群》确定于2026年4月发售!
钉钉视频会议声音异常如何处理 钉钉会议音频修复技巧
妖精动漫免费平台 妖精动漫官网资源观看网址
拼多多视频播放卡顿如何处理 拼多多视频播放优化技巧
中兴Axon42Ultra怎样在文件App筛图_iPhone中兴Axon42Ultra文件App筛图【图片筛选】
微信怎么把收藏的内容分类管理 微信收藏内容标签分类方法
c++如何使用Catch2编写单元测试_c++简洁易用的BDD风格测试框架
微博网页版主页入口 微博官方网站免登录访问
Flexbox布局实践:实现粘性导航栏与底部固定页脚
12306几点到几点不能订票? | 官方最新系统维护时间全解析
Golang如何实现Web文件静态资源服务器_Golang静态资源服务器开发与实践
C++ typeid如何获取类型信息_C++ RTTI运行时类型识别用法
地铁跑酷免费秒玩入口链接 地铁跑酷小游戏免费秒玩网站
荣耀Play7T运行卡顿解决_荣耀Play7T性能优化
谷歌学术网站直达地址 谷歌学术搜索网页版一键进入
outlook中文官网入口地址 outlook官方中文版直达首页链接
QQ邮箱网页版入口登录 QQ邮箱在线邮箱官方通道
QQ邮箱网页版入口页面 QQ邮箱在线登录入口官网
在Pyomo中实现基于变量的条件约束:Big-M方法详解
消息称三星明年 2 月正式发布 HBM4,与 SK 海力士同台竞技
Win11怎么设置开机NumLock亮 Win11修改注册表InitialKeyboardIndicators值
J*aScript对象创建方式_J*aScript设计模式应用
Win11如何开启讲述人功能 Win11屏幕阅读器(讲述人)开启与关闭【教程】
qq游戏网页版直接玩_qq游戏免下载快速入口
qq游戏跨平台入口_qq游戏多设备同步登录
C++如何实现异步操作_C++11使用std::future和std::async进行异步编程
J*aScript中高效清空DOM列表元素:解决for循环中断与任务管理问题
苹果手机指南针不准怎么校准 传感器校准方法详解【建议收藏】
在J*a中如何开发简易博客标签推荐系统_博客标签推荐项目实战解析
qq浏览器如何查看和导出已保存的密码 qq浏览器密码管理器数据备份教程
LINUX下如何进行磁盘分区_fdisk与parted工具在LINUX中的使用对比
如何在低配置电脑上搭建轻量级J*a环境_占用更小的环境选择技巧
蛙漫安全无毒 官方认证的绿色入口
Django通过AJAX异步上传图片并保存至模型的完整指南


2025-12-02
浏览次数:次
返回列表
ake(chan string, len(urls)) // 缓冲channel避免阻塞
for _, url := range urls {
go fetch(url, ch)
}
for range urls {
fmt.Println(<-ch)
}