通信行业点评:算力调度:未来算力网络的重要拼图
算力资源有限,调度优化问题紧迫。OpenAI 此前在技术博客《Scaling Kubernetes to2,500 nodes》中提到,OpenAI k8s 集群从500 nodes 扩展到2500 nodes 时遇到诸多存储、网络和资源初始化问题,通过可视化监控工具Datadog 发现ETCD(一种Key-Value 存储服务)写数据存在几百毫秒延迟,list API 被频繁调用、Fluentd 和DataDog 频繁侵占资源等问题。
什么是算力调度?在云计算中,资源调度是一个非确定性多项式优化问题,往往会出现“拆东墙补西墙”这样的情况,因此云计算的算力调度必须考虑每个算力资源请求的需求边界,比如OpenAI 团队使用“balloons”占位策略解决资源排队问题:
用一个低优先级pod 占着整个节点,要用节点的时候被自动驱逐掉;使用污点策略手动分配每个训练请求能使用的节点。
(资料图)
GPU 超算集群中,暴露出的不只是算力调度问题。在此前对英伟达AI 超算的研究中,我们的结论是:通信网络是制约数据中心算力高低的关键因素。在多线程并行计算下,通信成为制约算力的短板,只要有一条交换链路出现网络阻塞或丢包,就会产生I/O 延迟;又如GH200 新增显存互联功能,我们认为,相对于无显存互联的超算,GH200 对API server 的并发访问量是指数级增长,将对硬件资源调度提出更高挑战。
多点硬件部署监控效率更高。我们注意到,OpenAI 在针对网络监控进行优化时发现Prometheus 这类监控系统时常会导致OOM(Out of Memory,内存溢出),从而不得不削减查询频率;每次初始化pod,Prometheus 都要重写WAL(Write-aheadlogging,预写式日志)拉长启动时间。我们认为,以上问题都可以通过嵌入式的多点硬件层监控系统避免上述问题。我们认为,在传统的计算式和I/O 式云计算中,外部串接监控服务器即可满足监控需求,而GPU 集群时代,需要并接部署“联邦集群”并进行不同监控服务器的功能划分,最后进行北向汇聚,有望提升监控采集效率、降低超算本身的资源侵占。
网络可视化技术在国内外均处于探索迭代过程中,国内相关厂商的潜在机会巨大。
在北美,目前主流的监控工具是Netscout、Prometheus、Datadog 等,都是基于在超算本地化部署;但在多点硬件部署的AI 超算中,软硬件结合的厂商成长性有望更为充分,经过多年经验积累的相关国内DPI 厂商,形成了高容量下的数据监控能力,有望成为全球算力调优的上游关键角色。
投资建议:
1)重视GPU 超算集群中交换网络性能的重要性,而光通信是现有技术下几乎无法替代的交换网络方案,关注光通信:中际旭创、新易盛、天孚通信、太辰光、腾景科技、德科立、联特科技、华工科技、源杰科技、剑桥科技;算力设备:中兴通讯、紫光股份、锐捷网络、菲菱科思、恒为科技、工业富联、寒武纪、震有科技。
2)重视网络可视化及算力资源调优策略的软硬件厂商,该品种目前存在较大预期差,关注恒为科技、浩瀚深度、中新赛克。
风险提示:AI 发展不及预期,算力需求不及预期。
知前沿,问智研。智研咨询是中国一流产业咨询机构,十数年持续深耕产业研究领域,提供深度产业研究报告、商业计划书、可行性研究报告及定制服务等一站式产业咨询服务。专业的角度、品质化的服务、敏锐的市场洞察力,专注于提供完善的产业解决方案,为您的投资决策赋能。
转自国盛证券有限责任公司 研究员:宋嘉吉/黄瀚/赵丕业/邵帅
标签:
通信行业点评:算力调度:未来算力网络的重要拼图
2023-07-11
四维图新:公司目前基于视觉图像源的地图数据更新技术已应用至全国范围地图更新中,自有采集比重已大大缩小,能够实现天级/小时级的数据要素的更新和发布
2023-07-11
今年上半年全国居民消费价格同比上涨0.7% 物价运行保持基本平稳
2023-07-11
武汉工程大学暑期“三下乡”体育公益课助力青少年发展
2023-07-11
4G确实够用!中国工程院院士邬贺铨:5G网速比4G快7倍 但体验几乎没差
2023-07-11
2023年河北秦皇岛中考各类学校录取控制分数线
2023-07-11
中文在线集团董事长童之磊受邀出席2023世界人工智能大会
2023-07-11
王嘉尔全黑LOOK酷帅有型 《舌尖上的中国》导演分享感官之旅
2023-07-11
【镜鉴文明】画”说文明——内蒙古自治区文明创建公益广告展(第117期)
2023-07-11
穿Prada的女足!Prada成为中国国家女子足球队官方合作伙伴
2023-07-11
四维图新:公司目前基于视觉图像源的地图数据更新技术已应用至全国范围地图更新中,自有采集比重已大大缩小,能够实现天级/小时级的数据要素的更新和发布
今年上半年全国居民消费价格同比上涨0.7% 物价运行保持基本平稳
武汉工程大学暑期“三下乡”体育公益课助力青少年发展
4G确实够用!中国工程院院士邬贺铨:5G网速比4G快7倍 但体验几乎没差
2023年河北秦皇岛中考各类学校录取控制分数线
中文在线集团董事长童之磊受邀出席2023世界人工智能大会
王嘉尔全黑LOOK酷帅有型 《舌尖上的中国》导演分享感官之旅
【镜鉴文明】画”说文明——内蒙古自治区文明创建公益广告展(第117期)
穿Prada的女足!Prada成为中国国家女子足球队官方合作伙伴
天津海教园大学科技园开园
西部7省(区)康复治疗师共聚四川同谋行业发展
阿斯汗:期待早日代表广州队出场 我们内蒙古足球比过去强多了
历险故事融入传统文化润童心 儿童剧《大运河漂流记》在京演出
化工行业报价预警:山东振坤新材料氯磺酸价格8周暴涨86.67%(20230710)
氧化铝概念有那些上市公司?(2023/7/10)
东珠生态07月10日获沪股通增持10.5万股
“妈妈,你去死”,孩子说狠话时,你的回答很重要
人力资源选用育留措施(人力资源选育用留分别代表哪些方面)
中央网信办:加强“自媒体”管理 完善粉丝数量管理措施
7月10日基金净值:南方多利增强债券A最新净值1.1512,跌0.05%
老相识!周琦与范子铭曾在19-20赛季作为队友共同为新疆效力
高质量发展在申城|长三角国创中心,是“孵化器”,也是“试验田”
隔绝电影深度解析(隔绝好看么)
酒驾“冒头”就打!济南交警“护航2023”行动3天查处245起酒醉驾
10天发送1939万人次!广铁暑运客流持续火爆
形意拳和八极拳哪个威力大(形意拳和八极拳哪个凶简介介绍)
无惧“烤验”!赣州一批重点民生项目刷新“进度条”
盐城首个消防救援实践教学基地成立
加计扣除10%进项税账务处理 加计扣除
- 聚焦文理工交叉、产学研融合,师生校友共话发展
- 柳青将代理波音中国总裁 现任总裁谢利嘉计划年内退休
- 中央网信办:加强“自媒体”管理 严防假冒仿冒行为
- 把公职人员的头像PS成“艳照” 四名犯罪嫌疑人在江西被抓
- 自然资源部:严禁通过不动产登记将违法用地合法化
- 历史性超越! 欧盟风光发电量首次超过化石燃料发电
- 晶核魔偶师转哪个好
- 贵州雷山通报一起火情:农户木屋过火2栋,起火原因正调查中
- 小男孩尿尿发痒怎么办(小男孩尿尿的地方)
- “数治”乡村更美好
- 北京一导游中暑身亡,当天工作情况细节披露!这些短板得补→
- 科创板过会未拿文企业19家
- 大连金石滩冰雪嘉年华免费吗
- 我国综合立体交通网持续完善
- 世界第一个"零生育率"国家诞生,为啥年轻人不结婚、也不愿生娃?
- 降价3000万,深圳一知名豪宅成交!
- 2023年07月10日(20至30公斤)仔猪价格行情走势
- bim工程师可靠性高吗,bim工程师可靠性
- 重庆富侨足浴多少钱一位(老婆在重庆富侨足浴按擵上班会做对不起我的事情吗)
- 最高温已达35.1℃!厦门迎今年第四个高温日
- 2011天籁公爵(天籁公爵和天籁有什么区别)
- 丰收“新”盛景|麦浪滚滚 喜获丰收
- 如何插入分页符excel(如何插入分页符)
- 【视频】任意变道强行超车酿事故,交警判定:全责!
- 王宝强执导并主演!电影《八角笼中》票房突破8亿元
- 乌克兰国防部承认实施对克里米亚大桥的袭击
- 燕京啤酒还未放弃蔡徐坤
- 中国贵州与哥伦比亚纳里尼奥省建立友好省关系
- 世界上真的有狗人吗(世上有狗和人配出来的人吗)
- 抑郁症的真正元凶:脑损伤
- 就业服务离校不离线
- 公募基金费率改革怎么做?证监会工作安排来了
- 欧洲企业组团来汉寻商机,今年武汉新设外企数量增长11.9%
- 80后最火最精辟的经典句子,句句有哲理!
- 建行河南省分行左金辉:携手中原证券 提供全方位的金融服务
- 中越边境河口口岸上半年出入境客货运量持续上升
- 2023年生态文明贵阳国际论坛发布《贵阳宣言》
- 中国中免上半年实现营收358.58亿元,净利润38.64亿元
- 高雅文化内涵满溢送上祝福让心荡漾
- 九年建设解决全线“拦路虎” 丽香铁路将于今年内建成通车
- 寻访藏书阁|四库全书藏七阁 七阁寻幽说四库
- 科技走进课堂 让学生感受科技的力量
- 整式分式的概念与区别 整式
- 教学论文不知如何选题?这篇文献有实用的方法
- 蔡昉:户籍制度改革可以立竿见影刺激消费 1.8亿农民工或可释放消费2万亿
- 小区外的街道旁垃圾堆成山 因处于插花地带一直难清理 相关部门:正在协商解决方案
- 甘肃百余头藏野驴悠闲觅食
- 支付宝、财付通收央行巨额罚单!分别罚没超 30 亿和近 30 亿,还有这 3 家金融机构!
- 通灵股份(301168):7月7日北向资金减持13.9万股
- IPO项目尚未完成,圣诺生物又拟定增募资来扩产