大模型算力荒?浪潮信息也来“掘金卖铲”虞书欣早期比基尼照片曝光!网友:她性感火辣不止眼睛大
时间:2025-03-15 12:12:34 来源:是忆晴吖网
图片来源@视觉中国刚刚过去的掘金卖铲一周
,浪潮信息发布新品OGAI(Open GenAI Infra)元脑生智,大模意在为大模型业务提供AI算力系统环境部署、型算信息算力调度及开发管理能力的力荒浪潮辣软件栈。浪潮信息作为一家以服务器为主营业务的也虞友性企业,受到来自生成式AI带来的书欣算力牵引潜力,下游客户需求旺盛 ,早期止眼但另一方面 ,比基在英伟达、尼照英特尔等供应商出口限制的片曝影响下 ,人工智能芯片普遍短缺,光网感火做软件,掘金卖铲也是大模增强市场竞争力的多一种选择
。浪潮信息高级副总裁刘军告诉钛媒体
,型算信息当前阶段仍处于大模型开发阶段,力荒浪潮辣除了缺算力外,基础模型能力还没有足够高的提升,最终呈现出来的效果也不见得会真正能投入使用
。刘军认为,算力供给解决到一定程度,基础大模型的开发能力提升到一定程度
,就具备了商业化能力 ,进而在各类场景
、应用的落地通道也就打开了。而在中国,现阶段能真正达到GPT-4的模型的还没有 ,这就意味着将应用创新能力都寄托在OpenAI上也是明显不可能
,也是不现实的。大模型也需要生产力工具据公开信息,2021年9月,浪潮信息就已经在研发大模型,面向大模型场景解决方案,支持AI芯片、服务器,以构建低时延的分布式系统
。浪潮信息发布参数量为2457亿的中文大语言模型“源1.0”
。在“源”大模型的研发过程中,浪潮信息的AI团队逐步建立了完整的从公开数据爬取到数据清洗、格式转化、数据质量评估的完整流程和工具链,并完成了5TB高质量中文数据集的清洗工作。“源”大模型的数据集和清洗经验和帮助国内不少AI团队提升了其大模型的性能表现
。在这个过程中,浪潮信息遇到了很多大模型研发应用中的问题,例如公共算力调度问题、数据清洗问题
、大模型分布式训练性能不佳等等。为此,浪潮信息团队从三个层面进行优化
:一是系统全栈性,对于涉及多团队、多环节、多流程的业务,需要系统性架构和全栈解决方案;二是兼容适配性,由于模型训练需要大量的开源工具、组件
,但存在兼容和性能方面的问题;三是性能优化的挑战,一个大的集群系统涉及的组件数以千计
,怎样优化性能是问题
。举个例子,针对于提升大模型分布式训练的计算效率,特别是在实际的AI集群环境中,可能存在GPU之间的互联带宽受限,或者AI服务器之间的网络互联带宽有限的情况,浪潮信息自2022年以来为客户将大模型训练的GPU峰值效率从30%左右提升到50%,提升GPU利用率
。而在“源”大模型研发过程中 ,针对千卡规模算力的高效调度问题,浪潮信息通过对云原生的调度系统进行了改造来大幅加速其启动速度,并重点解决了RDMA网络在容器中的接入和适配优化,从而采取构建满足大模型需求的算力调度系统;针对训练任务的长期稳定运行问题 ,浪潮信息还引入了多种对集群性能的监控手段和性能数据分析方法
。客户最关心什么但实现AIGC的能力
,除了算力资源的限制外,仍存在诸多技术难点 ,包括在模型的训练、效果测评、落地场景应用方面兼具挑战性,对普通开发者和中小企业来说更是可望不可及。整体来看,OGAI(Open GenAI Infra)元脑生智软件栈由5层架构组成 ,从L0到L4分别对应于基础设施层的智算中心OS产品
、系统环境层的PODsys产品 、调度平台层的AIStation产品、模型工具层的YLink产品和多模纳管层的MModel产品。L0层智算中心OS的定位是面向智算中心等公共算力服务平台,面向多租户场景,提供灵活多样的以裸金属为主的AI算力服务
。L1层PODsys聚焦于AI集群部署场景 ,提供了包括基础设施环境安装
、环境部署、用户管理、系统监控和资源调度一整套工具链,旨在打造一个易用、高效
、开放、兼容的智算集群系统环境部署方案
。L2层AIStation聚焦于AI开发场景,通过云原生技术对集群系统中的计算资源 、存储资源和网络资源进行统一的接入和纳管,提供了易于使用的开发环境和作业管理界面,并基于内置算力调度系统和训练稳定保障系统来实现易于接入、按需分配、弹性扩展和高效稳定的AI研发应用支撑平台
。L3层YLink聚焦于大模型的开发过程,通过集成整合浪潮信息在大模型研发过程中的工具和开源工具,为用户提供高效 、便捷与标准化的大模型开发与优化流程
。L4层MModel定位于多模型管理与服务平台
,帮助客户更好地管理和评估模型,加速模型的部署和应用
。浪潮信息人工智能与高性能应用软件部AI架构师Owen ZHU还告诉钛媒体,“现在企业面临的最大挑战是,需要用大规模硬件的基础设施才能够训练一个类似于ChatGPT同等能力的模型
,这个复杂性是固有的。”他解释,OGAI技术栈是从L0到L4层是分层解耦设计和实现的,也就是说并不用把整个OGAI技术栈提供给用户
,才能够实现大模型开发,而是对应需要实现的层级功能进行选择。如果用户只需要提供算力多租户的裸金属方案
,可能只需要L0层智算中心OS
,不用关心最终用户会怎样进行大模型开发;如果用户需要模型开发相关工具链 ,可以按需选择L3层YLink提供的各类工具进行研发生产。关于发布OGAI的初衷
,Owen ZHU指出
,“浪潮信息做这件事情,是先行者,这是由视角决定。浪潮信息服务了全球客户,包括国内也是最主要的AI应用客户群体
,能够第一时间感知到大模型市场在缺什么,遇到了哪些问题
。”从用户的角度来看,更强的算力基础设施也会倒逼需求侧进一步升级
。“做模型的不懂算力,做算力的不懂模型”
,这种情况长期存在,但很多算法的创新与硬件的发展是相辅相成,两者又需要共同发展。浪潮信息的这一做法是否切实可行 ,仍需市场来验证。(本文首发钛媒体APP,作者 | 杨丽)
-
森林狼成联盟第一秘诀是啥?有球星更要有防守男性50岁之后眉毛突然变长,说明了什么?医生:多数人被蒙在鼓里自去年10月以来首次西甲破门,法蒂结束14场联赛球荒湖人季后赛前有多强?美媒列超神数据:同期战绩西部第1+18年首队【CBA】全队五人得分上双,广东队力克山东队皇马的最终报价,24岁临期男孩姆巴佩的最后机会?夫妻世隔绝35年在深山生活,妻子彻底“野兽化”,只认得丈夫一人9.5万球迷见证!本泽马连场戴帽,皇马4哈登11分5失误,字母哥33+14,76人完败雄鹿!恩比德马克西尽力了桑葚是碱性还是酸性狂轰42+7+3!火箭新人仍被无视?归队名额没他份,乌度卡另有打算世界女排大奖赛总决赛 朱婷伤病复出首战巴西女排
上一篇:家电好物 篇十三:有娃家庭用哪种取暖器比较好?是油汀还是小太阳?善恶终有报!54岁的尹相杰,已经活成了一个“笑话”
下一篇:会有奇迹发生吗?浙江队小组出线只剩下理论可能崔康熙面子大!3名本土强援自荐加盟山东泰山,老崔大连旧部在列
下一篇:会有奇迹发生吗?浙江队小组出线只剩下理论可能崔康熙面子大!3名本土强援自荐加盟山东泰山,老崔大连旧部在列
相关内容
- ·原创 湖人的绝招,步行者根本看不懂,哈姆后边还有大招
- ·转会风向标:三镇变身恒大二队 沪上双雄官宣第五外援
- ·小刺猬的蘑菇伞
- ·姚明:世界杯中国男篮目标出线 对归化持开放态度
- ·早报:切尔西英超两连败降至第12 巴萨2-4送赫罗纳登顶西甲
- ·442评当下最佳10位组织者:厄德高、丁丁、梅西、魔笛、B费前五
- ·里弗斯被打服了?76人输球赛后主动夸奖雄鹿,他们才是冠军球队
- ·2017F1车手积分TOP榜 法拉利维特尔141分居首位
- ·卡塔尔国王:大王妃是堂妹,二王妃神似伊万卡,三王妃比他小14岁金正恩携夫人高调亮相!32岁李雪主美得真实不做作,穿搭端庄大气
- ·记者:李铁打响整顿第一枪 足球终于把整个体育行业拖下水
- ·周琦:为国出战是至高荣誉 目标争取两战全胜
- ·四个字的歌曲
- ·亚冠冲突后浙江队遭重罚 4人被禁赛 莱昂纳多姚均晟禁赛8场
- ·媒体人:最重磅的消息快来了 体坛反腐即将达到最高潮
- ·玩呢?台湾女网友发2000字长文控诉霍华德玩弄感情
- ·横店炮王霍建华什么梗
最新内容
推荐内容
- ·卖果丹皮女子偶遇字画巨匠出摊获赠招牌,网友:摊位上就数招牌最值钱
- ·继续当“黑店”的多特蒙德,如何才能保持争冠决心?
- ·转战美国!民间:梅西加盟迈阿密国内 披10号球衣
- ·原创 0-0,两大黑马对飙!中超风云突变,保级队一夜闯进亚冠区
- ·国夷易近网评女生曝光地铁大叔:收集曝光不能触碰法律“红线”
- ·假面骑士:看起来待遇最惨的一辉,前后都是神仙,不过自己父母双全7岁女孩因一张笑脸走红,父母拒绝了百万的签约,两年后现状!
- ·酷暑已经至!天下入夏历程图看炎天脚步到哪里了
- ·追逐欧文?先别急 摇摇欲坠的詹眉更需要湖人担心穿内衣就算了,输血管我也忍了,那个戴口罩的,真拿观众当傻子呢
- ·《变形金刚:超能勇士崛起》长城脚下首映!杨紫琼为首次登场的角色配音
- ·怯夫又试训了一位大五后场球员?他有点歇业版库里的模样?
热点内容
- ·离开76人,揭露肮脏内幕!哈登为自己正名,莫雷成众矢之的少儿不宜和擦边球有何区别?家长总是分不清,许多国漫被迫下架
- ·首发登场,巴黎队长马尔基尼奥斯解锁代表球队400场里程碑
- ·罗马诺:年薪超4亿欧,利雅得新月正式报价梅西!
- ·玫瑰花男人可以喝吗?男人喝玫瑰花茶的功效与作用
- ·欧冠 | 多特蒙德力克米兰 拉齐奥胜凯尔特人42天阵亡25000人,2万亿美元打水漂,专家:这一仗打醒了全世界
- ·水果都有哪些水果
- ·普尔今日10投0中 比赛期间与勇士球员发展教练发生争吵
- ·玻利甲惊现42分钟超长补时 6名裁判人员被停职接受调查
- ·湖人三分6中0仍领先!里夫斯爆砍22分,老詹3犯,哈利伯顿仅7+6
- ·官方:季后赛4月9日开战 总决赛采用7局4胜制