分享好友 资讯首页 频道列表

AI系统如何重塑智能时代的基础

2024-10-25 14:3620

随着技术的飞速发展,AI系统正变得越来越复杂和强大,它如何塑造我们的未来呢?让我们一起探索这个充满潜力的领域。

想象一下,如果人工智能(AI)是一栋摩天大楼,那么AI系统就是支撑这座大楼的坚实地基。它不仅连接着底层的硬件设施,还支撑着上层的应用程序,是AI时代的中流砥柱。

一、基本概念

从类比的角度理解 AI 系统:AI 时代连接硬件和上层应用的中间层软硬件基础设施。

因此在部分语境中,又有人称为 AI Infra 人工智能的基础设施,但是因为基础设施更偏向于底层硬件、集群等内容,而 AI 系统是多的是强调让 AI 执行起来的系统体系结构,因此更愿意称包括软硬件的内容为 AI 系统。

传统本地部署时代,三大基础软件(数据库、操作系统、中间件)实现控制硬件交互、存储管理数据、网络通信调度等共性功能,抽象并隔绝底层硬件系统的复杂性,让上层应用开发者能够专注于业务逻辑和应用功能本身的创新实现。

云时代同理,形成了 IaaS、PaaS、SaaS 三层架构,其中 PaaS 层提供应用开发环境和基础的数据分析管理服务。类比来看,我们认为,进入 AI 时代也有承担类似功能的、连接算力和应用的基础设施中间层即 AI 系统,提供基础模型服务、赋能模型微调和应用开发。

二、详细定义

开发者一般通过编程语言 Python 和 AI 开发框架(例如 PyTorch、MindSpore 等)API 编码和描述以上 AI 模型,声明训练作业和部署模型流程。由最开始 AlexNet 是作者直接通过 CUDA 实现网络模型,到目前有通过 Python 语言灵活和轻松调用的框架,到大家习惯使用 HuggingFace 进行神经网络语言模型训练,背后是系统工程师贴合实际需求不断研发新的工具,并推动深度学习生产力提升的结果。

但是这些 AI 编程语言和 AI 开发框架应对自动化机器学习、强化学习等多样执行方式,以及细分的应用场景显得越来越低效,不够灵活,需要用户自定义一些特殊优化,没有好的工具和系统的支撑,这些问题一定程度上会拖慢和阻碍算法工程师研发效率,影响算法本身的发展。因此,目前开源社区中也不断涌现针对特定应用领域而设计的框架和工具,例如 Hugging Face 提供语言预训练模型 ModelZoo 和社区,FairSeq 自然语言处理中的序列到序列模型开发套件和MMDetection 物体检测套件,针对自动化机器学习设计的 NNI 加速库等,进而针对特定领域模型应用负载进行定制化设计和性能优化,并提供更简化的接口和应用体验。

由于不同领域的输入数据格式不同,预测输出结果不同,数据获取方式不同,造成模型结构和训练方式产生非常多样的需求,各家公司和组织不断研发新的针对特定领域的 AI 开发框架或上层应用接口封装,以支持特定领域数据科学家快速验证和实现新的 AI 想法,工程化部署和批量训练成熟的模型。如 meta 推出的 Caffe 与 Torch 演化到 PyTorch,谷歌 TensorFlow 及新推出的 JAX,基于 PyTorch 构建的 HuggingFace 等。AI 开发工具与 AI 开发框架本身也是随着用户的模型构建与程序编写与部署需求不断演进。

这其中快速获取用户的原因,有一些是其提供了针对应用场景非常简化的模型操作,并提供模型中心快速微调相应的模型,有一些是因为其能支持大规模模型训练或者有特定领域模型结构的系统优化。

AI 系统自身设计挑战较高(如更大的规模、更大的超参数搜索空间、更复杂的模型结构设计),人工智能的代表性开发框架 PyTorch 是 meta 开发,后续贡献给 Linux 开源基金会;TensorFlow 是谷歌(谷歌)从 2016 年开源;华为(HUAWEI)为了避免美国全面封锁 AI 领域推出自研的 AI 框架 MindSpore。

硬件厂商围绕其设计了大量的专有 AI 芯片(如 GPU、TPU、NPU 等)来加速 AI 算法的训练微调和部署推理,微软(Microsoft)、亚马逊(Amazon)、特斯拉(Tesla)等公司早已部署数以万计的 GPU 用于 AI 模型的训练,OpenAI 等公司不断挑战更大规模的分布式模型训练。

英伟达(NVIDIA)、华为(HUAWEI)、英特尔(Intel)、谷歌(谷歌)等公司不断根据 AI 模型特点设计新的 AI 加速器芯片和对应的 AI 加速模块,如张量核 Tensor Core、脉动阵列等提供更大算力 AI 加速器。

上述从顶层的 AI 算法应用、开发框架到底层应用所介绍的 AI 全栈相关内容中则是指 AI 系统(AI System),是围绕深度学习而衍生和设计的系统,因此也叫做深度学习系统(Deep Learning System)。

但是 AI 系统很多也可以应用于机器学习算法或使用机器学习算法,例如自动化机器学习、集群管理系统等。同时这些系统设计方法具有一定的通用性,有些继承自机器学习系统或者可以借鉴用于机器学习系统。即使作为系统工程师,也需要密切关注算法和应用的演进,才能紧跟潮流设计出贴合应用实际的工具与系统。

AI系统的发展是AI领域进步的基石。随着技术的不断进步,我们可以预见,AI系统将变得更加智能和高效,为未来的创新和突破提供强大的支持。这不仅是技术的胜利,更是人类智慧的体现。让我们拭目以待,AI系统将如何继续塑造我们的世界?

本文由 @章鱼AI小丸子 原创发布于人人都是产品经理。未经作者许可,禁止转载

题图来自 Unsplash,基于CC0协议

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务

举报 0
收藏 0
打赏 0
评论 0
中新健康丨一批新项目落地 重庆市沙坪坝区竞逐生命健康产业新赛道
中新网重庆11月8日电 (记者 钟旖)重庆市沙坪坝区8日举行生命健康产业招商项目签约暨开园活动。总协议额35.7亿元的27个项目签约落户沙坪坝,涉及生物医药、医疗器械、数字医疗、医养康养、商贸流通等多个领域,将进一步推动沙坪坝区生物医药产业集群成势。规划占地约300亩的“上桥高性能医疗器械创新中心”(以下简称创新中心

0评论2024-11-0982

立法为人工智能行业发展系上“保险绳”
人工智能正加速改变着产业、社会和世界,成为当前国际技术竞争与规则竞争的关键领域。今年5月,全国人大常委会公布的2024年度立法工作计划将“人工智能健康发展等方面的立法项目”列入预备审议项目。国务院公布的2024年度立法工作计划中,亦明确“预备提请全国人大常委会审议人工智能法草案”。强化对人工智能的立法保障,

0评论2024-11-0984

亮出“广东方案”!中小企业数字化“链式”转型活动将于11月15日在穗召开
11月15日-18日,由工业和信息化部主办的第十九届中国国际中小企业博览会将在广州中国进出口商品交易会展馆C区举办。15日当日将在15.1馆举办重要的主题会——中小企业数字化“链式”转型活动。以制造业起家、立省、当家的广东,将数字化转型作为制造业高质量发展的关键一招。为推进数字化技术赋能制造业企业降本提质增效、增

0评论2024-11-0984

延链“它经济” 探访中国食品名城的产业“新宠”
中新网漯河11月8日电 题:延链“它经济” 探访中国食品名城的产业“新宠”作者 刘鹏 李海珠随着人们生活水平不断提高,越来越多的家庭将宠物视为重要“成员”,而与宠物相关的服务和产品也日益丰富,“它经济”产业增长迅速。近年来,河南漯河以“食品+”延长产业链,以科技提升价值链,在宠物食品“新赛道”上发力打造新的

0评论2024-11-0993

9 家上市公司的收购、并购重组消息,究竟是馅饼还是陷阱?
导读最近,东方大国天楹中标了宁夏的垃圾处置项目,合同金额超过5300万元,这一消息无疑让人对环保行业的市场竞争格局充满了好奇。随着环保意识的提升,垃圾处理项目的争夺战愈演愈烈,究竟这家企业是如何在激烈的竞争中脱颖而出的?继续往下看,带你深入了解!东方大国天楹中标宁夏垃圾处置项目据最新公告显示,东方大国天

0评论2024-11-0985

未来能源产业领域的新成果!这场创新创业大赛圆满结束
11月8日,第六届盛创39创新创业大赛决赛在徐行举行。来自国家级科研院所以及科创企业的6个科创项目进行路演,展示了新能源电池、清洁能源、半导体研究等方向的研究成果,用科技前沿能源成果助力徐行“聚能小镇”建设。复旦大学上海数学中心副研究员侯正一带来的“新质高精度触觉毫米波雷达仿生芯片”项目获得赛事一等奖。该

0评论2024-11-0987

上交所发布并购重组案例汇编,包括四种负面类型
来源:环球网 【环球网财经综合报道】11月1日,上交所发布了《并购重组典型案例汇编》,表示为进一步回应市场诉求,帮助上市公司更好理解政策导向、把握监管理念。此次汇编整理了近年来沪市具有代表性的30个并购重组案例,其中包括四种负面类型对应的12个案例,以引导上市公司和中介机构合规筹划推进并购重组。在案例选取上

0评论2024-11-0946

从幕后走到台前,汽车零部件企业扎堆进博会,透露汽车产业新信号
走进第七届进博会汽车馆,会发现整车企业之外,又多了不少新面孔。今年,汽车轮胎品牌倍耐力,车用连接器企业安波福首次参展进博会,全球汽车第七大零部件供应商佛瑞亚也回归展台。他们都是全球汽车行业的知名供应商,但因为不直接面向消费市场,这些企业过去基本只参与专业展会,很少在进博会这样的综合性展会露面。汽车零

0评论2024-11-0942

三只松鼠疯狂并购背后:量贩零食集中化趋势凸显
21世纪经济报道记者 闫启 北京报道继奶茶、咖啡之后,量贩零食市场开始步入“万店时代”。鸣鸣很忙集团在今年6月成为首家进入万店俱乐部的量贩零食企业,万辰集团零售板块7月全国门店数量已达到7000+,而且门店扩张的脚步还在加快。随着市场竞争的加剧和消费者需求的变化,越来越多的零食品牌开始更加重视线下渠道的布局和

0评论2024-11-0943

达能携140余款产品参展进博会,“中国创造”新品加速落地
新京报讯(首席记者郭铁)第七届中国国际进口博览会期间,法国担任主宾国并设立了国家馆,达能应邀展示了多款全生命周期营养产品。七年来,达能借助进博会平台已累计将近百款新品引进中国市场。如今,越来越多的达能创新产品基于中国市场洞察创新。近年来,达能推进“中国创造、中国制造”步伐,将健康科研、绿色制造、数字

0评论2024-11-0941