英特尔为开源注入创新力量,加速 AI 应用
消息来源:baojiabao.com 作者: 发布时间:2024-05-12
作为快速增长的计算工作负载,人工智能(AI)也是英特尔认为将对世界产生变革性影响的超级技术力量之一。然而,数据显示,有超过一半的 AI 和数据科学项目无法真正部署到现实应用中,均以失败告终。海量数据、无法完全兼容的设备加之各异的数据环境,无疑为 AI 的应用和落地设置了重重关卡。
基于此,秉承推动 AI 无处不在的美好愿景,英特尔全面打造基于大数据 AI 开源项目 BigDL,旨在助力从笔记本到云,无缝扩展大数据 AI。日前,英特尔院士、英特尔大数据技术全球首席技术官戴金权应邀出席 China Apache Hadoop Meetup 2022,并在会上深入解析英特尔如何从如下三个领域着手,创新 BigDL,助力开源发展。
打造高可扩展性
对数据科学家和开发者而言,高可扩展性不仅意味着如何能高效、快速地构建出端到端的分布式数据和 AI 的流水线,也同样需要注重基础架构部署。与理论不同,实践中的科学家们更关注如何将 AI 技术应用部署到实际场景,其中包括建模、训练、推理和对模型的优化等全流程,这意味着需要考虑端到端的流水线。基于此,英特尔在底层就开始进行数据切分、模型复制、参数同步等工作,让数据科学家们能够有统一的体验,同时,英特尔亦将大规模分布式的工作透明化、抽象化,让数据科学家们能够高效开发 AI 流水线。而对于基础架构,英特尔亦通过类似 BigDL 的项目,为用户提供统一的大数据 AI 集群 / 基础架构。在同一个集群、流水线、工作程序当中,对这些大数据系统进行数据访问、分布式处理,在同一个流水线里以内存计算的形式进行大规模分布式数据分割,再由这些深度学习、机器学习的系统对其进一步分析。
提升每个节点的性能效率
每当提及 AI 性能时,大多数人的第一反应是 GPU 或 AI 芯片,然而软件优化能够带来的 AI 性能提升却极易被忽视。英特尔通过软件层面优化,如 TensorFlow、PyTorch、MXNet 等,可以带来几十倍、上百倍的性能提升,能够更加高效地集成这些软件。因此,可以认为构建一个免费的 AI 软件加速器,在笔记本、CPU 集群上都能够带来性能上的极大提升。而且,现如今有大量的现代化 CPU 加速技术,如内存分配、指令集等,将这些技术整合在 AI 流水线中,也能够大大提升 AI 性能。值得注意的是,英特尔不仅通过软件大幅提升每个节点性能,亦能实现集成过程的透明性,使数据科学家的实操更加便捷。
构建安全可靠的数据处理环境
将 AI 应用从笔记本扩展到诸如云环境中时,安全也是数据科学家非常关注的另一大问题。对当下大部分应用场景而言,隐私保护机器学习与大数据分析是运行在云中非常重要的需求。这个安全保障不仅囊括了如同态加密、远程验证等软件方面的安全保障,也需要类似可信执行环境等硬件安全保障,如英特尔 ® SGX 技术具备持续增强的安全能力,可在内存等硬件中构建一个安全"飞地",帮助保护代码和数据,防止数据在处理期间遭受恶意软件攻击和权限提升型攻击。因此,基于英特尔 ® SGX 技术打造的 BigDL PPML,能够让用户即使没有处于极度信任的公有或私有云中也仍然可以进行非常安全的数据分析和 AI 应用。
得益于高扩展性、性能提升和安全可靠的特性,BigDL 能够通过端到端大数据人工智能管道,降低 AI 的准入门槛,不仅能够让数据科学家、工程师等更便捷、简易地构建大规模分布式人工智能解决方案,从而加速 AI 应用和部署,亦有助于挖掘更多 AI 潜力,为各行业发展注入新动能。
2022-12-21 17:11:08相关文章
- 美国法院裁定阿里须为Squishmallows玩具侵权案答辩
2023-12-28 19:59:34
- 小米汽车传员工3700人 雷军称小米汽车不可能卖9万9
2023-12-28 19:41:57
- 国家新闻出版署:认真研究《网络游戏管理办法(草桉徵求意见稿)》关切 实行前进一步完善
2023-12-28 19:14:56
- 天猫新规可以无条件申请“仅退款”了?淘宝天猫又离狗多多零元购近了一步
2023-12-28 18:57:55
- 印度以打击金融犯罪为由逮捕了两名 vivo 高管
2023-12-26 16:49:01
- 在国外微信收不到国内信息?微信和WeChat将被拆分
2023-12-15 10:40:15
- 苹果iPhone15 系列手机发布最新消息 预计上市发布时间9月
2023-08-06 23:21:02
- 华为将发布鸿蒙HarmonyOS4操作系统 功能五大升级支持设备清单
2023-08-06 23:17:37
- 整治自媒体网红账号 400万粉丝网红发布擦边视频被无限期封禁
2023-07-12 09:56:09
- 网传微信文件传输助手是真人是真的吗?微信官方回应
2023-06-27 15:53:32
- 电信移动送手机成了“信用购”?你上了运营商的贷款套路了吗?
2023-06-12 17:18:55
- 中国电信广东地区崩了无信号 客服回应已在核实处理
2023-06-08 15:39:04
- 消息称小米新能源汽车价格表正讨论定价区间:双版本不同配置,高配或超 35 万元
2023-03-06 12:56:03
- 华为因制裁被传或分拆剥离手机业务? 内部人士回应:可能性不大.
2023-03-05 23:26:41
- OPPO正式发布安第斯智能云,让终端更智能
2023-02-24 16:02:27
- 华为与OPPO签订全球专利交叉许可协议 包括5G蜂窝通信专利
2023-02-24 16:02:26
- 老蛙将推MINI镜头新品:目前未知具体规格 官宣将于12月20日发布
2023-02-24 16:02:26
- 首发全新35mm定制光学系统 努比亚Z50性能同样强悍
2023-02-24 16:02:25
- Redmi K60屏幕细节曝光:全系标配2K护眼柔性直屏+5000mAh大容量电池
2023-02-24 16:02:25
- OPPO Find N2今天发 合金金属折叠屏更轻了
2023-02-24 16:02:24