NVIDIA首席科学家GTC中国大会演讲中介绍AI研究最新进展

他以三个项目为例,讲述了自己带领的200人的研究团队如何成功实现“黄氏定律 (Huang's Law)”。这则以NVIDIA首席执行官黄仁勋(Jensen Huang)名字命名的定律,预测GPU将推动AI性能实现逐年翻倍。

  今天,NVIDIA首席科学家Bill Dally在GTC中国线上大会主题演讲中说道,NVIDIA的研究人员致力于打造速度更快的AI芯片,并将其用于具有更高带宽的系统,从而简化编程。
NVIDIA首席科学家GTC中国大会演讲中介绍AI研究最新进展
  他以三个项目为例,讲述了自己带领的200人的研究团队如何成功实现“黄氏定律 (Huang’s Law)”。这则以NVIDIA首席执行官黄仁勋(Jensen Huang)名字命名的定律,预测GPU将推动AI性能实现逐年翻倍。
  Dally 讲述:“如果我们真想提高计算机性能,黄氏定律就是一项重要指标,且在可预见的未来都将一直适用。此前,Dally曾负责NVIDIA在AI、光线追踪和高速互连领域的相关研究。”
NVIDIA首席科学家GTC中国大会演讲中介绍AI研究最新进展
  NVIDIA助力 AI推理性能每年提升一倍以上
  超高能效加速器
  为实现这一突破,NVIDIA研究人员专门开发了一种名为MAGNet的工具,其生成的AI推理加速器在模拟测试中,能够达到每瓦 100 tera ops 的推理能力,比目前的商用芯片高出一个数量级。
  MAGNet采用了一系列新技术来协调并控制通过设备的信息流,最大限度地减少数据传输,而数据传输正是当今芯片中最耗能的环节。这一研究原型以模组化实现,因此能够灵活扩展。
  另外,研究团队还开展了一项研究,旨在以更快速的光链路取代现有系统内的电气链路。
  发挥所有光子的潜能
  Bill Dally 拥有120多项专利,在2009年加入NVIDIA之前,曾任斯坦福大学计算机科学系主任。Dally表示:“我们可以将连接GPU的NVLink速度提高一倍,也许还会再翻番,但电子信号最终会消耗殆尽。”
  该团队正在与哥伦比亚大学的研究人员密切合作,探讨如何利用电信供应商在其核心网络中所采用的技术,通过一条光纤来传输数十路信号。
  这种名为“密集波分复用”的技术, 有望在仅一毫米大小的芯片上实现Tb/s级数据的传输,是如今互连密度的十倍以上。
  除了更大的吞吐量,光链路也有助于打造更为密集型的系统。Dally举例展示了一个未来将搭载160多个GPU的NVIDIA DGX系统模型。
NVIDIA首席科学家GTC中国大会演讲中介绍AI研究最新进展
  工程师借助光链路,在单一系统中可搭载160多个GPU
  软件方面,NVIDIA的研究人员开发了全新编程系统原型Legate。开发者借助Legate,即可在任何规模的系统上,运行针对单一GPU编写的程序–甚至适用于诸如Selene等搭载数千个GPU的巨型超级计算机。
  Legate将一种新的编程速记融入了加速软件库和高级运行时环境Legion,目前它正在美国国家实验室接受测试。
  描绘美好未来
  除上述三项研究,Dally还在主题演讲中谈到了NVIDIA特别针对医疗健康、无人驾驶汽车和机器人等众多行业打造的平台。同时,他还致力于钻研数据科学、AI和图形处理。
  Dally表示:“经过几代人的努力,NVIDIA的产品将通过基于物理渲染的路径追踪技术,实时生成令人惊艳的图像,并能够借助AI构建整个场景。”
  此外,他还首次公开展示了NVIDIA的对话式AI框架Jarvis与GauGAN的完美组合。GauGAN利用生成式对抗网络,只需简略构图,就能创建美丽的风景图。在演示中,用户可通过语音指令,即时生成像照片一样栩栩如生的画作。
  在主题演讲视频录制的间隙,Dally接受了采访,表示对研究团队在多个领域取得的开创性进展深感自豪。
  他说:“当前,NVIDIA在光线追踪领域所取得进展,都始于NVIDIA 研究院打造的原型,我们的产品团队都很兴奋。2011年,我委派NVIDIA研究员Bryan Catanzaro与斯坦福大学教授Andrew Ng共同合作一个项目,后来打造出CuDNN软件,让深度学习领域大量的研究工作成为可能。”
  立足网络领域
  此外,Dally还牵头开展了一项合作,构建了 NVLink和 NVSwitch最初的原型。NVLink和 NVSwitch如今用于全球最大型的超级计算机中,实现了其内部GPU的互连。
  他说:“产品团队总能迅速将研究工作转化为实际成果,这也是NVIDIA如今能够成为全球公认最领先的网络公司之一的原因。”
  谈及对科技的热情,Dally说自己就像个沉浸在糖果故事里的孩子。也许某一天,原本还在帮助一组团队研究AI加速器的他,就会突然转而帮助另一团队解决机器人领域的复杂问题。
  他说:“我现在所做的,是一份全世界,或者起码是全公司里最有趣的工作,让我有机会能够助力塑造未来。”
  除大会主题演讲外,GTC中国线上大会还将提供220多场主题演讲和分论坛,均可免费参加,且绝大多数将使用中文。
  GTC中国线上大会高峰论坛及初创企业展示
  主题演讲之后,NVIDIA的资深专家将齐聚高峰论坛,介绍公司在AI、数据科学和医疗健康领域的多项突破性技术在中国的落地应用。
  此外,面向AI和数据科学领域初创企业的孵化项目NVIDIA初创加速计划(NVIDIA Inception)将邀请12家领军中国初创企业出席此次大会。
  大会吸引了众多行业领军企业与机构参与其中,包括阿里巴巴、AWS、百度、字节跳动、中国电信、戴尔科技、滴滴、新华三、浪潮、快手、联想、微软、平安、腾讯、清华大学和小米。

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 硅光子技术的前世今生

    光子计算一度被认为是最有希望的未来技术。与半导体芯片相比,光芯片用超微透镜取代晶体管、以光信号代替电信号进行运算。光芯片无需改变二进制计算机的软件原理,但可以轻易实现极高的运算频率,同时能耗非常低,不需要复杂的散热装置。与电脑对应,设想中的光学计算机被称作“光脑”。

    2024年4月10日 知识
  • 安防市场“缺芯”情况将会如何缓解和解决?

    “华为海思在IPC SoC芯片市场已经一家独大,占据全球70%以上市场份额;在视频监控领域市占率也已经突破90%以上,几乎属于绝对的主导地位。”一名安防业内人士说道。

    2024年4月4日
  • 5G动作大PK 边缘数据中心将成最大受益方?

    5G自诞生以来就一直在惊艳着世界,而万物互联时代下,5G与之相互补给共生,凭借高速率、低时延和高带宽三大“母胎”特性,波及范围广至物联网、人工智能、医疗、工业、互联网、无人驾驶等多块领域,而云计算、大数据和数据中心也受其恩泽,展现新姿态,随着边缘数据中心的热度升温,5G时代的各项技术将为其带来更长足的发展。

    2024年4月6日
  • 智能摄像机的硬件架构及算法类型应用

    智能摄像机的称呼由来已久,从最开始的模拟摄像机、模拟球机、标清网络摄像机到如今的高清摄像机,都有被称之为智能摄像机。而“智能”的定义,也是没有统一标准的,例如支持CCD的参数可调、具备自动白平衡、支持移动侦测、支持视频遮挡检测以及支持周界防范等都可以被称之为智能。以上因素在相当程度上造成目前市场上智能摄像机种类杂多的情况,以至于让用户很难区分,如雾里看花。

    2024年4月14日
  • TI TivaC系列MCU简化物联网应用开发

    德州仪器推出业界第一款支持以太网MAC+PHYCortex-M4的产品TivaTM4C129xMCU,129x芯片在连接性、通信性和控制性三个方面做到了与物联网的完美契合。

    2024年4月18日
  • 离所有人都用得上5G还有多远?

    中国的5G研发试验已经进入第三阶段,据悉5G第一版国际标准将于2018年6月完成。坦白讲,今年是5G标准、研发与试验最关键的一年,刚刚发布的政府工作报告中也提出,要推动5G产业发展,计划2020年全面实现5G商用。

    2024年4月16日