上周,当全球最大的存储芯片制造商之一美光科技(Micron Technology)收购人工智能硬件和软件初创公司Fwdnxt时,我一直在关注此事。
此举可能会非常有趣,如果成功的话,Fwdnxt可能会让美光与英特尔和英伟达等合作伙伴展开直接竞争,因为美光相信,内存和人工智能计算正在融合到同一个架构中。
美光负责这个项目的其中一位高管是Steve Pawlowski,并非偶然,他曾是英特尔的芯片设计师,拥有数十项专利。Pawlowski现在在美光公司担任高级计算解决方案副总裁。
Fwdnxt将与美光的存储芯片进行结合,帮助美光探索数据分析所需的深度学习人工智能解决方案,特别是在物联网和边缘计算方面。也许美光也会生产基于人工智能的内存芯片,或者包括人工智能在内的内存芯片。
总部位于博伊西的美光公司正在做这项工作,该公司首席执行官Sanjay Mehrotra说,因为“曾经的计算架构并不适合未来的发展趋势……从长远来看,我们认为计算最好在内存中完成。”
外媒在上周Micron Insights的活动上采访了Steve Pawlowski,以下是经过编辑整理的采访实录,由猎云网编译。
Steve Pawlowski:2014年我离开英特尔的时候,我来到了美光,他们问我:“你想做什么?”我说:“我认为,为了提高性能效率和降低延迟,计算和内存的融合是必要的。你们是一家存储公司,你们有技术,DRAM即将到来,我想在这一领域作出改变。”然后他们说:“好吧!”
我有一个小团队,专注于在计算和内存方面发现问题——我们可以开始测试概念,然后将概念引入产品,但不会增加成本。我在英特尔学习到的,一件我永远都不会忘记的事情,我们曾经有算数协同处理器,80287,80387,然后我们在387上赚了一大笔钱。当时我们有了一个聪明的想法,如果我们把协处理器集成到486中,我们可以做得更快更好。我们做到了,但突然间我们就没有足够的足迹了。那些不需要它的人说:“你不会为了那个死亡区域向我收费”,而那些需要它的人说:“会像其他人一样付给我钱,因为我是一个受欢迎的顾客。”然后,整个业务就归零了。
这件事给我的一个教训是,你不能增加更多的复杂性和成本,然后指望人们马上为它买单,除非,有大多数人能从中获得真正的价值。我们现在重点关注的是,找到人们今天可以从中获得价值的关键因素,然后看看你能否随着时间的推移扩大这个泡沫。我认为这是一个8到10年的旅程。在那些年的最后,当我回首往事时,我可能会意识到我浪费了它们。或者我可以回头看看,然后说:“哇,我们可能没有做到这一点,但我们做得很好。”
Q:这引发了很多关于这会导致什么后果的想象,你会给出一些具体的暗示吗?
Steve Pawlowski:有一件事,你肯定已经听过很多次了,那就是AI正处在边缘。我们关注这个问题的原因是,没有一个现成的编程模型或现成的架构可以让你与市场竞争。可以说,每个人都在为进入同一个战场而斗争。现在,我们有机会去那里做点什么了。人们不会看着你说:“美光是一家内存公司,你为什么要谈这个?”事实上,他们是这样认为:美光在FPGA上有这种能力,我们的高性能内存和架构映射在FPGA之上。我们会负责所有的抽象,所以你不必成为一个VHDL程序员,那么你愿意开始处理数据集的问题吗?
有趣的是,我并不需要主动去推动它。我们经常会参加FPGA会议。很多政府机构也会参加然后说:“我们在这里有个问题,我们想在这方面多做些尝试。”政府的问题是,他们很早就兴奋了,但如果你想做成什么事情,那就得花很长时间。因为采购周期很长,合同也是长期的,其他的一切都是长期的。
我们决定看看普通市场。有一家汽车公司来了,他们说:“我们还没有达到第五级,但我们肯定可以达到第三级、第四级的自动驾驶汽车,我们希望能够利用网络告诉我们正在发生什么。这看起来是有趣的,你愿意和我们一起工作吗?”还有很多人说:“他们为什么对与你们展开合作感兴趣?”这是因为我不会直接告诉他们需要做什么,我会说“这就是我们所拥有的,然后我们能为你做些什么呢?”他们会说:“好吧,你愿意听我们的,这是我们的问题。”
不管你信不信,我从2005年AMD推出的Opteron中吸取了教训。我们仍在推广7g处理器、33-stage管道,但无人问津。我们去了华尔街,我说:“你能再给我们一次机会吗?我们能坐下来了解一下我们的工作量吗?让我们一起合作,我们可以创造更好的产品吗?”事实证明,我们做到了。
我们找了很多人。瑞银,我记得他们写的一篇评论文章,他们说:“你可能不会制造最大的芯片或最好的芯片,但你来了,理解了我的问题。”这就是所谓的,真正理解客户和他们的问题,以及你能做什么。如果你这样做对他们没有帮助,也没关系,至少你学到了一些东西。
Q:就缩小范围而言,它是在开发一种新的内存,还是在计算处理过程是在哪里完成的?
Steve Pawlowski:答案是肯定的,但它是对动态真正的理解。顺便说一下,这取决于型号。我刚才和下面的人聊了聊有些语言模型需要100g的参数。当你看到有人说:“嘿,我有两个千兆字节,四个千兆字节。”那会适合大多数型号,但不是所有的型号,型号确实在不断发展。
这也取决于解决方案的延迟。我不知道你们是否看过OHSU的视频,那位女士患了乳腺癌,他们需要大量的数据,因为他们想把所有的电子显微镜图像放在一起,建立一个三维卷积模型,一个针对肿瘤的三维显示。他们没有足够的时间去了解,因为他们想要在一天甚至一个小时内获得切实可行的洞察力。我们在欧洲核子研究中心做的工作,我们现在需要数据。我们必须在几微秒内做出决定。这是什么有趣的东西,还是我们把它放弃。
不同的解决方案需要不同类型的内存,这也是我们正在学习的。我一直喜欢英特尔的一点是,用户知道程序的指令是什么。我了解它们是如何在机器上执行的,然后逐渐进入系统。当我来到美光的时候,我看到的只有地址和命令,就是单纯的读/写命令和地址。我完全不明白,这个东西是把15个不同的东西复制到不同的元素上,还是覆盖上去,还是什么?有了我们在6月合作和收购的这些公司,我们就可以构建这些算法、运行它们,看看整体效果如何。
我们的第一个目标是,我们能在内存中做些什么来提高解决方案的运行时间?我们可以建立更高的带宽,但那不一定能让用户达到目的。如果我们能建立一个缓冲区,引入一个矩阵,让我们一下子就能把矩阵移过来,而不是让这个东西去找它,这可能会带来巨大的好处。
最后,我们还会看到:其中大多数是乘法和累加的架构,以及非常简单的一些架构。它们只是被复制了几千次。一旦晶体管变得更好,你就可以在存储设备上做一个很好的乘法和累加。最终,设想一下采用这种架构,然后把它放在一个内存设备本身中,这是一个长期的愿景。
我想说的是,无论我们做什么,我们都要建立一个编程基础设施和一个范例,这样人们就不必每次迁移时都重写他们的代码。在我看来,这就是英特尔的巨大成功。当我们做386的时候,还没有32位的软件。但它确实能很好地运行16位代码,人们买它就是为了这个。你可以有很多平台,然后人们说:“好吧,现在我们去优化32位。”6到8年后,当486问世时,有很多软件可以利用它,然后它就变成了一台永不回头的机器。
先从内存开始,先从存储开始,看看我们能做什么。然后我们将看到什么可以随着时间的推移而真正地迁移,答案可能是什么都不能,答案也可能是一切都能。我想答案是在中间的某个地方,这取决于你把针移到哪里。
Q:是什么让这个项目变得如此困难,以至于可能成为一个历时10年的项目?
Steve Pawlowski:困难的是,这将是一个为期10年的项目。提出一种编程范式,社区就开始使用它,这样你就可以开始把编程带到社区。我不知道你是否知道Steve Wallach(来自Tracy Kidder的一本书),他是多年前的Tracy Kidder的灵魂。他刚退休,但他曾为我工作了一段时间。每次一对一的时候,他都说:“如果我要教你什么的话,就是这个。最容易编程的东西就是获胜的关键,屡试不爽。”底线是,你必须让编程社区参与进来。你不能只是去做一些花哨的硬件,然后把它们丢在一边,因为它们不会碰它,这是个难题。
我们还不是软件公司。我刚开始创业的时候,英特尔还不是一家软件公司。他们就像Nvidia,有很多软件工程师,在某些情况下甚至超过了他们的硬件工程师。你只是看不到他们。
Q:你们拿下了Fwdnxt,它是一个很全面的产品了,那么你们还需要找很多合作伙伴吗?
Steve Pawlowski:我们需要大量的合作伙伴和数据科学家,他们的推理机架构已经开发了5年,10年,12年了。优化它们的人来自不同的公司和不同的学术环境,它的创始人是普渡大学的教授,他们一直在优化这个架构。他们有一个相当好的编译器,采用了一个开放的网络交换前端,然后将其映射到他们的硬件上。
我需要的是数据科学家,是应用程序。我还认为我们需要一个动态运行时/调度程序。如果你真的有这个模型,如果我今天在硬件上写一个网络,在英特尔处理器上,三年后你仍然可以运行同样的程序,所有的东西都是通过指令集抽象出来的。因此,在这里我要做的是抽象网络,这意味着我们需要某种类型的动态运行时。也就是说,“啊,这个东西有8000个乘法和累加单位,这个有1000个,那我可以把那东西再分散一点。哦,这150个单位死了。我不想在这些方面做任何安排,但我仍然希望能够使用该部分。”
有几个实体一直在寻找解决动态运行时问题的方法,我认为这是非常重要的,尤其是我听说过估计值。一年前,我在机场遇到了一个在英特尔公司经营Litho的人。他说,他们相信当达到5nm以下时,30%的设备在制造时会不合格。
Q:你是说有缺陷,还是什么?
Steve Pawlowski:只是不符合规格。我们把所有的东西都装在护栏里,假设它的寿命是7年,而且质量会下降。基于这个特殊的原因,你甚至无法护卫它,它甚至也不能在guardrail里正常工作。
我找到了一篇由巴西研究者写的论文,上面说如果你有,假设你可以做512个核,那么你会降低20%。与峰值性能相比,总体性能下降约4%。32核芯片已经失效,在64核芯片中,只有一个内核处于活动状态。他们只是假设这些值是随机分布的。如果我们要使用比7更好的几何图形,那么为这些大型应用程序提供动态运行时将同样重要。
多年来,内存系统一直存在冗余。他们在测试,会在一个冗余块中交换,如果坏块比冗余块多,这就变成了一个密钥链。
Q:这是否意味着与英特尔和英伟达等公司的竞争很激烈?
Steve Pawlowski:这样会更有合作精神。美光在数据中心很难与英特尔和英伟达竞争,英伟达已经锁定了训练。即使有人提出了新的解决方案,至少有一家初创公司告诉我,超级计算者告诉他们:“很难把我们的训练算法从GPU上转移出来。它做得很好,仍在提高我们的业绩。不要把你的时间花在这上面。”我最后听到的统计数据,很大一部分推论仍然在Xeon上运行。
我们一直在关注——如果我们要在数据中心做些什么,那就是帮助我们的客户,比如英伟达和英特尔。但是如果从内存存储的角度来看有什么创新,让我们来看看它的边缘。我们将在那里获得最大的效率和规模经济。
Q:摩尔定律的部分还可以吗?你们会准时吗?
Steve Pawlowski:这是一个挑战,但这并没有阻止我们继续扩大规模。老实说,我必须永远活在摩尔定律里。不许说摩尔定律的坏话!这是第十一诫。因此当人们问我的时候,我的回答是:Dennard规模增长的放缓和停止才是真正推动创新的原因。现在,我们可能不会每两年得到两倍的晶体管,也许是每三四年一次。但我们会在第三维度成长。这一切并没有阻止我们。问题是怎样做最经济,工程师们会为难题找到真正有创意的解决方案。
Q:英特尔今天强调,他们将在2021年推出7nm图形芯片。他们似乎回到了预定的时间。
Steve Pawlowski:我希望如此。在我离开的时候,那是5年前的事了,4年的领先优势消失得如此之快,令人惊讶。
Q:从这个意义上说,似乎整个行业都在同步前进。
Steve Pawlowski:我认为这个行业还在继续他们的步调:“我们仍然可以看到一条通往规模化的道路。”就像我说的,我不知道这是否是摩尔预测的激进的两年,但想想过去40年来,由于摩尔定律,我们在能力方面取得了哪些进展。太不可思议了!我仍然认为会出现规模扩张,我们会像其他人一样利用它。
Q:Fwdnxt交易给你带来了什么?是更多的软件方面的业务,还是也有芯片制造领域的人才?
Steve Pawlowski:不是真正的芯片制造天才,并不是的。他们是建筑天才,他们有硬件架构方面的天赋。他们已经翻译了FPGA。在采取这方面,使ASIC和做前端和后端,这不是他们的专业知识,但是是他们现在在做的地方。他们带来了软件和体系结构,不仅是硬件的体系结构,还有卷积神经网络的体系结构知识。如果有人向他们提出一个问题,他们如何能够对该网络进行优化,然后使用他们的数据对其进行训练,以获得他们想要的精度水平。一旦他们达到了他们想要的精度,他们就把训练好的算法映射到FPGA上进行分类。
Q:所以它会给你提供多种选择,让你选择想做什么。
Steve Pawlowski:我完全把它看作是,我们正在学习这些东西是如何相互作用的,以及这些不同的网络是如何进化的。好的方面是,我可以放一个有一百万个参数的网络,就是说我可以放一个100gig的网络参数。它的运行速度较慢,但我能够理解那些大型网络将如何发展,以及我们将做些什么。
我在小组里讨论了我们是如何与欧洲核子研究中心合作的。我们从原型设计中学到的东西是惊人的。他们以如此快的速度把数据扔给它,他们需要如此快的洞察力。准确性是好的,但他们不需要像癌症患者那样紧迫的东西,而你需要99.999%的准确性。他们会问,“这70%或80%好吗?这很有趣吗?没有?那就不要了。把它扔出去。我们有更多的东西要对付,最终我们会得到一些达到这个门槛的东西,那将会很有趣。”他们每秒会发生4000万次碰撞。
Q:你对这种方法能解决的问题的一般描述是怎样的?
Steve Pawlowski:这两个问题,卫生保健和欧洲核子研究中心,基本上他们是用2D传感器图像构建一个3D模型。在欧洲核子研究中心一号上,粒子相互碰撞,产生了大量其他粒子。他们想要做的是快速测量这些粒子然后问:“所有的能量加起来了吗?”如果能量是X,你得到Y,它小于X,然后有一些能量没有被考虑进去,这是很有趣的科学,因为能量守恒定律说没有任何东西应该被创造或毁灭。一旦他们这样做了,他们就会想要获得不同的图像并构建一个关于衰减的3D模型,因为它不会全部显示在相同的2D图像中。
可视化肿瘤需要很多很多二维图像,X光,等等,并创建一个三维的体积模型。我们使用相同的3D卷积神经网络样式,因为它们是不同的网络,它们有不同的内层做不同的事情,但是我们用它们来解决一个类似的问题,即创建一个3D的表现。
Q:我不知道你是否听说过MediView公司。他们来自克利夫兰诊所,刚刚筹集了450万美元的风险投资。他们对病人的身体进行核磁共振成像,所有的东西都在里面,然后他们把数据放入微软全息眼镜。然后医生就可以用3D技术将其可视化。你把手术刀放到病人身上,他看到手术刀穿过小孔,进入他想要的地方,否则他就不会看到里面的情况。以前,他必须根据他所看到的所有2D屏幕进行猜测。
Steve Pawlowski:那太棒了。几年前,俄勒冈健康科学大学的外科主任说:“你需要来这里。”当时我在英特尔,他们给我们洗了全身,给我们做了双疝气手术,他说:“我想给你们展示我们现在是怎么做手术的。”他们仔细检查了一切。当然,这个人并不是完全开放的,否则我就不会去做手术了。手术结束后,他说:“现在,让我向你们展示如何训练我们的外科医生。”就工具而言,它就像石器时代。这将是一个完美的教学工具。
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。