一个有格局的人,对商业有很大的野心,但是对赚钱却尽量克制。

真正的大机会, 把握住一次足以改变境遇;把握住两次将开启全新的人生;把握住三次整个家族都会不同。大多数人早已在各种小折腾中荒废了---水晶苍蝇拍
个人资料
正文

AI 学习笔记之二:IBM 在 AI 方面的研究

(2020-04-08 10:16:39) 下一个

1.  在大型training方面,每3.5月,算力需求就增加一倍。目前根本跟不上这个需求。

如果没有S/W 和H/W ARCHITECTURE INNOVATION,这个问题是无解的!

2.  解决方法有两个:

   A) Approximate Computing:就是FP8,4-bit, 2-bit inferencing(weight and activiation uses reduced precision).  需要在误差和性能之间找到平衡。

  B) Analog AI (in-memory computing): 把计算搬到memory 里面。从而解决了Non Neuman bottleneck。目前在实验阶段。有信心商业化。

[ 打印 ]
阅读 ()评论 (0)
评论
目前还没有任何评论
登录后才可评论.