肇州| 安溪| 容城| 江都| 应城| 增城| 通化市| 榆树| 溧水| 开远| 庄河| 仁寿| 泊头| 赣州| 五家渠| 巴林右旗| 班玛| 常州| 景德镇| 永安| 金华| 桂阳| 萧县| 清涧| 乌拉特前旗| 麻栗坡| 济阳| 鄂伦春自治旗| 于田| 醴陵| 通辽| 海兴| 申扎| 兴县| 安福| 通山| 青龙| 肥城| 图们| 凤阳| 灵宝| 宁化| 六合| 开远| 罗源| 博野| 浚县| 天山天池| 宜宾市| 大同县| 德阳| 潮安| 新竹县| 金门| 富顺| 延津| 金沙| 襄城| 丰润| 科尔沁左翼中旗| 潼南| 沙河| 尼玛| 集安| 江都| 浮梁| 十堰| 香河| 新民| 白水| 白玉| 阎良| 南和| 商丘| 涪陵| 平江| 依兰| 郑州| 卓资| 高安| 八公山| 林芝县| 乌当| 霍林郭勒| 冷水江| 革吉| 江油| 怀集| 望江| 深泽| 崂山| 房山| 石龙| 巴东| 界首| 柳河| 来安| 连江| 黄陵| 甘洛| 应县| 南涧| 都匀| 曲松| 昂昂溪| 寿宁| 汝州| 平乡| 六盘水| 新宾| 盐边| 黄陵| 青铜峡| 梁山| 米林| 卢氏| 隆昌| 蓝田| 馆陶| 本溪市| 城阳| 巧家| 八达岭| 柏乡| 海伦| 来宾| 浪卡子| 荥阳| 曲麻莱| 叶县| 莱芜| 单县| 友谊| 东乡| 蓟县| 衡阳市| 周宁| 天长| 红古| 五莲| 昌都| 黄陵| 连云港| 正宁| 长子| 吐鲁番| 安徽| 苏尼特左旗| 乐都| 玉林| 贵溪| 溧阳| 雷波| 乐陵| 桦川| 邓州| 图木舒克| 延安| 金塔| 五营| 保德| 东西湖| 饶阳| 戚墅堰| 仪征| 新都| 千阳| 杜集| 渭南| 丰润| 河曲| 兴文| 婺源| 西青| 南乐| 额尔古纳| 兰考| 察哈尔右翼后旗| 湘阴| 湖口| 乾安| 温宿| 新源| 通榆| 上甘岭| 郧西| 泸定| 景宁| 新津| 海盐| 通道| 达坂城| 南郑| 建宁| 大同区| 井研| 郾城| 阜阳| 乌鲁木齐| 疏附| 夏邑| 仲巴| 镇康| 唐山| 龙岩| 敦化| 洮南| 恒山| 彭泽| 华池| 偏关| 澎湖| 尼玛| 聂荣| 交城| 禹州| 鲁山| 五原| 郸城| 海原| 静宁| 辉南| 公主岭| 李沧| 河北| 宜黄| 梁山| 迁安| 兴文| 宝应| 阿鲁科尔沁旗| 邕宁| 土默特右旗| 卢龙| 大方| 舒城| 德江| 陆良| 商丘| 万全| 武隆| 曲松| 临清| 额尔古纳| 聊城| 云县| 垦利| 萨嘎| 夏县| 永登| 新竹市| 株洲县| 古交| 盐山| 漠河| 科尔沁右翼中旗| 镇赉| 湖口| 临安| 溧阳| 个旧| 盐源| 共和| 辽中| 秒速赛车

美航母先访菲越再与日本军演:意在“威慑中国”

2018-10-24 11:48 来源:岳塘新闻网

  美航母先访菲越再与日本军演:意在“威慑中国”

  邮箱大全中国国际经济交流中心副理事长魏建国24日对中国日报表示,继宣布第一批中止减让产品清单之后,中国正在研究第二批、第三批清单,比如飞机、芯片领域。登云股份IPO的保荐机构新时代证券更是被罚没3000余万元。

中国日报3月24日电(记者井水玉)贸易专家、原商务部副部长魏建国24日表示,面对美国对华采取限制措施,中国已经做好充分准备。这几年国家队为我们创造了很多机会,大批选手出国训练、学习,通过参加高水平赛事与顶尖选手同场竞技,年轻选手都得到了非常好的锻炼。

  当天,这家营业部卖出金额万元,排名第五位,同时也买入了万元。11月底,他回到北京开始冬训,但最初的一个多月是以伤病恢复和身体训练为主。

  一个公司缺钱,解决方案只有借钱或者增资。经销模式收入占比近九成,签约经销商数量超200家提到丸美,多数消费者的第一印象应该那句弹弹弹,弹走鱼尾纹的经典广告语。

上述负责人表示。

  对于化妆品企业来说,质量问题是不可逾越的生命线,丸美股份的产品屡次被曝光不合格,很难说不会影响到公司的IPO进程。

  预期波动率上行会在二季度继续持续,CTA在未来一段时间的绝对收益值得关注。据此,有媒体报道称,北京首批备案网贷平台数量或不超过170家。

  根据采购需求,北京金融局拟聘请10家律师事务所参与约170家互联网金融机构现场验收工作,律师事务所验收一家互联网金融机构专项法律服务费用最高限价为14100元;拟聘请10家会计事务所参与约160家互联网金融机构现场验收工作,会计事务所验收一家互联网金融机构专项会计服务费用最高限价为34778元。

  让有价值的信息不被埋没,让更多的人走近中国,了解中国。乐视网现在换手率225%,我们和老贾都没有卖,所以大致一个股东卖了4次的概念,明显有资金炒作,投资者还是要防范风险。

  资深财经评论人朱邦凌分析认为,真正决定乐视是否退市的还是监管方。

  邮箱大全致力解决流动性21世纪经济报道记者获悉,复牌后九鼎投资仍将流动性预期押注于新三板市场,暂无转板沪深主板市场考虑,但也会随着股东诉求而进行研究调整策略。

  股价喜忧参半虽然赴美上市的互金平台整体业绩亮眼,但海外投资者也不是统统买账。(凤凰国际imarekts)

  邮箱大全 秒速赛车 邮箱大全

  美航母先访菲越再与日本军演:意在“威慑中国”

 
责编:
您正在使用IE低版浏览器,为了您的雷锋网账号安全和更好的产品体验,强烈建议使用更快更安全的浏览器
雷锋网 读懂智能&未来
人工智能 正文
发私信给程弢
发送

0

美航母先访菲越再与日本军演:意在“威慑中国”

本文作者:程弢 2018-10-24 14:03
导语:从这次发布的测试结果来看,TPU似乎已经超出了业界的预期,但是藏在这一芯片背后的内部架构究竟有什么秘密呢,我们从Jouppi此前发布的论文当中,可以找到答案。
邮箱大全 我在没有听说过特里芬的悖论的情况下,也发现了同样的问题。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

在谷歌发布TPU一年后,这款机器学习定制芯片的神秘面纱终于被揭开了。

昨日,谷歌资深硬件工程师Norman Jouppi刊文表示,谷歌的专用机器学习芯片TPU处理速度要比GPU和CPU快15-30倍(和TPU对比的是英特尔Haswell CPU以及Nvidia Tesla K80 GPU),而在能效上,TPU更是提升了30到80倍。

从这次发布的测试结果来看,TPU似乎已经超出了业界的预期,但是藏在这一芯片背后的内部架构究竟有什么秘密呢,我们从Jouppi此前发布的论文当中,可以找到答案。

据雷锋网(公众号:雷锋网)了解,早在四年前,谷歌内部就开始使用消耗大量计算资源的深度学习模型,这对CPU、GPU组合而言是一个巨大的挑战,谷歌深知如果基于现有硬件,他们将不得不将数据中心数量翻一番来支持这些复杂的计算任务。

所以谷歌开始研发一种新的架构,Jouppi称之为“下一个平台”。Jouppi曾是MIPS处理器的首席架构师之一,他开创了内存系统中的新技术。三年前他加入谷歌的时候,公司上下正在用CPU、GPU混合架构上来进行深度学习的训练。

Jouppi表示,谷歌的硬件工程团队在转向定制ASIC之前,早期还曾用FPGA来解决廉价、高效和高性能推理的问题。但他指出,FPGA的性能和每瓦性能相比ASIC都有很大的差距。他解释说,“TPU可以像CPU或GPU一样可编程,它可以在不同的网络(卷积神经网络,LSTM模型和大规模完全连接的模型)上执行CISC指令,而不是为某个专用的神经网络模型设计的。一言以蔽之,TPU兼具了CPU和ASIC的有点,它不仅是可编程的,而且比CPU、GPU和FPGA拥有更高的效率和更低的能耗。

TPU的内部架构

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

该图显示了TPU上的内部结构,除了外挂的DDR3内存,左侧是主机界面。指令从主机发送到队列中(没有循环)。这些激活控制逻辑可以根据指令多次运行相同的指令。

TPU并非一款复杂的硬件,它看起来像是雷达应用的信号处理引擎,而不是标准的X86衍生架构。Jouppi说,尽管它有众多的矩阵乘法单元,但是它GPU更精于浮点单元的协处理。另外,需要注意的是,TPU没有任何存储的程序,它可以直接从主机发送指令。

TPU上的DRAM作为一个单元并行运行,因为需要获取更多的权重以馈送到矩阵乘法单元(算下来,吞吐量达到了64,000)。Jouppi并没有提到是他们是如何缩放(systolic)数据流的,但他表示,使用主机软件加速器都将成为瓶颈。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

256×256阵列缩放数据流引擎,经过矩阵乘法积累后实现非线性输出

从第二张图片可以看出,TPU有两个内存单元,以及一个用于模型中参数的外部DDR3 DRAM。参数进来后,可从顶部加载到矩阵乘法单元中。同时,可以从左边加载激活(或从“神经元”输出)。那些以收缩的方式进入矩阵单元以产生矩阵乘法,它可以在每个周期中进行64,000次累加。

毋庸置疑,谷歌可能使用了一些新的技巧和技术来加快TPU的性能和效率。例如,使用高带宽内存或混合3D内存。然而,谷歌的问题在于保持分布式硬件的一致性。

TPU对比Haswell处理器

在和英特尔“Haswell”Xeon E5 v3处理器来的对比中,我们可以看到,TPU各方面的表现都要强于前者。

在Google的测试中,使用64位浮点数学运算器的18核心运行在2.3 GHz的Haswell Xeon E5-2699 v3处理器能够处理每秒1.3 TOPS的运算,并提供51GB/秒的内存带宽;Haswell芯片功耗为145瓦,其系统(拥有256 GB内存)满载时消耗455瓦特。

相比之下,TPU使用8位整数数学运算器,拥有256GB的主机内存以及32GB的内存,能够实现34GB/秒的内存带宽,处理速度高达92 TOPS ,这比Haswell提升了71倍,此外,TPU服务器的热功率只有384瓦。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

除此之外,谷歌还测试了CPU、GPU和TPU处理不同批量大小的每秒推断的吞吐量。

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?

如上图所示,在小批量任务中(16),Haswell CPU的响应时间接近7毫秒,其每秒提供5482次推断(IPS),其可以实现的最大批量任务(64)每秒则可以完成13194次推断,但其响应时间为21.3毫秒。相比之下,TPU可以做到批量大小为200,而响应时间低于7毫秒,并提供225000个IPS运行推理基准,是其峰值性能的80%,当批量大小为250,响应时间为10毫秒。

不过需要注意的是,谷歌所测试的Haswell Xeon处理器似乎也不能完全说明问题,英特尔Broadwell Xeon E5 v4处理器和最新的“Skylake”Xeon E5,每核心时钟(IPC)的指令比这款处理器提升了约5%。在Skylake是28核,而Haswell为18核,所以Xeon的总体吞吐量可能会上升80%。当然,这样的提升与TPU相比仍有差距。

最后雷锋网需要强调的是,TPU是一个推理芯片,它并非是要取代GPU,可以确定的是,TPU与CPU一起使用对训练分析更加有益。但对于CPU制造商而言,如何研发出像ASIC一样兼顾性能和能效的芯片是现在以及未来要做的。

可以确定的是,谷歌已经逐渐在自己的数据中心部署TPU,但是上述测试数据只是理论结果,实际应用表现如何?我们还不得而知。

Via nextplatform,雷锋网编译

雷锋网版权文章,未经授权禁止转载。详情见转载须知

谷歌硬件工程师揭秘,TPU为何会比CPU、GPU快30倍?
分享:
相关文章

文章点评:

表情

略懂技术的小编

关注一切有未来感的产品及技术!
当月热门文章
最新文章
为了您的账户安全,请验证邮箱
您的邮箱还未验证,完成可获20积分哟!
请验证您的邮箱
立即验证
完善账号信息
您的账号已经绑定,现在您可以设置密码以方便用邮箱登录
立即设置 以后再说
请填写申请人资料
姓名
电话
邮箱
微信号
作品链接
个人简介
秒速赛车 秒速赛车 邮箱大全 牛宝宝电影网