经过算法的改进和机器学习专用硬件的显著提升,我们现在能够构建比以往任何时候都更为强大的通用机器学习系统。演讲者 |JeffDean整理| 王启隆自从2017年谷歌发表了题为“AttentionisAllYouNeed”的重磅论文,其中提出的“自注意力”这一革命性的概念成为Transformer模型的核心部分,引领了我们目前正在经历的AIGC革命。然而,当前的大模型领域似乎并不是姓“谷”的,反倒是有种微软一手遮天,谷歌和其他公司在后追赶的感觉。为什么现在会出现这种“逆转”的情况呢?谷歌现在都做了些什么工作?为了解答这个问题,谷歌首席科学家JeffDean于 2月 13日在美国莱斯大学进行了一场1
一夜之间,Bard逆袭GPT-4,性能直逼最强GPT-4Turbo!这个听起来似乎像梦里的事情,确确实实地发生了。就在昨天,谷歌首席JeffDean发推提前透露了谷歌的最新版模型——GeminiPro-scale。基于此,Bard相较于3月份的首次亮相,不仅在表现上有了显著的提升,而且还具备了更多的能力。可以看到,在最新的GeminiPro-scale加持下,Bard直接蹿升到了排行榜第二名的位置。一口气把之前的两款GPT-4模型斩于马下,甚至和排名第一的GPT-4Turbo的差距也非常小。虽然JeffDean并没有具体阐述「scale」的含义,但从名称上推测,很可能是一个比初代GeminiP
GoogleDeepMind,交卷!刚刚,JeffDean和Hassabis联手发文,一同回顾了GoogleResearch和GoogleDeepMind在2023年的全部成果。这一年开年,比起风靡全球的ChatGPT,谷歌看上去输惨了。当时,数不清的资本热钱向着OpenA流去,OpenAI的市值、知名度瞬间飙至前所未有的高度。4月,陷入被动的谷歌放出终极大杀招:谷歌大脑和DeepMind正式合并!「王不见王」的两大部门惊人合体,JeffDean和Hassabis终于联手。5月,谷歌在I/O大会上一雪前耻。全新的PaLM2反超GPT-4,办公全家桶炸裂升级,Bard直接史诗级进化。12月,谷歌
近日,一篇由谷歌大神JeffDean领衔的「AI自主设计芯片」研究,被曝正式接受Nature调查!谷歌发表这篇论文后,又在GitHub上开源了具体的CircuitTraining代码,直接引起了整个EDA和IC设计社区的轰动。然而,这项工作却在此后不断遭受质疑。就在9月20日,Nature终于在这篇论文下面附上了一则声明:编者按:请读者注意,本文中的性能声明已受到质疑,编辑们正在对这些问题进行调查,一旦调查结束,将酌情采取行动。图片论文地址:https://www.nature.com/articles/s41586-021-03544-w同时,一向给AI大模型泼冷水的马库斯也发现,与这篇Na
1998年9月4日,是谷歌成立的日子,转眼之间,谷歌走过了1/4个世纪的时光。25年间,它网罗了全世界最聪明的人,用商业和技术,改变了互联网,改变了人类收集和使用信息的方式(以及看广告的方式)。25年间,谷歌推出的15个产品和服务,每个产品都服务于超过5亿的个人和企业,其中6个产品用户数超过20亿。谷歌首席科学家JeffDean在推特上写了一段非常感性的文字,从自己的视角回顾了谷歌这25年的变化。在谷歌的这24年多的时间里,我获得了难以置信的乐趣。我加入公司时,公司只有几个人,挤在PaloAlto市中心的一个小办公室里,办公室就在现在的T-Mobile商店楼上。随着搜索流量的增长,我们每周二(