(9分钟全面解析)欧美xo视频电脑版v53.1.701.06.77.31.769-2265安卓网_新万博体育

新万博体育

图片
搜索
猫眼电影 融媒体矩阵
  • 山东手机报

  • 猫眼电影

  • 大众网官方微信

  • 大众网官方微博

  • 抖音

  • 人民号

  • 全国党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

谷歌Dreamer大神离职!「辛顿门徒」自曝错过Transformer

2025-10-29 13:46:46
来源:

猫眼电影

作者:

殷开

手机查看

  猫眼电影记者 倪立婧 报道Q8X2R7L1T4J5M9B6W3

新智元报道

编辑:元宇

【新智元导读】谷歌世界模型大牛Danijar Hafner宣布离任!他自2016年起开始在Google Brain实习,后又在DeepMind、Brain Team工作。他的经历颇具传奇色彩,曾获辛顿指导,还与?ukasz Kaiser、Ashish Vaswani等Transformer大佬有过交集。

刚刚,「Dreamer」大神Danijar Hafner,宣布离开他曾工作近十年的谷歌。

离职前Danijar担任Google DeepMind旧金山分部的资深研究科学家(Staff Research Scientist)。

他的研究目标是「构建能够理解世界并与世界互动的通用智能体」。

作为谷歌世界模型大牛,Danijar曾主导/联合主导了Dreamer系列(Dreamer、DreamerV3、Dreamer4 等)的开发。

Danijar Hafner

他在推文中写道:「今天是我在DeepMind的最后一天」。

回顾了在Google和DeepMind将近10年的工作经历,Danijar认为「一个重要的篇章走到了终点」。

Danijar在谷歌的早期经历,多是以研究员的身份参与谷歌研究院、DeepMind、Brain Team等团队的工作。

从他的教育经历中,也能清晰看出他的职业发展轨迹。

从2016年起,他就开始参与Brain团队的实习。

据Danijar回忆,2016年他第一次在山景城参与谷歌Brain团队的实习,与James Davidson以及Vincent Vanhoucke一起共事。

因为当时尚无可运行的PPO实现,团队就在TensorFlow的静态图框架下进行调试和实验。

2017-2018年,Danijar在伦敦大学读硕士,期间他就在伦敦的DeepMind工作;

2018-2023年,Danijar在多伦多大学读博士,因此他就在多伦多的Brain Team工作了相当长一段时间。

他与该团队另一位资深研究科学家Mohammad Norouzi共同开发了多个版本的Dreamer。

初识Transformer

但「并未在意」

Danijar还记得?ukasz Kaiser第一次向他们展示一个由「大型」LSTM 生成的维基百科页面时的情形。

?ukasz Kaiser

?ukasz是一位机器学习研究员,他最初在Google Brain团队工作,后来加入OpenAI。

Google Brain团队曾于2018年发表《Generating Wikipedia by Summarizing Long Sequences》,?ukasz Kaiser是作者之一,主题就是端到端生成维基百科条目。

https://arxiv.org/abs/1801.10198?utm_source=chatgpt.com

Danijar还提到他「错过」Transformer的一段插曲。

当时,Ashish Vaswani曾经兴奋地向他介绍一种新架构在计算效率上的优势,并建议他将其应用在强化学习上,但那时Danijar却并未在意(我当时没试)。

后来这种架构被命名为Transformer。

Ashish Vaswani

https://arxiv.org/abs/1706.03762?utm_source=chatgpt.com

Ashish Vaswani是一位在AI领域颇具影响力的科学家与创业者。

他是Essential AI的联合创始人,但更为人熟知的是参与提出了那篇著名的《Attention Is All You Need》的开创性论文。

该论文提出了一种「彻底摒弃循环和卷积结构,仅用注意力机制」的全新简单网络架构Transformer,可以实现更强的并行性和更快的训练速度。

前面提到的?ukasz Kaiser也是这篇开创性论文的主要作者之一。

深度学习研究

2017-2018年,Danijar在伦敦大学攻读硕士。

这段时间他在伦敦的DeepMind工作,有机会参与到深度强化学习和生成式模型的研究,并与Timothy Lillicrap(DeepMind)以及Ian Fischer(Google Research)合作。

这段经历促成了他们共同完成了PlaNet(一种基于模型的强化学习算法,能从像素观测学习潜在世界模型,并在潜空间中进行规划与动作选择)。

Timothy Lillicrap

随后,Danijar与Nicolas Heess、DeepMind的Adaptive Agents团队长期交流,系统梳理并实践Karl Friston的自由能原理(Free Energy Principle, FEP)。

开发Dreamer

曾获辛顿指导

2018-2023年,Danijar在多伦多大学读博士,这段时期他还在加州大学伯克利分校以联合培养博士生的身份开展研究。

在多伦多大学读博期间,Danijar的主要导师是Jimmy Ba,同时还获得了辛顿(Jeffrey Hinton)的指导。

在此期间,Danijar还在多伦多的Brain Team工作了相当长一段时间。

Mohammad Norouzi

他与Google Brain多伦多分部的资深研究科学家Mohammad Norouzi共同开发了多个版本的Dreamer。

他们参与各种合作项目,还一起庆祝了辛顿获得获得图灵奖的时刻。

2018年的图灵奖授予Yoshua Bengio、Geoffrey Hinton和Yann LeCun

过去几年,Danijar一直在伯克利和旧金山之间,与Wilson Yan合作深入研究世界模型。

在Count Zero和Koray Kavukcuoglu的大力支持下,他得以充分利用顶级的算力与资源,推动了一系列前沿探索。

从Dreamer到DreamerV3,再到能够在想象中自主学习、甚至在纯离线环境下完成复杂任务的Dreamer4,这一系列成果令Danijar激动。

在Danijar的个人官网主页上,他的个人愿景十分醒目:「构建能够自主理解世界并与世界互动的智能机器。」

对他而言,世界模型不仅是技术突破,更是理解智能本质的一扇窗口。

如今,Danijar即将结束他在Google/DeepMind的十年旅程,带着复杂的心情和满怀期待,迎接新的篇章。

参考资料:

https://x.com/danijarh/status/1985436821405516031%20

https://danijar.com/?utm_source=chatgpt.com

??时事1:日本精品天堂一区二区

??10月29日,2024年春运全国跨区域人员流动量预计达90亿人次,

  大湖干涸,底部的泥浆晒干后坚如硬石,这只生灵的一只腿埋在泥浆内,而今像是封在了石头中,不能拔出。

,被同时操视频。

??10月29日,江苏盐城:点“绿”成金 绘就生态文明新画卷,

  这是古国的人皇,统御亿万里山河,而今正在亲自祭天,无比的郑重。

,欧美性69式XXXX,强奸乱伦性交影音先锋,多人换娶妻俱乐部疯狂操逼视频。

??时事2:初二好看女生的jiojio简介

??10月29日,英国选手获第四届“汉语桥”世界小学生中文秀全球总冠军,

  “大鹏、紫云你们回去。”小石昊开口,让三头幼鸟先行退走,怕它们在此受到伤害,他挡在了最前面。

,操一级大片,啪啪啦吗精品视频,十八禁在线看。

??10月29日,西安铁路局原创MV:展示青春力量,

  一是希望所有团员要做学习的表率。

,网址你懂的国,亚州人人操人人干,A级偷拍视频。

??时事3:18岁禁入的黄色免费网站

??10月29日,亚洲杯:泰国两球战胜吉尔吉斯斯坦 沙特2:1绝杀阿曼,

  “哈哈……”一群大人都大笑了起来。

,日本 中文在线,zorras,黄页网站激情视频。

??10月29日,到家服务迎来消费热 上门做减脂餐需提前一周预约,

  全体干部职工、各位退休老同志和家属朋友们:

,A片免费看网址,欧美一级精品免费播放,你懂得网站在线播放。

??时事4:四月电子厂全景沟厕

??10月29日,探访百年老街中英街:港式风情街区新貌吸引市民游客,

  然而,少妇无动于衷,脸上非常冰冷,只是催促那个幽灵般的身影小心一些,不要令至尊骨流逝生机。

,电影按摩房,国产妇女,人人摸人人操日日日。

??10月29日,墨西哥武装人员同警方发生枪战致12人死亡,

  四是试点乡镇示范带动不断突出,渗透作用日益延伸。小城镇建设在我市城镇化的梯级结构中处于最低一级,但它们在小天地里演绎了大精彩,纷纷唱起了“特色戏”。随着我市小城镇二、三产业的兴起,广大农民纷纷进镇务工经商,使农村生产力从纯农业中分离出来,对启动农村工业化,加速乡村城市化进程起到了很大作用。尤其是各县区所在的城关镇、城郊乡城乡二元结构差异小,经济发展较快,在年全市乡镇综合经济实力排序中稳居前列。目前,全市小城镇镇区非农业人口由年的万人增加到年底的万人,吸纳农村劳动力万人。小城镇试点的示范引导作用日益突出,我市自年以来先后确定了个综合改革试点乡镇,它们发展的显著成效,对全市的小城镇建设起到了很好的示范带头作用。据统计,试点镇(乡)的财政收入平均高出其它小城镇,国内生产总值平均高出,农民人均纯收入平均高出。个试点镇乡在全市个镇乡综合经济实力排序中,年有个升位,年有个升位。县镇突出以经济建设中心,六年来综合经济实力上升位,进入全市三十强,在全市产生了强烈的示范效应。还有一些小城镇的发展依托历史特点和自身优势进行定位,功能作用独具特色。如镇以发展旅游为主,以繁荣市场出名,靠“嫩头青”萝卜、靠柳编“打天下”,靠工业“唱大戏”,让边界贸易、服务业“登堂入室”,靠科技先导招纳四方,靠区位优势造镇,靠交通优势兴业。这些小城镇已成为我市小城镇建设的典范,在全市的经济建设和发展中起着不可低估的带动作用。值得一提的是,有些乡镇也建设了工业园区,如罗山的镇,规划建设了周南工业园区,已吸纳家乡镇企业入驻,区镇和镇分别建立了民营工业园和“双非”工业园,这些做法值得具备条件的乡镇借鉴。

,黄片操逼黄片,亚洲成a 人v 欧美综合天堂,免费A片国产毛无码A片在线播放。

责编:乔蒂

审核:孔令辉

责编:德伍德

相关推荐 换一换