Workflow
RoBERTa
icon
搜索文档
扩散不死,BERT永生,Karpathy凌晨反思:自回归时代该终结了?
36氪· 2025-11-05 12:44
Karpathy难以抵挡的诱惑! 苹果的前员工、德克萨斯大学奥斯汀分校(UT Austin)的计算机科学研究生Nathan Barry,得出一个惊人的结论: BERT本质上,只是文本扩散中的一步! 基于「强化版BERT」RoBERTa,他成功地把表示学习算法改造为生成算法: | Following their victory in the French and Indian War, Britain began to assert greater -- | | --- | | .. | | . Noven needs assem mones needs more resea masse sense sense sense some more resume sense sense somes somes somes somes somes | | . | | wound needs comments comes come resume second second second course course course course come | | .. | | . | | - SHEEN RESEA RESE ...
陈丹琦,入职Thinking Machines Lab了?
机器之心· 2025-08-28 08:55
陈丹琦职业动向推测 - 陈丹琦GitHub主页邮箱已更新为thinkingmachines.ai后缀 [2] - Thinking Machines Lab内部邮箱命名规则为firstname.lastname@thinkingmachines.ai 与陈丹琦邮箱格式一致 [4] - 该公司首席科学家John Schulman邮箱同样采用thinkingmachines.ai后缀 [5] Thinking Machines Lab背景 - 由前OpenAI CTO Mira Murati于2025年2月创立 [1] - 团队成员包含多位前OpenAI员工 当前规模约数十人 [1] - 公司专注于前沿多模态AI模型与技术研发 [1] 陈丹琦学术成就 - 现任普林斯顿大学计算机科学系副教授 领导NLP研究小组 [16] - 论文总引用量达75,149次 其中RoBERTa论文引用36,574次 [17] - 曾获ACL 2022杰出论文奖、2016 ACL杰出论文奖等学术荣誉 [19] - 2019年博士论文成为斯坦福大学近十年最热门毕业论文之一 [18] 行业合作模式推测 - 可能存在类似何恺明兼职谷歌DeepMind的学术与产业界双重任职模式 [10] - 目前个人主页未更新职业变动信息 仍需进一步确认 [11]