您当前浏览器版本过低,为了不影响您的使用,建议您使用最新的谷歌浏览器、火狐浏览器、 360浏览器,更换浏览器后使用更流畅!(注意!双核浏览器请切换为极速模式)
400-607-9388

揭秘!Sora背后的2篇技术论文,其一去年被拒稿

2024-03-01
7297

随着人工智能(AI)巨头OpenAI再次搬出王炸引爆全球科技界,文生视频大模型Sora背后的研发团队也进入公众视野。


研发团队15人,不乏00后与华人


公开资料显示,两位研发负责人Tim Brooks和Bill Peebles均博士毕业于伯克利人工智能研究所,导师同为Alyosha Efros。

Tim Brooks在伯克利期间发明了InstructPix2Pix,曾在谷歌从事为Pixel手机摄像头提供支持的人工智能工作,并在英伟达从事视频生成模型的工作。同时,他也是OpenAI文生图模型DALL·E的主要研究员。

William (Bill) Peebles(Bill系William昵称)本科毕业于麻省理工学院,师从Antonio Torralba,曾在Adobe和英伟达有过实习经历。

根据OpenAI官网介绍,Sora核心团队共有15人,除了研发负责人,团队还有00后,亦不乏华人身影。而从公开资料显示的毕业和入职时间来看,这支团队的成立时间尚未超过1年。


基础论文曾因“缺乏创新”被拒


Sora背后,是两项核心技术的突破——Spacetime Patch(时空Patch)技术和Diffusion Transformer(DiT,或扩散型 Transformer)架构。

时空Patch技术

OpenAI发布的Sora技术报告中透露了Sora的主要理论基础,其中Patch的技术论文名为《Patch n' Pack: NaViT, a Vision Transformer for any Aspect Ratio and Resolution》。该篇研究论文是由谷歌DeepMind的科学家们于2023年7月发表的。

DiT架构技术

OpenAI发布的Sora技术报告透露,Sora采用的DiT架构是基于一篇名为《Scalable diffusion models with transformers》的学术论文。而这篇论文,是由Peebles和华人学者谢赛宁一起合著的。

但戏剧性的是,这篇论文曾因为“缺乏创新”被CVPR(国际计算机视觉与模式识别会议)2023拒绝。仅仅1年之后,就成为Sora的核心理论之一。

版权声明:文章来源澎湃新闻、网络等,由艾思科蓝整合撰写。分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。


已收藏 0
点赞 2

学术会议

【本周截稿|SPIE出版|EI稳定】2026通信系统与通信网络国际学术会议(CSACN 2026)
2026通信系统与通信网络国际学术会议(CSACN 2026)将于2026年5月15-17日在中国西双版纳举行。组委会诚挚地邀请您参与,共同探讨通信、信息系统和计算机工程领域的未来发展。
2026-05-15
【中南大学主办 | 往届提交3个月检索】第二届机电一体化、机器人与人工智能国际学术会议(MRAI 2026)
第二届机电一体化、机器人与人工智能国际学术会议(MRAI 2026)将于2026年5月22-24日在湖南长沙召开。机械工程、工业技术、设计与工业互联网、自动化工程等相关主题欢迎投稿
2026-05-22
【北京语言大学主办|往届CPCI检索|论文评优】第十二届人文学科和社会科学研究学术会议(ICHSSR 2026)
第十二届人文学科和社会科学研究学术会议(ICHSSR 2026)将于2026年5月29-31日在中国北京隆重举行。会议主要围绕人文学科和社会科学等研究领域展开讨论。
2026-05-29
【往届见刊后20天EI检索|上海海事大学主办|高录用】第六届大数据、人工智能与风险管理国际学术会议(ICBAR 2026)
第六届大数据、人工智能与风险管理国际学术会议(ICBAR 2026)将于2026年5月15-17日在中国上海隆重举行。进入21世纪以来,大数据、人工智能与风险管理科学的进步,推动了社会经济的繁荣发展
2026-05-15
【IEEE出版|中南大学主办】第七届计算机视觉、图像与深度学习国际学术会议(CVIDL 2026)
第七届计算机视觉、图像与深度学习国际学术会议(CVIDL 2026)定于2026年5月22-24日在中国长沙隆重举行。会议旨在为从事计算机视觉、图像与深度学习研究的专家学者提供一个科研合作的平台
2026-05-22
【IEEE出版】第五届新能源系统与电力工程国际学术会议(NESP 2026)
第五届新能源系统与电力工程国际学术会议(NESP 2026)将于2026年5月22-24日在成都召开。能源、新能源、电气工程、电力工程、储能、能源科学、IEEE、EI、Scopus、
2026-05-22
相关资讯

最新!2023两院院士增选有效候选人公布

最新消息!中国科学院及中国工程院都发布了2023年院士增选有效候选人名单的公告。

55081

23

2023-08-31

重磅!重新组建科学技术部!

3月7日,十四届全国人大一次会议在北京人民大会堂举行第二次全体会议,根据国务院关于提请审议国务院机构改革方案的议案,重新组建科学技术部。

54476

20

2023-03-07

985最新《Science》!重磅成果,世界上首次实现该突破!

三所985高校合作完成的最新科研成果《借位错实现陶瓷拉伸塑性变形》发表在国际顶级期刊《科学》(Science)!

7007

2

2024-08-02

211教授,出任高水平期刊副主编!

近日,福州大学土木工程学院赖志超教授应美国土木工程师学会《Journal of Structural Engineering》期刊邀请,出任该期刊副主编(Associate Editor),成为中国内地第4位担任该期刊副主编的学者。

6529

4

2024-07-25

985/211携手发刊!一滴水,登上Nature子刊!

自1859年以来,人们观察到离子在窄通道中沿压力驱动的水流运动,这种现象称为顺流离子传输。

6210

9

2024-07-23