您当前浏览器版本过低,为了不影响您的使用,建议您使用最新的谷歌浏览器、火狐浏览器、 360浏览器,更换浏览器后使用更流畅!(注意!双核浏览器请切换为极速模式)
400-607-9388

揭秘!Sora背后的2篇技术论文,其一去年被拒稿

2024-03-01
4987

随着人工智能(AI)巨头OpenAI再次搬出王炸引爆全球科技界,文生视频大模型Sora背后的研发团队也进入公众视野。


研发团队15人,不乏00后与华人


公开资料显示,两位研发负责人Tim Brooks和Bill Peebles均博士毕业于伯克利人工智能研究所,导师同为Alyosha Efros。

Tim Brooks在伯克利期间发明了InstructPix2Pix,曾在谷歌从事为Pixel手机摄像头提供支持的人工智能工作,并在英伟达从事视频生成模型的工作。同时,他也是OpenAI文生图模型DALL·E的主要研究员。

William (Bill) Peebles(Bill系William昵称)本科毕业于麻省理工学院,师从Antonio Torralba,曾在Adobe和英伟达有过实习经历。

根据OpenAI官网介绍,Sora核心团队共有15人,除了研发负责人,团队还有00后,亦不乏华人身影。而从公开资料显示的毕业和入职时间来看,这支团队的成立时间尚未超过1年。


基础论文曾因“缺乏创新”被拒


Sora背后,是两项核心技术的突破——Spacetime Patch(时空Patch)技术和Diffusion Transformer(DiT,或扩散型 Transformer)架构。

时空Patch技术

OpenAI发布的Sora技术报告中透露了Sora的主要理论基础,其中Patch的技术论文名为《Patch n' Pack: NaViT, a Vision Transformer for any Aspect Ratio and Resolution》。该篇研究论文是由谷歌DeepMind的科学家们于2023年7月发表的。

DiT架构技术

OpenAI发布的Sora技术报告透露,Sora采用的DiT架构是基于一篇名为《Scalable diffusion models with transformers》的学术论文。而这篇论文,是由Peebles和华人学者谢赛宁一起合著的。

但戏剧性的是,这篇论文曾因为“缺乏创新”被CVPR(国际计算机视觉与模式识别会议)2023拒绝。仅仅1年之后,就成为Sora的核心理论之一。

版权声明:文章来源澎湃新闻、网络等,由艾思科蓝整合撰写。分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。


已收藏 0
点赞 2

学术会议

第十届现代管理、教育与社会科学国际学术会议(MMET 2025)
第十届现代管理、教育与社会科学国际学术会议将于2025年08月22-24日在中国南京召开。会议主要围绕会议主要围绕“现代管理”“教育”“社会科学”等研究领域展开讨论。
2025-08-22
【合作ACM出版|高录用稳检索|价格实惠】第五届互联网金融与数字经济国际学术会议(ICIFDE 2025)
第五届互联网金融与数字经济国际学术会议(ICIFDE 2025)将于2025年8月15-17日于中国-哈尔滨举行。大会将汇聚互联网金融、数字经济的创新学者和行业专家,共享学术盛宴。
2025-08-15
【EI稳检索 | 上海电力大学主办】第十届能源与环境研究进展国际学术会议(ICAEER 2025)
第十届能源与环境研究进展国际学术会议(ICAEER 2025),由上海电力大学主办,将于2025年9月26-28日在中国上海隆重召开。本届会议将继续专注研究和探讨能源与环境领域的疑难疑点和前沿科技。
2025-09-26
【IEEE冠名会议】第七届IEEE能源、电力与电网国际学术会议(IEEE-ICEPG 2025)
第七届能源、电力与电网国际学术会议(ICEPG 2025)将于2025年9月12-14日在广州举办。会议由华南理工大学主办。会议主要围绕能源电力与电网等研究领域展开讨论。
2025-09-12
【IEEE出版|院士/Fellow报告|EI稳定】第五届智能通信与计算国际学术会议(ICICC 2025)
第五届智能通信与计算国际学术会议(ICICC 2025)定于在南京隆重举行,旨在为相关研究领域的专家、学者、工程师提供加强学术研究和探讨的平台,推动形成更加开放、创新的学术氛围,激发更多合作机遇。
2025-08-15
【IEEE 出版丨电子科技大学】第四届电子信息技术国际学术会议(EIT 2025)
第四届电子信息技术国际学术会议(EIT 2025)将于2025年8月22日至24日在中国·成都隆重召开。大会组委会诚挚邀请国内外高校、科研机构的专家学者、企业界人士及其他相关专业人员参加本次会议。
2025-08-22
相关资讯

重磅!重新组建科学技术部!

3月7日,十四届全国人大一次会议在北京人民大会堂举行第二次全体会议,根据国务院关于提请审议国务院机构改革方案的议案,重新组建科学技术部。

53044

20

2023-03-07

关于2023年国家自然科学基金集中接收申请项目评审结果的通告

2023年国家自然科学基金项目申请集中接收期间,国家自然科学基金委员会共接收项目申请304333项,经初审和复审后共受理303329项。

52552

36

2023-08-24

985最新《Science》!重磅成果,世界上首次实现该突破!

三所985高校合作完成的最新科研成果《借位错实现陶瓷拉伸塑性变形》发表在国际顶级期刊《科学》(Science)!

4343

2

2024-08-02

211教授,出任高水平期刊副主编!

近日,福州大学土木工程学院赖志超教授应美国土木工程师学会《Journal of Structural Engineering》期刊邀请,出任该期刊副主编(Associate Editor),成为中国内地第4位担任该期刊副主编的学者。

3686

4

2024-07-25

985/211携手发刊!一滴水,登上Nature子刊!

自1859年以来,人们观察到离子在窄通道中沿压力驱动的水流运动,这种现象称为顺流离子传输。

3886

9

2024-07-23