您当前浏览器版本过低,为了不影响您的使用,建议您使用最新的谷歌浏览器、火狐浏览器、 360浏览器,更换浏览器后使用更流畅!(注意!双核浏览器请切换为极速模式)
400-607-9388

揭秘!Sora背后的2篇技术论文,其一去年被拒稿

2024-03-01
4851

随着人工智能(AI)巨头OpenAI再次搬出王炸引爆全球科技界,文生视频大模型Sora背后的研发团队也进入公众视野。


研发团队15人,不乏00后与华人


公开资料显示,两位研发负责人Tim Brooks和Bill Peebles均博士毕业于伯克利人工智能研究所,导师同为Alyosha Efros。

Tim Brooks在伯克利期间发明了InstructPix2Pix,曾在谷歌从事为Pixel手机摄像头提供支持的人工智能工作,并在英伟达从事视频生成模型的工作。同时,他也是OpenAI文生图模型DALL·E的主要研究员。

William (Bill) Peebles(Bill系William昵称)本科毕业于麻省理工学院,师从Antonio Torralba,曾在Adobe和英伟达有过实习经历。

根据OpenAI官网介绍,Sora核心团队共有15人,除了研发负责人,团队还有00后,亦不乏华人身影。而从公开资料显示的毕业和入职时间来看,这支团队的成立时间尚未超过1年。


基础论文曾因“缺乏创新”被拒


Sora背后,是两项核心技术的突破——Spacetime Patch(时空Patch)技术和Diffusion Transformer(DiT,或扩散型 Transformer)架构。

时空Patch技术

OpenAI发布的Sora技术报告中透露了Sora的主要理论基础,其中Patch的技术论文名为《Patch n' Pack: NaViT, a Vision Transformer for any Aspect Ratio and Resolution》。该篇研究论文是由谷歌DeepMind的科学家们于2023年7月发表的。

DiT架构技术

OpenAI发布的Sora技术报告透露,Sora采用的DiT架构是基于一篇名为《Scalable diffusion models with transformers》的学术论文。而这篇论文,是由Peebles和华人学者谢赛宁一起合著的。

但戏剧性的是,这篇论文曾因为“缺乏创新”被CVPR(国际计算机视觉与模式识别会议)2023拒绝。仅仅1年之后,就成为Sora的核心理论之一。

版权声明:文章来源澎湃新闻、网络等,由艾思科蓝整合撰写。分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。


已收藏 0
点赞 2

学术会议

【EI期刊出版】第四届电力工程与电气技术国际学术会议(ICPEET 2025)
智慧储能研究院、内蒙古工业大学电力学院、澳大利亚莫道克大学和加利福尼亚大学尔湾分校支持的第四届电力工程与电气技术国际学术会议(ICPEET 2025)将于2025年6月27-29日在中国呼和浩特市举办
2025-07-18
【高录用 - 快速检索】第五届教育、信息管理与服务科学国际学术会议(EIMSS 2025)
第五届教育、信息管理与服务科学国际学术会议 (EIMSS 2025)将于2025年07月11-13日在马来西亚召开。EIMSS 2025致力于推动教育、信息管理与服务科学的前沿研究,促进多学科交叉和合
2025-07-11
【IEEE出版|往届快至会后3个月检索】第八届计算机信息科学与应用技术国际学术会议(CISAT 2025)
第八届计算机信息科学与应用技术国际学术会议(CISAT 2025)定于2024年7月11-13日在中国昆明召开,会议由云南大学主办。会议旨在为从事计算机信息科学和应用技术研究的专家学者、工程技术人员
2025-07-11
【高录用 | 快检索 | 浙江大学主办】第二届仿真与电子技术国际学术会议(ICSET 2025)
第二届仿真与电子技术国际学术会议(ICSET 2025)将于2025年7月04日至06日在中国杭州隆重举行。本次大会旨在为全球仿真与电子技术领域的专家学者和科研人员提供一个高水平的交流平台。
2025-07-04
【IEEE出版,连续3届稳定EI检索】第四届能源与电力系统国际学术会议 (ICEEPS 2025)
第四届能源与电力系统国际学术会议 (ICEEPS 2025)将于2025年7月11日至13日在中国·广州举行。本次会议由华南理工大学主办,由广东省艾思信息化学术交流研究院、AEIC学术交流中心承办。
2025-07-17
【JPCS出版,EI检索,内蒙古工业大学主办】第二届航空航天与力学国际学术会议(ICAM 2025)
第二届航空航天与力学国际学术会议(ICAM 2025)将于2025年7月4-6日在大连举办。大会诚邀国内外高校、科研机构专家、学者,企业界人士及其他相关人员参会交流。欢迎海内外学者投稿和参会。
2025-07-04
相关资讯

重磅!重新组建科学技术部!

3月7日,十四届全国人大一次会议在北京人民大会堂举行第二次全体会议,根据国务院关于提请审议国务院机构改革方案的议案,重新组建科学技术部。

52949

20

2023-03-07

关于2023年国家自然科学基金集中接收申请项目评审结果的通告

2023年国家自然科学基金项目申请集中接收期间,国家自然科学基金委员会共接收项目申请304333项,经初审和复审后共受理303329项。

52441

36

2023-08-24

985最新《Science》!重磅成果,世界上首次实现该突破!

三所985高校合作完成的最新科研成果《借位错实现陶瓷拉伸塑性变形》发表在国际顶级期刊《科学》(Science)!

4189

2

2024-08-02

211教授,出任高水平期刊副主编!

近日,福州大学土木工程学院赖志超教授应美国土木工程师学会《Journal of Structural Engineering》期刊邀请,出任该期刊副主编(Associate Editor),成为中国内地第4位担任该期刊副主编的学者。

3487

4

2024-07-25

985/211携手发刊!一滴水,登上Nature子刊!

自1859年以来,人们观察到离子在窄通道中沿压力驱动的水流运动,这种现象称为顺流离子传输。

3741

9

2024-07-23