您当前浏览器版本过低,为了不影响您的使用,建议您使用最新的谷歌浏览器、火狐浏览器、 360浏览器,更换浏览器后使用更流畅!(注意!双核浏览器请切换为极速模式)
400-607-9388

揭秘!Sora背后的2篇技术论文,其一去年被拒稿

2024-03-01
4782

随着人工智能(AI)巨头OpenAI再次搬出王炸引爆全球科技界,文生视频大模型Sora背后的研发团队也进入公众视野。


研发团队15人,不乏00后与华人


公开资料显示,两位研发负责人Tim Brooks和Bill Peebles均博士毕业于伯克利人工智能研究所,导师同为Alyosha Efros。

Tim Brooks在伯克利期间发明了InstructPix2Pix,曾在谷歌从事为Pixel手机摄像头提供支持的人工智能工作,并在英伟达从事视频生成模型的工作。同时,他也是OpenAI文生图模型DALL·E的主要研究员。

William (Bill) Peebles(Bill系William昵称)本科毕业于麻省理工学院,师从Antonio Torralba,曾在Adobe和英伟达有过实习经历。

根据OpenAI官网介绍,Sora核心团队共有15人,除了研发负责人,团队还有00后,亦不乏华人身影。而从公开资料显示的毕业和入职时间来看,这支团队的成立时间尚未超过1年。


基础论文曾因“缺乏创新”被拒


Sora背后,是两项核心技术的突破——Spacetime Patch(时空Patch)技术和Diffusion Transformer(DiT,或扩散型 Transformer)架构。

时空Patch技术

OpenAI发布的Sora技术报告中透露了Sora的主要理论基础,其中Patch的技术论文名为《Patch n' Pack: NaViT, a Vision Transformer for any Aspect Ratio and Resolution》。该篇研究论文是由谷歌DeepMind的科学家们于2023年7月发表的。

DiT架构技术

OpenAI发布的Sora技术报告透露,Sora采用的DiT架构是基于一篇名为《Scalable diffusion models with transformers》的学术论文。而这篇论文,是由Peebles和华人学者谢赛宁一起合著的。

但戏剧性的是,这篇论文曾因为“缺乏创新”被CVPR(国际计算机视觉与模式识别会议)2023拒绝。仅仅1年之后,就成为Sora的核心理论之一。

版权声明:文章来源澎湃新闻、网络等,由艾思科蓝整合撰写。分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。


已收藏 0
点赞 2

学术会议

第十一届水利、土木工程国际学术会议暨工程安全与智能化论坛(ICHCE&ESI 2025)
第十一届水利、土木工程国际学术会议暨工程安全与智能化论坛由河海大学主办,多个研究所以及高校联合举办,将于2025年6月13-15日在河海大学举办,欢迎各位专家学者投稿或参会。
2025-06-13
【高校背书|优秀评选|IEEE出版|多主题征稿】第七届下一代数据驱动网络国际学术会议(NGDN 2025)
第七届下一代数据驱动网络国际会议暨网络与大数据高端论坛(NGDN 2025)将于2025年6月6日至8日在中国沈阳举行。大会主要围绕“计算机科学与数据驱动网络”的最新研究展开。
2025-06-06
【IEEE出版/连续五届稳定检索】第六届电气技术与自动控制国际学术会议(ICETAC 2025)
第六届电气技术与自动控制国际学术会议(ICETAC 2025)将于2025年6月20-22日在中国南京召开。旨在为从事“电气技术”、“电力工程”、“自动控制”领域的专家学者提供一个交流平台
2025-06-20
【IEEE出版| 已连续5届EI稳定检索】第六届电子通讯与人工智能国际学术会议(ICECAI 2025)
第六届电子通讯与人工智能国际学术会议(ICECAI 2025)将于2025年6月20-22日在中国-成都举行。ICECAI 2025会议由电子科技大学主办,IEEE出版,已连续五届EI稳定检索
2025-06-20
【IEEE出版,往届快至会后3个月EI检索】第七届能源系统与电气电力国际学术会议(ICESEP 2025)
随着ICESEP前6届的成功举办,由华中科技大学主办的第七届能源系统与电气电力国际学术会议(ICESEP 2025)将于2025年6月20日至22日在中国武汉召开。
2025-06-20
【JPCS出版|多年快速稳定检索】第九届水动力学与能源电力系统国际学术会议(HEEPS 2025)
第九届水动力学与能源电力系统国际学术会议(HEEPS 2025)将于2025年6月6-8日在南京召开。会议致力于汇聚全球在水动力学与能源电力领域的专家学者,共同探讨和分享最新的研究成果。
2025-06-20
相关资讯

重磅!重新组建科学技术部!

3月7日,十四届全国人大一次会议在北京人民大会堂举行第二次全体会议,根据国务院关于提请审议国务院机构改革方案的议案,重新组建科学技术部。

52907

20

2023-03-07

关于2023年国家自然科学基金集中接收申请项目评审结果的通告

2023年国家自然科学基金项目申请集中接收期间,国家自然科学基金委员会共接收项目申请304333项,经初审和复审后共受理303329项。

52395

36

2023-08-24

985最新《Science》!重磅成果,世界上首次实现该突破!

三所985高校合作完成的最新科研成果《借位错实现陶瓷拉伸塑性变形》发表在国际顶级期刊《科学》(Science)!

4141

2

2024-08-02

211教授,出任高水平期刊副主编!

近日,福州大学土木工程学院赖志超教授应美国土木工程师学会《Journal of Structural Engineering》期刊邀请,出任该期刊副主编(Associate Editor),成为中国内地第4位担任该期刊副主编的学者。

3409

4

2024-07-25

985/211携手发刊!一滴水,登上Nature子刊!

自1859年以来,人们观察到离子在窄通道中沿压力驱动的水流运动,这种现象称为顺流离子传输。

3673

9

2024-07-23