https://vilab.team/author/yingfei-liu/ Yingfei Liu Hugo Blox Builder (https://hugoblox.com)en-usMon, 01 Jan 2024 00:00:00 +0000 https://vilab.team/media/icon_hu2896232876136423579.png https://vilab.team/author/yingfei-liu/ https://vilab.team/publication/panacea-panoramic-and-controllable-video-generation-for-auto/ Mon, 01 Jan 2024 00:00:00 +0000 https://vilab.team/publication/panacea-panoramic-and-controllable-video-generation-for-auto/ <p>本文提出Panacea，一种面向自动驾驶场景的全景可控视频生成方法。该方法通过创新的4D注意力机制和两阶段生成流程，有效解决了生成视频中的时间与跨视角一致性问题；同时引入ControlNet框架，利用鸟瞰图（BEV）布局对生成内容进行精细控制。在nuScenes数据集上的实验表明，Panacea能够生成高质量的多视角驾驶视频，为BEV感知任务提供丰富的训练数据增强，推动自动驾驶感知技术的发展。</p>