这是一款生成式 AI 模型,可生成高度逼真的驾驶场景视频序列,用于自动驾驶开发和验证。Helm.ai 的生成式 AI 视频模型经过数千小时不同驾驶镜头的训练,利用创新的深度神经网络 (DNN) 架构与深度教学相结合,创建逼真的驾驶场景视频序列。
这些视频以 384 x 640 的分辨率、高达每秒 30 帧的可变帧速率和长达几分钟的可变帧速率生成,可以在没有输入提示的情况下随机生成,也可以通过单个图像或输入视频进行提示。
VidGen-1 能够生成不同地理位置的驾驶场景视频,以及多种类型的摄像头和车辆视角。该模型不仅可以产生高度逼真的外观和时间一致的物体运动,还可以学习和再现类似人类的驾驶行为,生成自我车辆和周围智能体根据交通规则行动的运动。

该模型模拟了全球多个城市中各种场景的真实视频片段,包括城市和郊区环境、各种车辆、行人、骑自行车的人、十字路口、转弯、天气条件(例如,雨、雾)、照明效果(例如,眩光、夜间驾驶),甚至是潮湿路面、反光建筑墙壁和自我车辆引擎盖上的准确反射。
Helm.ai 的方法不仅减少了开发时间和成本,还有效地缩小了“模拟到真实”的差距,提供了高度逼真和高效的解决方案。
(编译:康朝)