UnrealGT - 虚幻引擎合成数据插件
UnrealGT 是一个可以从虚幻引擎内部的虚拟场景生成数据的东西。 方针是提供一个尽可能灵活的东西包,撑持许多开箱即用的数据生成场景,而且能够轻松扩展内置组件以适应更复杂的场景。 为了实现这一方针,该东西以插件的形式直接集成到引擎的编纂器中,因此需要一些关于虚幻引擎的基本常识。如果你但愿直接操作虚幻引擎的衬着能力来生成用于AI模型训练的合成数据,但又没时间学习虚幻引擎的开发,那么可以是用UnrealSythn这个基于UE5开发的合成数据生成东西,非常便利:
https://tools.nsdt.cloud/UnrealSynth
1、安装UnrealGT
Unreal GT插件要求虚幻引擎 4.24 或更高版本,你可以测验考试旧版本,但某些功能可能无法按预期工作。
环境要求如下:
[*]Windows:Visual Studio 2017 或 2019(2015 应该也可以工作,但未经测试)
[*]macOS:XCode 命令行东西
[*]Linux:如果你已经从源代码构建了引擎,那么什么也不需要了
安装Unreal GT插件的独一方式是从现有项目中的源代码构建它。 这需要你手动从源代码构建项目。
[*]将此存储库克隆到你的项目插件目录中。
[*]通过在 Windows/macOS 上右键单击项目 .uproject 文件或在 Linux 上使用 GenerateProjectFiles.sh 来生成项目文件(Cmake、Visual Studio 解决方案、Vscode 工作区...)文件。
[*]从 IDE 或 CLI 构建并运行生成的解决方案和cmake 项目。
[*]选择 DebugGameEditor 或 DevelopmentGameEditor 作为方针。
编纂器启动后,转到编纂 > 插件并启用 UnrealGT 插件。
2、UnrealGT入门
UnrealGT插件公开了一系列actor组件,可用于从编纂器内的虚拟世界生成数据。 下面将解释如何从关卡内捕捉图像数据。
首先在虚幻编纂器中打开你选择的关卡。
之后,在内容浏览器中右键单击以创建新蓝图并选择 Actor 作为基类:
在编纂器中打开创建的蓝图。 并将以下组件添加到你创建的蓝图中:
[*]ULImageGenerator
[*]ULFileStreamer
[*]ULTimedCaptureTrigger
[*]ULCameraMovement:可选
2.1 UnrealGT组件配置
[*]ULImageGenerator组件配置
图像生成器负责从场景生成像素数据。你可以配置分辩率和输出图像格式。 我们在本例中使用 BMP 作为格式,因为它不需要 CPU 大量压缩。
请记住,多个图像生成器或高分辩率会降低运行时的性能,因为每个图像生成器都需要它本身的衬着通道。
[*]ULFileStreamer组件配置
Streamer 组件流式传输生成的数据。 在这种情况下,生成的图像将被流式传输到文件中。
要将流媒体与生成器链接,请从下拉列表中选择图像生成器。
由于限制,下拉列表只会列出编译蓝图后的组件,因此如果你的 ImageGenerator 第一次没有显示,请点击顶部的编译并重试。
还可以为创建的文件设置定名约定。 你可以访谒{ID} 和 {Time} 作为变量。 这些文件存储在 UnrealGT 文件夹中的项目保留目录中。
[*]ULTimedCaptureTrigger
该组件负责触发数据生成。 应由该组件触发的生成器必需添加到数据生成器数组中。 这里我们将图像生成器添加到数组中。
生成以固按时间间隔触发,可以通过更改帧速率参数 1/帧速率 = 图像之间的时间(以秒为单元)来改削该时间间隔。 请小心高帧速率,因为这会严重降低性能。
[*]ULCameraMovement(可选)
如果你不想在固定位置捕捉,可以将 CameraMovementComponent 添加到你的蓝图中。 该组件将为你的蓝图/Actor 添加一些基本的移动功能,可以在属性选项卡中进行配置。
我们选择默认的跟随主视图作为移动模式(TODO移动模式将是未来更新镜像中的枚举):
[*]Follow Main View:跟随主视图,将跟随你的主视口相机/播放器
[*]Follow Actor:跟随一个Actor,只有在蓝图放置在关卡中后才能选择该Actor
[*]Follow Rail :跟随摄像机 Rail Actor,你可以配置 Blueprint Actor 跟随导轨的速度。
2.2 UnrealGT测试
配置完组件后,保留并编译你的蓝图。
将蓝图从内容浏览器拖放参加景中。 你应该看到一个摄像机,指示你的 ImageGenerator 将记录的标的目的。
开始模拟,图像应该在你的项目 UnrealGT 下的 Saved 目录中生成。
2.3 UnrealGT 示例
你可以在 github 找到本教程中描述的蓝图和其他示例。
要在编纂器中查看示例,请在内容浏览器的视图选项中启用“显示插件内容”。
要熟悉插件,请将示例参与者放置在地图中,打开调试窗口,如/basics/debugging- Generation/ 中所述,并在文本框中写入示例名称。
3、调试UnrealGT的数据生成
单击东西栏中的 UnrealGT 图标打开调试窗口。 在文本输入中键入要调试的生成器组件的名称以呈现调试信息。
<hr/>原文链接:UnrealGT合成数据插件 - BimAnt
页:
[1]