UnrealGT - 虚幻引擎合成数据插件

zg185 · 发表于 2023-11-3 11:44

UnrealGT 是一个可以从虚幻引擎内部的虚拟场景生成数据的东西。方针是提供一个尽可能灵活的东西包，撑持许多开箱即用的数据生成场景，而且能够轻松扩展内置组件以适应更复杂的场景。为了实现这一方针，该东西以插件的形式直接集成到引擎的编纂器中，因此需要一些关于虚幻引擎的基本常识。
如果你但愿直接操作虚幻引擎的衬着能力来生成用于AI模型训练的合成数据，但又没时间学习虚幻引擎的开发，那么可以是用UnrealSythn这个基于UE5开发的合成数据生成东西，非常便利：

https://tools.nsdt.cloud/UnrealSynth

1、安装UnrealGT

Unreal GT插件要求虚幻引擎 4.24 或更高版本，你可以测验考试旧版本，但某些功能可能无法按预期工作。
环境要求如下：

Windows：Visual Studio 2017 或 2019（2015 应该也可以工作，但未经测试）
macOS：XCode 命令行东西
Linux：如果你已经从源代码构建了引擎，那么什么也不需要了

安装Unreal GT插件的独一方式是从现有项目中的源代码构建它。这需要你手动从源代码构建项目。

将此存储库克隆到你的项目插件目录中。
通过在 Windows/macOS 上右键单击项目 .uproject 文件或在 Linux 上使用 GenerateProjectFiles.sh 来生成项目文件（Cmake、Visual Studio 解决方案、Vscode 工作区...）文件。
从 IDE 或 CLI 构建并运行生成的解决方案和cmake 项目。
选择 DebugGameEditor 或 DevelopmentGameEditor 作为方针。

编纂器启动后，转到编纂 > 插件并启用 UnrealGT 插件。
2、UnrealGT入门

UnrealGT插件公开了一系列actor组件，可用于从编纂器内的虚拟世界生成数据。下面将解释如何从关卡内捕捉图像数据。
首先在虚幻编纂器中打开你选择的关卡。

之后，在内容浏览器中右键单击以创建新蓝图并选择 Actor 作为基类：

在编纂器中打开创建的蓝图。并将以下组件添加到你创建的蓝图中：

ULImageGenerator
ULFileStreamer
ULTimedCaptureTrigger
ULCameraMovement：可选

2.1 UnrealGT组件配置

ULImageGenerator组件配置

图像生成器负责从场景生成像素数据。你可以配置分辩率和输出图像格式。我们在本例中使用 BMP 作为格式，因为它不需要 CPU 大量压缩。

请记住，多个图像生成器或高分辩率会降低运行时的性能，因为每个图像生成器都需要它本身的衬着通道。

ULFileStreamer组件配置

Streamer 组件流式传输生成的数据。在这种情况下，生成的图像将被流式传输到文件中。

要将流媒体与生成器链接，请从下拉列表中选择图像生成器。
由于限制，下拉列表只会列出编译蓝图后的组件，因此如果你的 ImageGenerator 第一次没有显示，请点击顶部的编译并重试。
还可以为创建的文件设置定名约定。你可以访谒 {ID} 和 {Time} 作为变量。这些文件存储在 UnrealGT 文件夹中的项目保留目录中。

ULTimedCaptureTrigger

该组件负责触发数据生成。应由该组件触发的生成器必需添加到数据生成器数组中。这里我们将图像生成器添加到数组中。

生成以固按时间间隔触发，可以通过更改帧速率参数 1/帧速率 = 图像之间的时间（以秒为单元）来改削该时间间隔。请小心高帧速率，因为这会严重降低性能。

ULCameraMovement（可选）

如果你不想在固定位置捕捉，可以将 CameraMovementComponent 添加到你的蓝图中。该组件将为你的蓝图/Actor 添加一些基本的移动功能，可以在属性选项卡中进行配置。
我们选择默认的跟随主视图作为移动模式（TODO移动模式将是未来更新镜像中的枚举）：

Follow Main View：跟随主视图，将跟随你的主视口相机/播放器
Follow Actor：跟随一个Actor，只有在蓝图放置在关卡中后才能选择该Actor
Follow Rail ：跟随摄像机 Rail Actor，你可以配置 Blueprint Actor 跟随导轨的速度。

2.2 UnrealGT测试

配置完组件后，保留并编译你的蓝图。
将蓝图从内容浏览器拖放参加景中。你应该看到一个摄像机，指示你的 ImageGenerator 将记录的标的目的。
开始模拟，图像应该在你的项目 UnrealGT 下的 Saved 目录中生成。
2.3 UnrealGT 示例

你可以在 github 找到本教程中描述的蓝图和其他示例。
要在编纂器中查看示例，请在内容浏览器的视图选项中启用“显示插件内容”。
要熟悉插件，请将示例参与者放置在地图中，打开调试窗口，如 /basics/debugging- Generation/ 中所述，并在文本框中写入示例名称。
3、调试UnrealGT的数据生成

单击东西栏中的 UnrealGT 图标打开调试窗口。在文本输入中键入要调试的生成器组件的名称以呈现调试信息。

<hr/>原文链接：UnrealGT合成数据插件 - BimAnt

		自动登录	找回密码
密码			立即注册

UnrealGT - 虚幻引擎合成数据插件

本帖子中包含更多资源