找回密码
 立即注册
查看: 459|回复: 0

UnrealGT - 虚幻引擎合成数据插件

[复制链接]
发表于 2023-11-3 11:44 | 显示全部楼层 |阅读模式
UnrealGT 是一个可以从虚幻引擎内部的虚拟场景生成数据的东西。 方针是提供一个尽可能灵活的东西包,撑持许多开箱即用的数据生成场景,而且能够轻松扩展内置组件以适应更复杂的场景。 为了实现这一方针,该东西以插件的形式直接集成到引擎的编纂器中,因此需要一些关于虚幻引擎的基本常识。
如果你但愿直接操作虚幻引擎的衬着能力来生成用于AI模型训练的合成数据,但又没时间学习虚幻引擎的开发,那么可以是用UnrealSythn这个基于UE5开发的合成数据生成东西,非常便利:



https://tools.nsdt.cloud/UnrealSynth

1、安装UnrealGT

Unreal GT插件要求虚幻引擎 4.24 或更高版本,你可以测验考试旧版本,但某些功能可能无法按预期工作。
环境要求如下:

  • Windows:Visual Studio 2017 或 2019(2015 应该也可以工作,但未经测试)
  • macOS:XCode 命令行东西
  • Linux:如果你已经从源代码构建了引擎,那么什么也不需要了
安装Unreal GT插件的独一方式是从现有项目中的源代码构建它。 这需要你手动从源代码构建项目。

  • 将此存储库克隆到你的项目插件目录中。
  • 通过在 Windows/macOS 上右键单击项目 .uproject 文件或在 Linux 上使用 GenerateProjectFiles.sh 来生成项目文件(Cmake、Visual Studio 解决方案、Vscode 工作区...)文件。
  • 从 IDE 或 CLI 构建并运行生成的解决方案和cmake 项目。
  • 选择 DebugGameEditor 或 DevelopmentGameEditor 作为方针。
编纂器启动后,转到编纂 > 插件并启用 UnrealGT 插件。
2、UnrealGT入门

UnrealGT插件公开了一系列actor组件,可用于从编纂器内的虚拟世界生成数据。 下面将解释如何从关卡内捕捉图像数据。
首先在虚幻编纂器中打开你选择的关卡。


之后,在内容浏览器中右键单击以创建新蓝图并选择 Actor 作为基类:


在编纂器中打开创建的蓝图。 并将以下组件添加到你创建的蓝图中:

  • ULImageGenerator
  • ULFileStreamer
  • ULTimedCaptureTrigger
  • ULCameraMovement:可选
2.1 UnrealGT组件配置


  • ULImageGenerator组件配置
图像生成器负责从场景生成像素数据。你可以配置分辩率和输出图像格式。 我们在本例中使用 BMP 作为格式,因为它不需要 CPU 大量压缩。


请记住,多个图像生成器或高分辩率会降低运行时的性能,因为每个图像生成器都需要它本身的衬着通道。

  • ULFileStreamer组件配置
Streamer 组件流式传输生成的数据。 在这种情况下,生成的图像将被流式传输到文件中。


要将流媒体与生成器链接,请从下拉列表中选择图像生成器。
由于限制,下拉列表只会列出编译蓝图后的组件,因此如果你的 ImageGenerator 第一次没有显示,请点击顶部的编译并重试。
还可以为创建的文件设置定名约定。 你可以访谒  {ID} 和 {Time} 作为变量。 这些文件存储在 UnrealGT 文件夹中的项目保留目录中。

  • ULTimedCaptureTrigger
该组件负责触发数据生成。 应由该组件触发的生成器必需添加到数据生成器数组中。 这里我们将图像生成器添加到数组中。


生成以固按时间间隔触发,可以通过更改帧速率参数 1/帧速率 = 图像之间的时间(以秒为单元)来改削该时间间隔。 请小心高帧速率,因为这会严重降低性能。

  • ULCameraMovement(可选)
如果你不想在固定位置捕捉,可以将 CameraMovementComponent 添加到你的蓝图中。 该组件将为你的蓝图/Actor 添加一些基本的移动功能,可以在属性选项卡中进行配置。
我们选择默认的跟随主视图作为移动模式(TODO移动模式将是未来更新镜像中的枚举):




  • Follow Main View:跟随主视图,将跟随你的主视口相机/播放器
  • Follow Actor:跟随一个Actor,只有在蓝图放置在关卡中后才能选择该Actor
  • Follow Rail :跟随摄像机 Rail Actor,你可以配置 Blueprint Actor 跟随导轨的速度。
2.2 UnrealGT测试

配置完组件后,保留并编译你的蓝图。
将蓝图从内容浏览器拖放参加景中。 你应该看到一个摄像机,指示你的 ImageGenerator 将记录的标的目的。
开始模拟,图像应该在你的项目 UnrealGT 下的 Saved 目录中生成。
2.3 UnrealGT 示例

你可以在 github 找到本教程中描述的蓝图和其他示例。
要在编纂器中查看示例,请在内容浏览器的视图选项中启用“显示插件内容”。
要熟悉插件,请将示例参与者放置在地图中,打开调试窗口,如  /basics/debugging- Generation/ 中所述,并在文本框中写入示例名称。
3、调试UnrealGT的数据生成

单击东西栏中的 UnrealGT 图标打开调试窗口。 在文本输入中键入要调试的生成器组件的名称以呈现调试信息。


<hr/>原文链接:UnrealGT合成数据插件 - BimAnt

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
懒得打字嘛,点击右侧快捷回复 【右侧内容,后台自定义】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Unity开发者联盟 ( 粤ICP备20003399号 )

GMT+8, 2024-11-23 16:12 , Processed in 0.148804 second(s), 28 queries .

Powered by Discuz! X3.5 Licensed

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表