录制文件格式
  • 南宫NG·28

  • 南宫NG·28

    录制文件格式

    本文内容

    ● 使用第三方工具

    ● IMU示例结构

    ● 识别轨道


    若要录制传感器数据,需使用 Matroska (.mkv) 容器格式,以便可以使用多种编解码器存储多个轨道。 录制文件包含用于存储颜色、深度、IR 图像和 IMU 的轨道。在Matroska 网站上可以找到 .mkv 容器格式的大致详细信息。

    轨道名称

    编解码器格式

    COLOR

    与模式相关(MJPEG、NV12 或 YUY2)

    DEPTH

    b16g(16 位灰度,大字节序)

    IR

    b16g(16 位灰度,大字节序)

    IMU

    自定义结构。请参阅下面的 IMU 示例结构


    使用第三方工具

    可以使用 ffmpeg 等工具或者MKVToolNix 工具包中的 mkvinfo 命令查看和提取录制文件中的信息。

    例如,以下命令将深度轨道作为 16 位 PNG 序列提取到同一个文件夹:

    ffmpeg -i output.mkv -map 0:1 -vsync 0 depth%04d.png

    -map 0:1 参数将提取轨道索引 1,对于大多数录制内容而言,此索引是深度。 如果录制内容不包含颜色轨道,则会使用 -map 0:0。

    -vsync 0 参数强制 ffmpeg 按原样提取帧,而不是尝试匹配 30 fps、15 fps 或 5 fps 的帧速率。



    IMU 示例结构

    如果在不使用播放 API 的情况下从文件中提取 IMU 数据,则数据将采用二进制格式。 下面是 IMU 数据的结构。 所有字段均为小字节序。

    字段

    类型

    加速度传感器时间戳 (µs)

    uint64

    加速度传感器数据 (x, y, z)

    float[3]

    陀螺仪时间戳 (µs)

    uint64

    陀螺仪数据 (x, y, z)

    float[3]



    识别轨道

    可能需要识别哪个轨道包含颜色、深度、IR 等属性。 使用第三方工具读取 Matroska 文件时,需要识别轨道。 轨道编号根据相机模式和已启用的轨道集而异。 标记用于标识每个轨道的含义。


    下面所列的每个标记将附加到特定的 Matroska 元素,可用于查找相应的轨道或附件。

    可以使用 ffmpeg 和 mkvinfo 等工具查看这些标记。 

    标记名称

    标记目标

    标记值

    K4A_COLOR_TRACK

    颜色轨道

    Matroska 轨道 UID

    K4A_DEPTH_TRACK

    深度轨道

    Matroska 轨道 UID

    K4A_IR_TRACK

    IR 轨道

    Matroska 轨道 UID

    K4A_IMU_TRACK

    IMU 轨道

    Matroska 轨道 UID

    K4A_CALIBRATION_FILE

    校准附件

    附件文件名


    友情链接: