/Note for GPAC

Created Thu, 30 Dec 2021 10:23:26 +0800 Modified Fri, 09 Aug 2024 13:25:47 +0000
507 Words 2 min

Dash 客户端自适应逻辑

  1. tile priority setup:根据定义的规则对 tile 进行优先级排名。
  2. rate allocation:收集网络吞吐量信息和 tile 码率信息,使用确定的 tile 优先级排名为其分配码率,努力最大化视频质量。
  3. rate adaption:在播放过程中,执行码率自适应算法,基于播放速度、质量切换的次数、缓冲区占用情况等。

tile priority setup

  1. Dash 客户端加载带有 SRD 信息的 MPD 文件时,首先确定使用 SRD 描述的 tile 集合。

  2. 确定 tile 之间的编码依赖(尤其是使用 HEVC 编码的 tile 时)

  3. 为每个独立的 tile 向媒体渲染器请求一个视频对象,并向其通知 tile 的 SRD 信息。

  4. 渲染器根据需要的显示大小调整 SRD 信息之后,执行视频对象的最终布局。

  5. 一旦 tile 集合被确定,客户端向每个 tile 分配优先级。(每次码率自适应执行的时候都需要分配 tile 优先级)

    image-20211230103917112

Rate allocation

  1. 首先需要估计可用带宽(tile 场景和非 tile 场景的估计不同)
  2. 在一个视频段播放过程中,客户端需要去下载多个段(并行-HTTP/2)
  3. 带宽可以在下载单个段或多个段的平均指标中估计出来。
  4. 一旦带宽估计完成,码率分配将 tile 根据其优先级进行分类。
  5. 一开始所有的 tile 都分配成最低的优先级对应的码率,然后从高到低依次增长优先级高的 tile 的码率。
  6. 一旦每个 tile 的码率分配完成,将为目标带宽等于所选比特率的每个 tile 调用常规速率自适应算法