结合Agora视频SDK 和ARKit,实现 AR 场景下的视频连麦直播Demo

official
swift

#1

Github传送门

这个开源示例项目演示了如何结合 Agora视频SDK 和ARKit,实现 AR 场景下的视频连麦直播。

在这个示例项目中包含了以下功能:

  • 使用自定义采集协议,将 ARCamera 的视频数据直播到频道中;
  • 使用自定义渲染协议,将频道内连麦端的视频数据渲染到 AR 场景中。

运行示例程序

首先在 Agora.io 注册账号,并创建自己的测试项目,获取到 AppID。将 AppID 填写进 ViewController.swift 对应位置。

然后在 Agora.io SDK 下载 视频通话 + 直播 SDK ,解压后将其中的 libs/AgoraRtcEngineKit.framework 复制到本项目的 “Agora-Video-With-ARKit” 文件夹下。

自定义采集和自定义渲染协议从 2.1.0 版本开始提供

最后使用 Xcode 打开 Agora-Video-With-ARKit.xcodeproj,连接 iPhone/iPad 测试设备,设置有效的开发者签名后即可运行。

##使用方法

  1. 对着一个较大的水平面缓慢移动,直到 ARKit 识别出平面(会有一个红色矩形闪现);
  2. 在识别出的平面任意位置点击,添加虚拟现实屏;
  3. 使用同一个 AppId 运行 OpenLive,以主播身份加入 “agoraar” 频道;
  4. 虚拟显示屏上会出现主播的画面。

运行环境

  • Xcode 9.0 +
  • 支持 ARKit 的 iOS 真机设备
  • 不支持模拟器

Github传送门


Agora SDK Demo汇总