功能描述

媒体播放器组件(MediaPlayer Kit)是一款功能强大的播放器,支持播放本地或在线的媒体资源。通过该播放器,你可以本地播放媒体资源,或将媒体资源同步分享给 Agora 频道内的远端用户观看/收听。

使用须知

  • 目前支持播放的媒体格式:AVI、MP4、MP3、MKV 和 FLV 格式的本地文件,HTTP、RTMP 和 RTSP 协议的在线媒体流。
  • 本地播放媒体资源时,只需单独使用 MediaPlayer Kit。分享媒体资源到远端时,需同时使用 MediaPlayer Kit,Agora Native SDK 和 RtcChannelPublishPlugin 三者。其中,MediaPlayer Kit 支持本地用户使用播放器功能,Native SDK 支撑本地用户和远端用户的实时音视频直播场景,RtcChannelPublishPlugin 支持将播放的媒体流发送给 Agora 频道中远端用户。
  • 分享媒体资源到远端时,播放器的画面会抢占主播摄像头采集的画面。所以,如果你希望远端用户同时看到主播和播放器的画面,则需另起一个进程来采集主播的画面。

准备开发环境

前提条件

  • Xcode 9.0 或以上版本
  • 支持 macOS 10.10 或以上版本的 macOS 设备

如果你的网络环境部署了防火墙,请根据应用企业防火墙限制打开相关端口。

分享媒体资源到远端时,还需有效的 Agora 账户(免费注册)。

创建项目

参考以下步骤创建一个 macOS 项目。

创建 macOS 项目
  1. 打开 Xcode 并点击 Create a new Xcode project

  2. 选择项目类型为 App,并点击 Next

  3. 输入项目信息,如项目名称、开发团队信息、组织名称和语言,并点击 Next

    Note:如果你没有添加过开发团队信息,会看到 Add account… 按钮。点击该按钮并按照屏幕提示登入 Apple ID,完成后即可选择你的账户作为开发团队。

  4. 选择项目存储路径,并点击 Create

  5. 进入 TARGETS > Project Name > Signing & Capabilities 菜单,选择 Automatically manage signing,并在弹出菜单中点击 Enable Automatic

集成 MediaPlayer Kit

  1. 前往 SDK 下载页面,获取最新版 MediaPlayer Kit,然后解压。

  2. 将 libs 文件夹内的 AgoraMediaPlayer.framework 文件复制到项目文件夹下。

  3. TARGETS > Project Name > General > Frameworks, Libraries, and Embedded Content 菜单中,将 AgoraMediaPlayer.framework 的状态修改为 Embed & Sign

  4. 打开 Xcode,进入 TARGETS > Project Name > Build Phases > Link Binary with Libraries 菜单,点击 + 添加如下库。在添加 AgoraMediaPlayer.framework 文件时,还需在点击 + 后点击 Add Other…,找到本地文件并打开。

    • AgoraMediaPlayer.framework

    • Accelerate.framework

    • CoreWLAN.framework

    • libc++.tbd

    • libresolv.9.tbd

    • SystemConfiguration.framework

    • VideoToolbox.framework

    添加后:

  5. 根据场景需要,在 info.plist 文件中,点击 + 图标开始添加如下内容,获取相应的设备权限:

    Key Type Value
    Privacy - Microphone Usage Description String 使用麦克风的目的,例如:for a video or audio call。
    Privacy - Camera Usage Description String 使用摄像头的目的,例如:for a video call。

集成 Native SDK

版本要求:2.4.0 或更高版本。

集成步骤:参考集成 Native SDK

集成 RtcChannelPublishPlugin

  1. 下载 MediaPlayerExtensions.zip 并解压文件。
  2. 将 ./MediaPlayerExtensions/apple/RtcChannelPublishPlugin.zip 文件解压,拷贝到你的项目文件中。

实现方法

本地播放媒体资源

集成 MediaPlayer Kit 后,参考如下步骤实现本地播放功能。

创建一个播放器实例

创建一个 AgoraMediaPlayer 实例。

如需同时播放不同的媒体资源,你可以创建多个实例。

获取事件回调

重写 AgoraMediaPlayerDelegate 代理方法,获取以下事件回调:

  • didChangedToPosition,报告当前播放进度
  • didChangedToState,报告播放状态改变
  • didOccurEvent,报告定位播放状态
  • didReceiveData,报告媒体附属信息(metadata)的接收
  • didReceiveAudioFrame,报告每帧音频帧的接收
  • didReceiveVideoFrame,报告每帧视频帧的接收

通过监听这些事件,你可以更好地掌握播放过程,并使用自定义格式数据(媒体附属信息)。如果播放发生异常,你可以根据这些事件排查问题。

准备播放

  1. 调用 AgoraMediaPlayer 接口的 setView 方法设置播放器的渲染视图。

  2. 调用 AgoraMediaPlayer 接口的 setRenderMode 方法设置播放器视图的渲染模式。

  3. 调用 AgoraMediaPlayer 接口的 open 方法打开媒体资源。媒体资源路径可以为网络路径或本地路径,支持绝对路径和相对路径。

    请收到 didChangedToState 回调报告播放状态为 AgoraMediaPlayerStateOpenCompleted(2) 后再进行下一步操作。

  4. 调用 AgoraMediaPlayer 接口的 play 方法本地播放该媒体资源。

调节播放设置

调用 AgoraMediaPlayer 接口的其他方法,你可以实现如下播放设置:

  • 暂停/恢复播放,调节播放进度,调节本地播放音量等。
  • 获取媒体资源总时长,获取播放进度,获取当前播放状态,获取该媒体资源中媒体流的个数和每个媒体流的详细信息。

结束播放

  1. 调用 AgoraMediaPlayer 接口的 stop 方法停止播放。
  2. setView 方法中 view 赋值为 NULL,释放 view。
    1. 使用 ARC 内存管理机制释放 AgoraMediaPlayer 实例。

示例代码

_mediaPlayerKit = [[AgoraMediaPlayer alloc] initWithDelegate:self];
[_mediaPlayerKit setView:self.containerView];
[_mediaPlayerKit open:url startPos:0];
[_mediaPlayerKit play];
[_mediaPlayerKit stop];
[_mediaPlayerKit seekToPosition:value];
[_mediaPlayerKitadjustVolume:volume];

 //重写代理方法 获得播放器的事件回调
- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
       didChangedToState:(AgoraMediaPlayerState)state
                   error:(AgoraMediaPlayerError)error;
{
     //todo
}


- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
    didChangedToPosition:(NSInteger)position;
{
}


- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
          didOccurEvent:(AgoraMediaPlayerEvent)event;
{
     //todo
}


- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
          didReceiveData:(NSString *)data
                  length:(NSInteger)length;
{
     //todo
}


- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
    didReceiveVideoFrame:(CVPixelBufferRef
{
    //todo
}


- (void)AgoraMediaPlayer:(AgoraMediaPlayer *_Nonnull)playerKit
    didReceiveAudioFrame:(CMSampleBufferRef)
{
    //todo
};

分享媒体资源到远端

集成 MediaPlayer Kit、Agora Native SDK 和 RtcChannelPublishPlugin 后,参考如下步骤将本地用户使用播放器播放的媒体资源分享给 Agora 频道内的远端用户。

实例化

  1. 实例化 AgoraRtcEngineKit 对象。
  2. 实例化 AgoraMediaPlayer 和 RtcChannelPublishHelper 对象。

播放器完成准备工作

参考本地播放资源获取事件回调,完成准备播放。

请收到 didChangedToState 回调报告播放状态为 AgoraMediaPlayerStatePlaying(3) 后再进行下一步操作。

本地用户加入频道

参考 RTC 快速开始,实现本地用户以主播身份加入 Agora 直播频道:

  1. 调用 setChannelProfile 方法设置频道场景为直播。
  2. 调用 setClientRole 方法设置本地用户角色为主播。
  3. 调用 enableVideo 方法开启视频模块。
  4. 调用 joinChannelByToken 方法使本地用户加入频道。

请收到 joinSuccessBlockdidJoinChannel 回调后再进行下一步操作。

远端用户的角色设为 BROADCASTER 后,Native SDK 会自动开启回声消除模块。因此,为避免远端用户听到播放视频的回声,Agora 建议你使至少一个远端用户以主播身份加入频道。

开始分享

  1. 调用 attachPlayerToRtc 方法将播放器和 Agora 频道捆绑。播放器画面将占据本地用户视图。
  2. 为避免远端用户听到播放音视频的回声,请调用 adjustPlayoutSignalVolume 方法设置播放音量为 0,再调用 AgoraMediaPlayer 接口的 mute 方法设置播放器静音。
  3. 调用 publishVideo/publishAudio 方法将播放的视频/音频流分享给 Agora 频道内远端用户。
  4. 调用 adjustPublishSignalVolume 方法调节远端播放音量。

取消分享

  1. 调用 unpublishVideo/unpublishAudio 方法取消分享该视频/音频流。
  2. 调用 detachPlayerFromRtc 方法将播放器和 Agora 频道解绑。
  3. (可选)调用 setVideoSource 方法将播放器画面切换为主播画面,使远端用户重新看到主播。
请不要略过此步直接调用 leaveChannel 使本地用户取消分享媒体流,否则本地用户重新加入频道时可能会出现以下问题:
  • 之前停止分享的媒体流会自动发送给频道内远端用户。
  • 播放媒体资源时,音画不同步。
  • 示例代码

    _rtcEnginekit = [AgoraRtcEngineKit sharedEngineWithAppId:@"YOUR_APPID" delegate:self];
    [_rtcEnginekit setChannelProfile:AgoraChannelProfileLiveBroadcasting];
    [_rtcEnginekit setClientRole:AgoraClientRoleBroadcaster];
    [_rtcEnginekit enableVideo];
    [_rtcEnginekit joinChannelByToken:token channelId:channelid info:""  uid:"" joinSuccess:NULL];
    [[AgoraRtcChannelPublishHelper shareInstance] attachPlayerToRtc:_mediaPlayerKit RtcEngine:_rtcEnginekit];
    [[AgoraRtcChannelPublishHelper shareInstance] publishAudio];
    [[AgoraRtcChannelPublishHelper shareInstance] publishVideo];
    [[AgoraRtcChannelPublishHelper shareInstance] detachPlayerFromRtc];
    
    if(!_defaultCamera)
    {
        _defaultCamera = [[AgoraRtcDefaultCamera alloc] init];
    }
    [_rtcEngineKit setVideoSource:NULL];
    [_rtcEngineKit setVideoSource:_defaultCamera];

    获取日志文件

    日志文件包含媒体播放器组件运行时产生的所有日志。日志文件的输出地址为 App Sandbox/Library/caches/agoraplayer.log

    注意事项

    常见的语音路由有蓝牙设备、普通耳机和设备的扬声器。为避免播放过程中,本地用户切换语音路由后,新的语音路由无声的问题,Agora 建议你进行如下操作:

    • 在本地播放媒体资源的场景下, Agora 建议本地用户在 open 前切换语音路由。

      如果本地用户在 open 后切换语音路由,新的语音路由将无声,你需要重新调用 openplay 方法重新播放。

    • 在分享媒体资源到远端的场景下,Agora 建议你使用 3.0.0 版本的 Native SDK,并在 mute 后再进行语音路由切换。

    API 文档

    详见 API 文档