草庐IT

iphone - iOS将音频从一台iOS设备传输到另一台iOS设备

coder 2023-07-26 原文

我从设备iTunes库中获得一首歌曲，然后将其推送到AVAsset中:

- (void)mediaPicker: (MPMediaPickerController *)mediaPicker didPickMediaItems:(MPMediaItemCollection *)mediaItemCollection
{
    NSArray *arr = mediaItemCollection.items;

    MPMediaItem *song = [arr objectAtIndex:0];

    NSData *songData = [NSData dataWithContentsOfURL:[song valueForProperty:MPMediaItemPropertyAssetURL]];
}

然后，我有了这个Game Center方法来接收数据:
- (void)match:(GKMatch *)match didReceiveData:(NSData *)data fromPlayer:(NSString *)playerID

我在弄清楚如何通过GameCenter发送此AVAset，然后使其在接收设备上播放时遇到了很多麻烦。

我已阅读:
http://developer.apple.com/library/ios/#documentation/MusicAudio/Reference/AudioStreamReference/Reference/reference.html#//apple_ref/doc/uid/TP40006162

http://developer.apple.com/library/ios/#documentation/AudioVideo/Conceptual/MultimediaPG/UsingAudio/UsingAudio.html#//apple_ref/doc/uid/TP40009767-CH2-SW5

http://developer.apple.com/library/mac/#documentation/AVFoundation/Reference/AVAudioPlayerClassReference/Reference/Reference.html

http://developer.apple.com/library/mac/#documentation/MusicAudio/Conceptual/AudioQueueProgrammingGuide/Introduction/Introduction.html

我只是失去了。信息重载。

我已经实现了Cocoa With Love的音频流代码，但是我不知道如何将通过GameCenter接收到的NSData导入到他的代码中。
http://cocoawithlove.com/2008/09/streaming-and-playing-live-mp3-stream.html

有人可以帮我解决这个问题吗？因此，我需要帮助的部分只是简单地将歌曲数据分解为数据包(或者它可以工作)，然后遍历这些数据包并通过游戏包发送，然后解析该数据，并将其作为在AS上播放而进入接收设备。它进来了。

最佳答案

您需要查看的API是"Audio Queue Services"。

正确，这里是您需要做的基本概述。

播放音频时，可以设置队列或服务。该队列将要求一些音频数据。然后，当它播放完所有内容后，它会要求更多。这种情况一直持续到您停止队列或没有更多数据可播放为止。

iOS中两个主要的较低级别的API是“音频单元”和“音频队列”。在较低的层次上，我指的是一个比说“仅播放此mp3”或其他内容更为具体的API。

我的经验是“音频单元”的延迟较低，但是“音频队列”更适合于流式传输音频。因此，我认为对于您而言，后者是一个更好的选择。

您需要做的关键部分是缓冲。这意味着要充分加载数据，以使播放没有间隙。您可能希望通过最初加载大量数据来处理此问题。然后您就在玩。您将在内存中拥有足够大的缓冲区，同时在后台线程上接收更多数据。

我建议您仔细研究的示例项目是SpeakHere。特别要看一下SpeakHereController.mm和AQPlayer.mm类。

Controller 处理诸如启动和停止AQPlayer之类的事情。 AQPlayer代表AudioQueue。仔细看看AQPlayer::AQBufferCallback。这是队列需要更多数据时调用的回调方法。

您需要确保队列数据的设置和接收到的数据格式完全匹配。检验诸如 channel 数(单声道或立体声？)，帧数，整数或浮点数以及采样率之类的东西。如果有什么不匹配的地方，您可能会在通过各个缓冲区的过程中遇到EXC_BAD_ACCESS错误，或者会遇到白噪声，或者-如果采样率错误，则声音会变慢或加速向上。

请注意，SpeakHere运行两个音频队列。一种用于记录，另一种用于播放。所有音频内容都使用数据缓冲区工作。因此，您总是将圆形指针传递给缓冲区。因此，例如在播放过程中，您会说一个具有20秒音频的存储缓冲区。也许每秒您的回调都会被队列调用，本质上是说“请再给我一秒钟的数据值(value)”。您可以将其视为一个回放头，它在数据中移动以请求更多信息。

让我们更详细地看一下。与SpeakHere不同，您将在内存缓冲区中进行处理，而不是将音频写到临时文件中。

请注意，如果要处理大量数据，则在iOS设备上，别无选择，只能将大部分数据保留在磁盘上。特别是如果用户可以播放音频，倒带音频等，则需要将其全部保存在某个地方!

无论如何，假设AQPlayer将要从内存中读取，我们将需要进行如下更改。

首先，用AQPlayer.h存放数据的地方:

void SetAudioBuffer(float *inAudioBuffer) { mMyAudioBuffer = inAudioBuffer; }

您已经在NSData对象中存储了该数据，因此您只需传递从对[myData bytes]的调用返回的指针即可。

是什么将这些数据提供给音频队列？那就是在AQPlayer中设置的回调方法:
void AQPlayer::AQBufferCallback(void *                  inUserData,
                            AudioQueueRef           inAQ,
                            AudioQueueBufferRef     inCompleteAQBuffer)

我们将部分数据添加到音频队列的方法是AudioQueueEnqueueBuffer:
AudioQueueEnqueueBuffer(inAQ, inCompleteAQBuffer, 0, NULL);
inAQ是我们的回调收到的对队列的引用。inCompleteAQBuffer是指向音频队列缓冲区的指针。

那么，如何将数据(即通过调用NSData对象上的bytes方法返回的指针)放入音频队列缓冲区inCompleteAQBuffer中呢？

使用memcpy:
memcpy(inCompleteAQBuffer->mAudioData, THIS->mMyAudioBuffer + (THIS->mMyPlayBufferPosition / sizeof(float)), numBytesToCopy);

您还需要设置缓冲区大小:
        inCompleteAQBuffer->mAudioDataByteSize =  numBytesToCopy;

除非您即将用完数据，否则numBytesToCopy总是一样的。例如，如果您的缓冲区中有2秒钟的音频数据，并且您有9秒钟的播放时间，那么对于前四个回调，您将传递2秒钟的音频。对于最后的回调，您将只剩下1秒的数据量。 numBytesToCopy必须反射(reflect)这一点。
    // Calculate how many bytes are remaining? It could be less than a normal buffer
    // size. For example, if the buffer size is 0.5 seconds and recording stopped
    // halfway through that. In which case, we copy across only the recorded bytes
    // and we don't enqueue any more buffers.
    SInt64 numRemainingBytes = THIS->mPlayBufferEndPosition - THIS->mPlayBufferPosition;

    SInt64 numBytesToCopy =  numRemainingBytes < THIS->mBufferByteSize ? numRemainingBytes : THIS->mBufferByteSize;

最后，我们前进播放头。在回调中，我们为队列提供了一些要播放的数据。下次收到回调时会发生什么？我们不想再次提供相同的数据。除非您正在做一些时髦的dj循环操作!

因此，我们前进了磁头，该磁头基本上只是指向音频缓冲区的指针。指针像记录中的指针一样在缓冲区中移动:
    SELF->mPlayBufferPosition += numBytesToCopy;

而已!还有其他逻辑，但是您可以通过研究SpeakHere中的完整回调方法来获得。

我必须强调几点。首先，不要只是将我的代码复制并粘贴到上面。绝对确保您了解自己在做什么。毫无疑问，您会遇到问题，并且需要了解正在发生的事情。

其次，确保音频格式相同，甚至更好地理解音频格式。这在Audio Queue Services Programming Guide in Recording Audio中介绍。请参见 list 2-8，指定音频队列的音频数据格式。

了解您拥有最原始的数据单位(整数或浮点数)至关重要。单声道或立体声您在一帧中有一个或两个 channel 。定义该帧中有多少个整数或浮点数。然后，每个数据包都有帧(可能为1)。您的采样率决定了您每秒拥有多少个数据包。

所有内容都包含在文档中。只要确保一切都匹配，否则您会听到一些奇怪的声音!

祝你好运!

关于iphone - iOS将音频从一台iOS设备传输到另一台iOS设备，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/8357514/

iOSiphonecodebrdocumentationobjective-cipadstream

有关iphone - iOS将音频从一台iOS设备传输到另一台iOS设备的更多相关文章

  1. ruby - 如何验证 IO.copy_stream 是否成功 - 2

    这里有一个很好的答案解释了如何在Ruby中下载文件而不将其加载到内存中:https://stackoverflow.com/a/29743394/4852737require'open-uri'download=open('http://example.com/image.png')IO.copy_stream(download,'~/image.png')我如何验证下载文件的IO.copy_stream调用是否真的成功——这意味着下载的文件与我打算下载的文件完全相同，而不是下载一半的损坏文件？documentation说IO.copy_stream返回它复制的字节数，但是当我还没有下

  2. Ruby 文件 IO 定界符？ - 2

    我正在尝试解析一个文本文件，该文件每行包含可变数量的单词和数字，如下所示:foo4.500bar3.001.33foobar如何读取由空格而不是换行符分隔的文件？有什么方法可以设置File("file.txt").foreach方法以使用空格而不是换行符作为分隔符？ 最佳答案 接受的答案将slurp文件，这可能是大文本文件的问题。更好的解决方案是IO.foreach.它是惯用的，将按字符流式传输文件:File.foreach(filename,""){|string|putsstring}包含“thisisanexample”结果的

  3. 怎样用一台手机做自媒体？ - 2

    其实做自媒体的成本并不高，入门只需要一部手机即可！在手机上找视频素材、使用手机剪辑视频、最后使用手机发布视频作品获得收益！方法并不难，今天这期内容就来给粉丝们分享一种小方法，每天稳定收益100-300，抓紧点赞收藏！1、找素材（1）使用手机拍摄自己喜欢的经典段落，使用程序把文案内容提取出来（2）也可以在豆瓣、知乎、微博等网站中找一些自己需要的文案素材（3）把文案进行润色修改，可以加入一些自己的观点（4）视频素材可以使用软件中自带的素材，也可以在素材网站中下载完整版的素材2、文案配音（1）把复制好的文案直接导入小程序中（2）调整音色、音调后一键合成音频即可（3）可以选择自己朗读配音，需要花一点时

  4. 【鸿蒙应用开发系列】- 获取系统设备信息以及版本API兼容调用方式 - 2

    在应用开发中，有时候我们需要获取系统的设备信息，用于数据上报和行为分析。那在鸿蒙系统中，我们应该怎么去获取设备的系统信息呢，比如说获取手机的系统版本号、手机的制造商、手机型号等数据。1、获取方式这里分为两种情况，一种是设备信息的获取，一种是系统信息的获取。1.1、获取设备信息获取设备信息，鸿蒙的SDK包为我们提供了DeviceInfo类，通过该类的一些静态方法，可以获取设备信息，DeviceInfo类的包路径为：ohos.system.DeviceInfo.具体的方法如下：ModifierandTypeMethodDescriptionstatic StringgetAbiList​()Obt

  5. Get https://registry-1.docker.io/v2/: net/http: request canceled while waiting - 2

    1.错误信息：Errorresponsefromdaemon:Gethttps://registry-1.docker.io/v2/:net/http:requestcanceledwhilewaitingforconnection(Client.Timeoutexceededwhileawaitingheaders)或者：Errorresponsefromdaemon:Gethttps://registry-1.docker.io/v2/:net/http:TLShandshaketimeout2.报错原因：docker使用的镜像网址默认为国外，下载容易超时，需要修改成国内镜像地址（首先阿里

  6. ruby-on-rails - 禁用设备的 :confirmable on-the-fly to batch-generate users - 2

    Devise是一个Ruby库，它为我提供了这个User类:classUser当写入:confirmable时，注册时会发送一封确认邮件。上周我不得不批量创建300个用户，所以我在恢复之前注释掉了:confirmable几分钟。现在我正在为用户批量创建创建一个UI，因此我需要即时添加/删除:confirmable。(我也可以直接修改Devise的源码，但我宁愿不去调和它)问题:如何即时添加/删除:confirmable？ 最佳答案 WayneConrad的解决方案:user=User.newuser.skip_confirmation

  7. ruby - 为什么不能使用类IO的实例方法noecho？ - 2

    print"Enteryourpassword:"pass=STDIN.noecho(&:gets)puts"Yourpasswordis#{pass}!"输出:Enteryourpassword:input.rb:2:in`':undefinedmethod`noecho'for#>(NoMethodError) 最佳答案 一开始require'io/console'后来的Ruby1.9.3 关于ruby-为什么不能使用类IO的实例方法noecho？，我们在StackOverflow上

  8. ruby - 为 IO::popen 拯救 "command not found" - 2

    当我将IO::popen与不存在的命令一起使用时，我在屏幕上打印了一条错误消息:irb>IO.popen"fakefake"#=>#irb>(irb):1:commandnotfound:fakefake有什么方法可以捕获此错误，以便我可以在脚本中进行检查？ 最佳答案 是:升级到ruby​​1.9。如果您在1.9中运行它，则会引发Errno::ENOENT，您将能够拯救它。(编辑)这是在1.8中的一种hackish方式:error=IO.pipe$stderr.reopenerror[1]pipe=IO.popen'qwe'#

  9. ruby - IO::EAGAINWaitReadable:资源暂时不可用 - 读取会阻塞 - 2

    当我尝试使用“套接字”库中的方法“read_nonblock”时出现以下错误IO::EAGAINWaitReadable:Resourcetemporarilyunavailable-readwouldblock但是当我通过终端上的IRB尝试时它工作正常如何让它读取缓冲区？ 最佳答案 IgetthefollowingerrorwhenItrytousethemethod"read_nonblock"fromthe"socket"library当缓冲区中的数据未准备好时，这是预期的行为。由于异常IO::EAGAINWaitReadab

  10. ruby - 使用 Ruby 将 HTTP GET 的响应主体流式传输到 HTTP POST - 2

    我正在尝试下载一个大文件，然后使用Ruby将该文件发布到REST端点。该文件可能非常大，即超过可以存储在内存中甚至磁盘上的临时文件中的容量。我一直在用Net::HTTP尝试这个，但我愿意接受任何其他库(rest-client等)的解决方案，只要他们做我想做的事情。这是我尝试过的:require'net/http'source_uri=URI("https://example.org/very_large_file")source_request=Net::HTTP::Get.new(source_uri)source_http=Net::HTTP.start(source_uri.ho

随机推荐