菜鸟教程小白 发表于 2022-12-13 02:24:39

ios - 多个 SCNView 音频错误


                                            <p><p>我正在开发一款使用 SceneKit 支持正常播放和 VR 的游戏。正常播放时,我有一个 <code>SCNView</code>,一个也对应于 View 音频监听器的摄像头。当切换到 VR 模式时,我将屏幕分成两个 <code>SCNView</code>,它们都从两个不同的摄像机播放相同的场景,音频监听器位于它们之间,这里没问题。</p>

<p>在我的游戏中,我需要位置音频,所以我使用 <code>SCNAudioSuorce</code> 来使用 <code>SCNAction</code> 播放音效,但由于在两个 View 中都在播放相同的场景,我该如何静音其中一个并且音频仅来自另一个?我搜索了网络和文档,但没有找到任何相关信息。</p>

<p><strong>iOS 11 更新:</strong> 在 iOS 11 上测试我的应用并尝试在 VR 模式下播放声音后,应用在 <code>__UpdateAudioTransform</code> 的渲染队列线程上崩溃,因为我播放该声音,将其从 Action 中移除(包括其他节点转换)可使游戏正常运行。</p>

<p><strong>更新 1:</strong>感谢@rickster 的建议,我尝试实现 <code>SCNTechnique</code> 并遵循 Apple 文档,我得到了这个</p>

<pre><code>SCNTechnique(dictionary: [
    &#34;passes&#34; : [
      &#34;leftView&#34;: [
            &#34;draw&#34;: &#34;DRAW_SCENE&#34;,
            &#34;pointOfView&#34;: stereoCameraLeftName,
            &#34;viewport&#34;: &#34;(0, 0, 400, 400)&#34;
      ],
      &#34;rightView&#34;: [
            &#34;draw&#34;: &#34;DRAW_SCENE&#34;,
            &#34;pointOfView&#34;: stereoCameraRightName,
            &#34;viewport&#34;: &#34;(200, 0, 400, 400)&#34;
      ]
    ],
    &#34;sequence&#34;: [ &#34;leftView&#34;, &#34;rightView&#34; ]
    ])
</code></pre>

<p>其中 <code>stereoCameraLeftName</code> 和 <code>stereoCameraRightName</code> 在别处定义为字符串,并用作包含相应摄像机的节点的名称,并且视口(viewport)尺寸仅用于测试。当我将此技术应用于场景时,它不起作用,并且取决于场景 <code>pointOfView</code> 的设置方式,我要么看到充满背景颜色的完整场景(<code>pointOfView</code> 设置到用于非 VR 模式的相机,不再链接到场景图)或使用两个相机之一渲染的完整尺寸(<code>pointOfView</code> 设置为 <code>nil</code>),什么我失踪了吗?</p>

<p><strong>更新 2:</strong> 经过一些尝试和错误后,我发现为自定义视口(viewport)定义简单 channel 的正确方法是这样的,使用 <code>w</code> 和 <code> h</code> 定义为 <code>CGFloat</code>:</p>

<pre><code>let technique = SCNTechnique(dictionary: [
    &#34;passes&#34; : [
      &#34;leftView&#34;: [
            &#34;outputs&#34;: [ &#34;color&#34;: &#34;COLOR&#34; ],
            &#34;draw&#34;: &#34;DRAW_SCENE&#34;,
            &#34;colorStates&#34;: [
                &#34;clear&#34;: true,
                &#34;clearColor&#34;: &#34;sceneBackground&#34;
            ],
            &#34;pointOfView&#34;: stereoCameraLeftName,
            &#34;viewport&#34;: &#34;0 0 \(w) \(h)&#34;
      ],
      &#34;rightView&#34;: [
            &#34;outputs&#34;: [ &#34;color&#34;: &#34;COLOR&#34; ],
            &#34;draw&#34;: &#34;DRAW_SCENE&#34;,
            &#34;colorStates&#34;: [
                &#34;clear&#34;: false
            ],
            &#34;pointOfView&#34;: stereoCameraRightName,
            &#34;viewport&#34;: &#34;\(w) 0 \(w) \(h)&#34;,
            &#34;blendStates&#34;: [
                &#34;colorOp&#34;: &#34;add&#34;,
                &#34;alphaOp&#34;: &#34;add&#34;
            ]
      ]
    ],
    &#34;sequence&#34;: [ &#34;leftView&#34;, &#34;rightView&#34; ]
])
</code></pre>

<p>但是有一个问题:当第二遍渲染时,屏幕左侧保持黑色(清晰的颜色)并且右侧渲染正确,如果我排除此遍,只留下第一遍,左侧是正确的渲染和右侧按预期显示场景背景颜色。奇怪的是,如果不是在运行 iOS 11 的 iPhone 6s 上进行测试,而是在模拟器 (iOS 11) 上进行测试,似乎一切正常,我敢肯定,在结合这两个 channel 时我会遗漏一些东西。</p>

<p><strong>更新 2.1:</strong> 从第二遍中删除 <code>blendStates</code> 会得到相同的结果。</p>

<p><strong>更新 3:</strong>尝试重新创建 MWE 以重新创建问题我发现我的方法是正确的,我将尝试调查我项目的其他部分以找出问题所在。</p>

<p><strong>最终更新:</strong>问题似乎是由于 View 上的抗锯齿处于事件状态,禁用它使 <code>SCNTechnique</code> 工作正常,似乎是 iOS 11 的错误和我已经提交了错误报告。</p></p>
                                    <br><hr><h1><strong>Best Answer-推荐答案</ strong></h1><br>
                                            <p><p>这是尝试在多个 View 中渲染同一场景的众多问题之一。 (其他包括性能和并发性。)相反,只使用单个 View 可能是更好的选择,并使用 <a href="https://developer.apple.com/documentation/scenekit/scntechnique" rel="noreferrer noopener nofollow"><code>SCNTechnique</code></a>在其中渲染 View 的场景两次。</p>

<p>当您配置一种技术时,您可以为每个绘制 channel 单独设置 <code>pointOfView</code> — 如果您正在寻找立体分离,这可能会很方便。</p>

<p>您还可以为每个 channel 设置 <code>viewport</code>。如果您正在执行某种立体渲染,您可以使用它来使一个渲染 channel 覆盖 View 的一半,而另一个渲染 channel 覆盖另一半。</p></p>
                                   
                                                <p style="font-size: 20px;">关于ios - 多个 SCNView 音频错误,我们在Stack Overflow上找到一个类似的问题:
                                                        <a href="https://stackoverflow.com/questions/45417930/" rel="noreferrer noopener nofollow" style="color: red;">
                                                                https://stackoverflow.com/questions/45417930/
                                                        </a>
                                                </p>
                                       
页: [1]
查看完整版本: ios - 多个 SCNView 音频错误