오디오 스트림을 처리하고 VoIP 용으로 믹싱하는 방법

Question

우리는 Java 기반의 Voice over IP 프로그램을 개발 중이고 스트림과 서버 측 스트레스를 합리적인 수준으로 유지하는 효과적인 방법을 찾아야합니다. 우리는 멀티 플레이어 게임을 위해이를 작성하고 있으며 오디오 믹싱 및 전송 방법을 결정하는 몇 가지 모드를 계획하고 있습니다. 우리는 음성 채팅에 참여하지 않기로 결정했다면 쓸모없는 스트림을 방치하지 않기 위해 "Opt In"을 사용할 계획입니다. 그 외에도 채널, 개인 채팅 (2 명) 및 근접성을 생각하고 있습니다. 16 명이 넘는 사용자가있는 채널을 사용하는 경우 x^2 스트림 (이 경우 256 개)을 피할 방법이 있는지 찾아야합니다. 우리는 또한 게임을 실행하기 때문에 클라이언트 측 작업을 합리적인 수준으로 유지해야합니다. 대형 서버가 처리 할 수있는 작업의 양은 채널에 더 많은 사람들이 있기 때문에 기하 급수적 일 것입니다. 채널당 사용자 수를 제한하거나 서버 소유자가 채널 수를 제한 할 수 있도록 허용해야 할 수도 있습니다. 이 게임은 인기에 따라 한 번에 한 서버에 약 40-500 명을 가질 수 있으며 서버의 처리 및 대역폭에서 이러한 유형의 스트레스를 처리하는 방법을 잘 모릅니다.

본질적으로 우리는 효율적인 처리 방법을 가진 기존 시스템에 대해 알고있는 사람이 있는지 묻습니다. 우리는 오디오 인코딩에 JSpeex를 사용하고 있습니다. 그렇다면이 문제를 해결하기위한 방법이 있습니까? 아니면 커뮤니티의 아이디어까지 포함 할 수 있습니까? 우리는 또한 우리가 개발해 온 소규모 Skype 프로그램에서 이것을 다시 구현할 계획입니다.

Answer 1

왜 256 스트림이 필요한지 알지 못합니다. 클라이언트에서 클라이언트로 직접 이동하면 안됩니다.

각 클라이언트에 대해 서버에 단방향 양방향 연결이 필요합니다. 모든 입/출력 오디오는 서버를 통해 전달됩니다. 서버는 플레이어가 수신 할 모든 오디오를 하나의 오디오 스트림으로 멀티플렉싱하고이를 함께 전달합니다.

개인 채팅 중에는 서버가 다른 플레이어의 패킷 만 사용자와 개별적으로 전달합니다.

근접성을 사용할 때 서버는 범위 내의 모든 플레이어의 오디오를 단일 스트림으로 멀티플렉싱합니다.

필자는 오디오 인코딩 패키지가 여러 채널에서 오디오를 멀티플렉싱하는 기능을 지원한다고 가정하지만 JSpeex에 대해서는 아무 것도 모릅니다.