Question

我正在开发一个应用程序，用户通过本地网络将音频流式传输给另一个用户。用户还通过时钟发送同步线路另一侧的应用程序。所以基本上我有两个来自用户A的流和一个来自用户B的流。

----------                              ---------- 
|        | --------> CLOCK SIGNAL --->  |        |
| USER A | <-------- AUDIO SIGNAL <---  | USER B | 
|        | --------> AUDIO SIGNAL --->  |        |
----------                              ----------

这一切都应该实时发生。（想想Skype）
现在，我注意到当我通过同一个插槽发送它们时，某些信号互相干扰。如果我将时钟信号与音频信号一起发送，我只会发出噪音。如果我停止时钟，噪音消失了，我得到一个清晰的音频信号。

是否可以通过纯Python套接字实现来实现这一目标？我应该如何报道呢？

Answer 1

一种选择是将您的信息流刻录成消息以交错时钟和音频数据。消息可以是带有类型指示符的标头，以及使用struct模块编码的后续字节数。这段代码是未经验证的，实际上是伪代码，但类似于......

import struct

def send_audio(audio_socket, audio_data_fragment):
    """send the next bit of audio. if fragment size is large,
    the next clock send will be delayed"""
    audio_socket.sendall(struct,pack('!bL', 0, len(audio_data_fragment))
    audio_socket.sendall(audio_data_fragment)

def send_clock(audio_socket, clock_val):
    """send the next clock info. just guessing that its an 8 byte
    binary number as an example"""
    audio_socket.sendall(struct.pack('!bQ', 1, clock_val))

def _recvall(sock, sz):
    buf = ''
    while len(buf) < sz:
        buf += sock.recv(sz - len(buf))
    return buf

def recv(audio_socket):
    """recv next message and return a tuple of (type, data)"""
    msg_type = struct.unpack('b', audio_socket.recv(1)))
    if msg_type == 0:
        audio_len = struct.unpack('!L', _recvall(audio_socket, 4))
        audio = _recvall(audio_socket, audio_len)
        return 'audio', audio
    elif msg_type == 1:
        clock = struct.unpack('!Q', _recvall(audio_socket, 8))
        return 'clock', clock

另一种选择是选择一个为您制作消息的现有系统。它可能是python标准xmlrpc模块，或者可能是zeromq，协议缓冲区或trift。那里有很多选择。

python中的双向实时通信

1 个答案: