如何在 python asyncio 中等待 select.select 调用
Posted
技术标签:
【中文标题】如何在 python asyncio 中等待 select.select 调用【英文标题】:How to await a select.select call in python asyncio 【发布时间】:2018-01-14 10:16:02 【问题描述】:我有一个 python 3.6 程序,我在其中使用 asyncio 包事件循环。我的一个数据源来自一个不是围绕 asyncio 构建的 api。我的连接对象包含一个名为_connection
的成员,它只是一个python 套接字。现在我可以在 select 语句中使用它来判断数据何时准备就绪。
async def run(self):
while True:
if select.select([self._q._connection], [], [])[0]:
msg = self._q.receive()
print(msg)
我真正想要的是……
async def run(self):
while True:
if await select.select([self._q._connection], [], [])[0]:
msg = self._q.receive()
print(msg)
我知道 asyncio 事件循环中有一个 sock_recv
函数,但是我需要 api 来进行实际的读取和解码。我试过了,但它只是通过等待,我认为这是有道理的,因为我说的是 0 字节。
async def run(self):
while True:
print('A')
await asyncio.get_event_loop().sock_recv(self._q._connection, 0)
print('B')
msg = self._q.receive()
print(msg)
我现在能想到的唯一解决方案是在选择中添加一个小的超时,然后在没有数据的情况下调用asyncio.sleep
,但这似乎是一种低效的方法。我希望有像asyncio.select
这样的东西。有人想推荐另一种方法吗?
编辑:现在我想出了这个。我不喜欢它,因为它增加了额外的四分之一秒延迟(可能对我的应用程序来说并不重要,但它仍然困扰着我。)
async def run(self):
while True:
if select.select([self._q._connection], [], [], 0)[0]:
print(self._q.receive())
else:
await asyncio.sleep(0.25)
【问题讨论】:
【参考方案1】:您可以使用loop.add_reader 等待您的套接字的读取可用性:
async def watch(fd):
future = asyncio.Future()
loop.add_reader(fd, future.set_result, None)
future.add_done_callback(lambda f: loop.remove_reader(fd))
await future
async def run(self):
while True:
await watch(self._q._connection)
msg = self._q.receive()
print(msg)
但是,在不完全重写的情况下避免您提到的库的所有阻塞 IO 调用将非常棘手。相反,我建议使用loop.run_in_executor 方法来安排线程池中的阻塞 IO 调用:
async def run(self):
loop = asyncio.get_event_loop()
while True:
msg = await loop.run_in_executor(None, self._q.receive)
print(msg)
【讨论】:
以上是关于如何在 python asyncio 中等待 select.select 调用的主要内容,如果未能解决你的问题,请参考以下文章
异步等待函数中的 Python asyncio.semaphore