如何在服务器上处理繁重的请求?

2024-04-19 21:18:06 发布

您现在位置:Python中文网/ 问答频道 /正文

我不知道这是不是该问的地方,但是,我急切地想要一个答案。你知道吗

这里的问题不是请求的数量,而是单个请求所需的时间。对于每个请求,服务器必须查询大约12个不同的数据源,服务器获取数据最多需要6个小时(让我们从这里保留请求超时,因为这不是服务器直接与客户机通信)。此服务器正在从kafka获取消息,然后开始从源获取数据)。我应该想出一个可扩展的解决方案。有人能帮我吗?你知道吗

问题不止于此:

  • 一旦服务器得到数据,他就必须使用spark将数据推给kafka进行进一步的计算。此部分将使用流式api。你知道吗

我对任何web框架或python中的任何扩展解决方案都持开放态度。你知道吗


Tags: kafka数据答案服务器api消息数量客户机