flask (flask)python如何单进程压满服务

来源:互联网  时间:2016/6/20 19:48:25

关于网友提出的“flask (flask)python如何单进程压满服务”问题疑问,本网通过在网上对“flask (flask)python如何单进程压满服务”有关的相关答案进行了整理,供用户进行参考,详细问题解答如下:

问题:flask (flask)python如何单进程压满服务
描述:

现在有一个gunicorn + flask 做的server,是用作服务的,读一些数据,吐一些输出。client用的是requests包,读取文件,然后将行分割,作为参数传给server,等待server的回应。
问题是:我client即使用多线程去访问server,发现server的CPU占用率始终只有60%,如何能让cpu利用率提升到100%?

PS: 同时启动多个client做测试的时候,cpu会到100%,但如何在单个client.py中实现?


解决方案1:

Python有GIL即全局解释器锁。因此多线程Python脚本无法同时执行,只能用到单核。
你可以用multiprocessing来实现多进程,或者考虑将复杂的逻辑改为用c实现。

下面的代码就是根据cpu核心数量开启进程池,然后其中map第一个参数是业务方法,第二个是迭代器,每当有空闲进程时,进程池就会取下一组数据进行计算。

pool = Pool(processes=os.cpu_count())
results = pool.map(__read_excle, [(r'resource/linkdata/' + i, i) for i in os.listdir(r'resource/linkdata/')])
pool.close()
pool.join()

上一篇flask admin如何让sqlalchemy模型“挂”到两(多)个模型?
下一篇CDN更新不完全?
明星图片
相关文章
《flask (flask)python如何单进程压满服务》由码蚁之家搜集整理于网络,
联系邮箱:mxgf168#qq.com(#改为@)