经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 程序设计 » Python » 查看文章
python性能优化
来源:cnblogs  作者:有虫子啊  时间:2018/10/22 16:28:58  对本文有异议

1。去除不必要的显式for循环,使用向量化计算。

  1. 1 import time
  2. 2 import numpy as np
  3. 3
  4. 4
  5. 5 def for_time():
  6. 6 """Make a array, len = 1000000, use for loop add one."""
  7. 7 start = time.time()
  8. 8 list_data = np.arange(0, 10000000, 1)
  9. 9 for i in range(1000000):
  10. 10 list_data[i] += 1
  11. 11 print 'for loop used time: ', time.time() - start
  12. 12
  13. 13
  14. 14 def vector_time():
  15. 15 """make a array, use vector calculation add one."""
  16. 16 start = time.time()
  17. 17 list_data = np.arange(0, 10000000, 1)
  18. 18 list_data += 1
  19. 19 print 'vector calculation used time: ', time.time() - start
  20. 20
  21. 21
  22. 22 if __name__ == '__main__':
  23. 23 for_time()
  24. 24 vector_time()

for loop used time:  0.359999895096
vector calculation used time:  0.0160000324249

 

2. 使用多进程,开核。

  1. 1 import multiprocessing
  2. 2
  3. 3
  4. 4 def use_pool(func, args):
  5. 5 pool = multiprocessing.Pool(processes=2)
  6. 6 res = pool.map(func, args)
  7. 7 pool.close()
  8. 8 pool.join()
  9. 9 return res

3.使用sklearn.extenals.joblib 扩展库

  1. 1 from sklearn.externals.joblib import Parallel, delayed
  2. 2
  3. 3
  4. 4 def parallel(func, arg):
  5. 5 Parallel(-1)(delayed(func)(i) for i in arg)

4. 使用bottleneck库。

该库基于Cpython实现,着眼于高性能。

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号