prometheus_unbound + python   331

python - Multiprocess multiple files in a list - Stack Overflow
import multiprocessing

def process(file):
pass # do stuff to a file

p = multiprocessing.Pool()
for f in glob.glob(folder+"*.csv"):
# launch a process for each file (ish).
# The result will be approximately one process per CPU core available.
p.apply_async(process, [f])

p.close()
p.join()
multiprocessing  python 
november 2016 by prometheus_unbound
« earlier      
per page:    204080120160

related tags

3d  algorithms  altair  array  aws  beautifulsoup  bigdata  bioinfo  biopython  blogs  bluestream  book  books  boto  c  capture  cloud  cluster  clustering  csv  cuda  cython  dash  data  datascience  deepleaning  deeplearning  development  doc2dash  docs  docset  ec2  epmv  excel  flask  ggplot2  go  google  googledocs  gpu  graphs  gromacs  heatmap  homebrew  hpc  ide  import  ipad  ipcluster  ipyparallel  ipython  julia  jupyter  keras  kinect  knowledgeliberation  language  learning  lists  mac  machine  machinelearning  map  mapping  matplot3d  matplotlib  module  montecarlo  mplot3d  multiprocessing  music  namedtuple  natural  nlp  nltk  nmr  notebook  numpy  osx  pandas  parallel  patent  pdf  pip  plotly  processing  programming  protein  proteinstructure  psychopy  pycharm  pycluster  pycon  pycuda  pydoc  pyparsing  pyrosetta  python  pyvideo  r  redirect  rmsdprotein  rodeo  rpi  s3  science  scipy  scraping  scrapy  selenium  soundcloud  sphinx  spreadsheet  spyder  stdout  stringio  structure  sublime  subprocess  tdm  unix  video  virtualenv  vis  visualization  zip 

Copy this bookmark:



description:


tags: