क्या मैं मल्टीप्रोसेसिंग के लिए पाइथन में एक साझा मल्टीएरे या सूचियों की सूचियों की सूची बना सकता हूं?

Question

मुझे अन्य प्रक्रियाओं के लिए उपलब्ध होने के लिए एक बहुआयामी सरणी या सूचियों की सूची का साझा ऑब्जेक्ट बनाना होगा। क्या मैंने इसे देखा है इसके लिए इसे बनाने का कोई तरीका है, यह संभव नहीं है। मैंने कोशिश की है:

from multiprocessing import Process, Value, Array 
arr = Array('i', range(10)) 
arr[:] 
[0, 1, 2, 3, 4, 5, 6, 7, 8, 9] 
arr[2]=[12,43] 
TypeError: an integer is required 

मैंने सुना numpy सरणी multiarray हो सकता है और एक, वस्तु साझा ऊपर अगर कोई मुझे बताओ कैसे एक numpy सरणी एक साझा वस्तु बनाने के लिए कर सकते हैं संभव नहीं है ??

Answer 1

एक numpy सरणी एक साझा वस्तु (full example) बनाने के लिए:

import ctypes as c 
import numpy as np 
import multiprocessing as mp 

n, m = 2, 3 
mp_arr = mp.Array(c.c_double, n*m) # shared, can be used from multiple processes 
# then in each new process create a new numpy array using: 
arr = np.frombuffer(mp_arr.get_obj()) # mp_arr and arr share the same memory 
# make it two-dimensional 
b = arr.reshape((n,m)) # b and arr share the same memory 

आप वस्तु और एक मात्र (के रूप में "एक ही स्मृति का हिस्सा") एक साझा की जरूरत नहीं है उद्देश्य यह है कि कई प्रक्रियाओं से इस्तेमाल किया जा सकता है तो आप इस्तेमाल कर सकते हैं पर्याप्त है multiprocessing.Manager: 012:

from multiprocessing import Process, Manager 

def f(L): 
    row = L[0] # take the 1st row 
    row.append(10) # change it 
    L[0] = row #NOTE: important: copy the row back (otherwise parent 
       #process won't see the changes) 

if __name__ == '__main__': 
    manager = Manager() 

    lst = manager.list() 
    lst.append([1]) 
    lst.append([2, 3]) 
    print(lst) # before: [[1], [2, 3]] 

    p = Process(target=f, args=(lst,)) 
    p.start() 
    p.join() 

    print(lst) # after: [[1, 10], [2, 3]] 

the docs से

सर्वर प्रक्रिया प्रबंधक साझा स्मृति ऑब्जेक्ट्स का उपयोग करने से अधिक लचीला हैं क्योंकि उन्हें मनमानी ऑब्जेक्ट प्रकारों का समर्थन करने के लिए बनाया जा सकता है। इसके अलावा, नेटवर्क पर विभिन्न कंप्यूटर पर प्रक्रियाओं द्वारा एकल प्रबंधक को साझा किया जा सकता है। हालांकि, वे साझा मेमोरी का उपयोग करने से धीमे हैं।

Answer 2

Array एस की सूची क्यों नहीं बनाएं?

arrays = [Array('i', range(10))] * 10