Tag: parallel-processing

Parallele Verarbeitung ist, im Gegensatz zu nur eine Gleichzeitige Verarbeitung garantiert über start / ausführen / beenden alle auf thread-Ebene und/oder-instruction-level-Aufgaben ausgeführt, die in einem parallel-Mode und bietet eine garantierte finish der gleichzeitig ausgeführten code-Pfade.

Mehrere API-Aufrufe parallel mit Python (IPython)

Anzahl der Antworten 1 Antworten
Arbeite ich mit Python (IPython & Baldachin) und einen Erholsamen content-API, auf meinem lokalen Rechner (Mac). Ich habe ein array von 3000 eindeutige IDs zu den pull-Daten von der API und kann nur rufen Sie die API

Wie zu beschleunigen matrix-Multiplikationen in Python?

Anzahl der Antworten 2 Antworten
Ich bin an der Entwicklung einer kleinen neuronalen Netzes, dessen Parameter müssen eine Menge Optimierung, so dass eine Bearbeitung so viel Zeit. Ich habe profilierten mein Skript mit cProfile und was bringt 80% der Prozessor-Zeit ist die

Wie, um die Anzahl der zu verwendenden threads für par

Anzahl der Antworten 2 Antworten
Ich kennen, dass Sie können die Anzahl der zu verwendenden threads für alle .par-Operationen wie so: collection.parallel.ForkJoinTasks.defaultForkJoinPool.setParallelism(parlevel: Int) Aber ist es möglich, die Anzahl der zu verwendenden threads für nur eine .par nennen? Ich nehme an, man

Algorithmus split ein array in P subarrays der Summe ausgeglichen

Anzahl der Antworten 10 Antworten
Ich habe ein großes array der Länge N, sagen wir so etwas wie: 2 4 6 7 6 3 3 3 4 3 4 4 4 3 3 1 Muss ich split das array in P subarrays

Parallele For-Schleife in C# mit der freigegebenen variable

Anzahl der Antworten 1 Antworten
Ich versuche, parallele Verarbeitung zu beschleunigen, ein paar von verschachtelten Schleifen, aber ich habe Probleme dabei, die syntax Recht. Ich bin versuchen, um eine zu zählen, wie viele Pixel in einer bitmap sind entweder rot, weiß oder

Sauber Python-Multiprozess-Kündigung abhängig von einer exit-flag

Anzahl der Antworten 2 Antworten
Ich bin versucht, erstellen Sie ein Programm mit mehreren Prozessen, und ich würde gerne sauber beenden Sie alle Prozesse hervorgebracht, wenn Fehler auftreten. unten habe ich geschrieben, einige pseudo-Art code für das, was ich glaube ich tun

Verschachtelte Java 8 parallele forEach-Schleife durchführen Armen. Ist dieses Verhalten zu erwarten?

Anzahl der Antworten 3 Antworten
Hinweis: ich habe bereits angesprochen, dieses problem in einem anderen, SO post - Die Verwendung einer semaphore innerhalb einer geschachtelten Java 8 parallel-stream handeln, kann der DEADLOCK. Ist das ein bug? -, aber der Titel von diesem

OpenMP in FORTRAN läuft nicht die erwartete Anzahl von threads

Anzahl der Antworten 3 Antworten
Ich bin neu in der parallelen Programmierung, und habe Probleme damit, eine einfache parallele Fortran-Programm für die Verwendung von mehreren threads bei OpenMP. Das folgende Programm: Program Hello Use omp_lib Implicit None INTEGER nthreads nthreads = 4

Die Parallelisierung verschachtelter Schleife in OpenMP mit #pragma parallel for shared

Anzahl der Antworten 2 Antworten
Ich bin versucht zu parallelisieren, ein code. Mein code sieht wie folgt aus - #pragma omp parallel private(i,j,k) #pragma omp parallel for shared(A) for(k=0;k<100;<k++) for(i=1;i<1024;<i++) for(j=0;j<1024;<j++) A[i][j+1]=<< some expression involving elements of A[i-1][j-1] >> Auf dem ausführen

So senden Sie eine variable vom Typ struct in MPI_Send()?

Anzahl der Antworten 2 Antworten
Habe ich codiert ein Programm in C unter Verwendung von MPI, wobei die struct-variable, die gesendet werden, in einen ring Mode, um die Prozesse und, basierend auf den empfangenen Wert aus der variable, die Arbeit für diesen

Split-line in 3 separate Argumente, mit xargs

Anzahl der Antworten 1 Antworten
Wenn ich die folgenden: $ printf '%s\n' "${fa[@]}" 1 2 3 4 5 6 7 8 9 denen jede Zeile wird ein neues array-element. Ich möchte in der Lage sein, die Spaltung des Elements Trennzeichen durch Leerzeichen

Parallel stream von einem HashSet nicht parallel laufen

Anzahl der Antworten 1 Antworten
Habe ich Sammlung von Elementen, die möchte ich parallel verarbeiten. Wenn ich mit einem List, Parallelität funktioniert. Jedoch, wenn ich mit einem Set es nicht parallel laufen lassen. Schrieb ich ein Codebeispiel, das veranschaulicht das problem: public

MPI auf einem Rechner dualcore

Anzahl der Antworten 2 Antworten
Was passiert, wenn ich lief ein MPI-Programm, das 3 Knoten (d.h. mpiexec -np 3 ./Programm) auf einer einzelnen Maschine hat 2 cpu? Darf ich vorschlagen, das entfernen von "Gleichzeitigkeit" als tag? MPI gibt Sie, parallele Ausführung, aber

Umsetzung von Modell-Parallelität in tensorflow

Anzahl der Antworten 1 Antworten
Ich bin ein Anfänger zu tensorflow. Derzeit arbeite ich auf einem system mit 2 GPUs jeweils von 12 GB. Ich will zu implementieren-Modell Parallelität zwischen den beiden GPUs um Zug große Modelle. Ich habe auf der Suche

Wie kann ich kompilieren openmpi-Programme mit xcode 4?

Anzahl der Antworten 4 Antworten
Ich bin mit lion und xcode 4.2. Ich installierte openmpi mit macports. Es sind alle erfolgreich installiert. Doch ich kann nicht finden Sie eine Anleitung, um mir zu sagen, wie/welche Bibliotheken gehören zu kompilieren eines Beispiels (siehe

Java-Stream-API: warum die Unterscheidung zwischen sequenzieller und paralleler Ausführung-Modus?

Anzahl der Antworten 4 Antworten
Aus der Stream javadoc: Stream-Pipeline ausführen können entweder sequentiell oder parallel. Dieser Ausführungsmodus ist eine Eigenschaft des Streams. Streams erstellt werden, mit einer anfänglichen Wahl der sequentielle oder parallele Ausführung. Meine Annahmen: Es gibt keinen funktionalen Unterschied

append-Zeilen dataframe mit foreach-Paket

Anzahl der Antworten 2 Antworten
Ich habe ein problem mit dem Anhängen von Werten an einen Daten-frame durch parallele Verarbeitung. Ich habe eine Funktion, die einige Berechnung und liefert ein dataframe, einschließlich dieser Berechnung ist ein Zufallsprodukt. also, was ich gemacht habe

wie zu parallelisieren viele (fuzzy -) string-Vergleiche, die mit gelten Pandas?

Anzahl der Antworten 3 Antworten
Ich habe Folgendes problem Ich habe einen dataframe master enthält Sätze wie master Out[8]: original 0 this is a nice sentence 1 this is another one 2 stackoverflow is nice Für jede Zeile in Master -, I-lookup

Probleme mit foreach-Parallelisierung

Anzahl der Antworten 2 Antworten
Ich versuche zu vergleichen Parallelisierung Optionen. Speziell, ich Vergleiche den standard SNOW und mulitcore Implementierungen von denen doSNOW oder doMC und foreach. Als ein Beispiel problem, ich bin zu illustrieren, central limit theorem durch die Berechnung der

führen Sie Datenbank-Abfrage und nicht warten, für das Ergebnis

Anzahl der Antworten 3 Antworten
Muss ich rufen Sie eine gespeicherte Prozedur, die macht einiges an Arbeit. Ich möchte in der Lage sein, zu "feuern und vergessen" - e.g nicht warten, für die Reaktion die gespeicherte Prozedur auf, bevor die nächste Aufzeichnung

Entfernen zombie-Prozesse mit parallel-Paket

Anzahl der Antworten 2 Antworten
Nachdem ich gespielt habe, um für einige Zeit mit R Paket parallel auf meinem Debian-basierte Maschine, die ich noch nicht finden können, ein Weg, um entfernen Sie alle zombie child-Prozesse nach einer Berechnung. Ich bin auf der

Wie funktioniert shared memory vs. message-passing-Handhabung von großen Daten-Strukturen?

Anzahl der Antworten 10 Antworten
In der Suche bei Go und Erlang-Ansatz, um die Parallelität bemerkte ich, dass Sie beide verlassen sich auf message-passing. Dieser Ansatz offensichtlich verringert die Notwendigkeit für komplexe sperren, da es keinen gemeinsamen Staat. Jedoch den Fall betrachten,

Kann memcached machen, vollen Gebrauch von multi-core?

Anzahl der Antworten 4 Antworten
Memcached in der Lage, die volle Nutzung der multi-core? Oder gibt es eine Möglichkeit, tuning dieser? InformationsquelleAutor Mickey Shine | 2010-05-28

Warten für die parallele batch-Skripten

Anzahl der Antworten 3 Antworten
Ich habe 4 batch-Dateien. Ich will laufen one.bat und two.bat auf einmal, gleichzeitig. Nach Fertigstellung dieser zwei batch-Dateien, three.bat und four.bat ausführen sollten, auf einmal, parallel. Ich habe versucht, mit vielen Möglichkeiten, aber mot, funktioniert einwandfrei. Kann

Was ist ein "Funke" in Haskell

Anzahl der Antworten 4 Antworten
Ich bin verwirrt über den Begriff der "Funke" Ist es ein thread in Haskell? Oder ist die Aktion erzeugt einen neuen thread ? Danke an alle: Also, um zusammenzufassen, die Funken sind nicht thread, sondern viel mehr

Fortschritte Messen mit python-multiprocessing-Pool und map-Funktion

Anzahl der Antworten 1 Antworten
Folgenden code verwende ich für die parallele csv-Verarbeitung: #!/usr/bin/env python import csv from time import sleep from multiprocessing import Pool from multiprocessing import cpu_count from multiprocessing import current_process from pprint import pprint as pp def init_worker(x): sleep(.5)

Ist es möglich, dass F# wird optimiert, mehr als andere .Net-Sprachen in der Zukunft?

Anzahl der Antworten 7 Antworten
Ist es möglich, dass Microsoft in der Lage sein, um F# - Programme, die entweder auf die VM-Ausführung Zeit, oder eher zur compile-Zeit, zu erkennen, dass ein Programm gebaut wurde, mit einer funktionalen Sprache-und automatisch parallelisieren es

Vermeidung Deadlock-Beispiel

Anzahl der Antworten 6 Antworten
Frage ich mich, was sind die alternativen Möglichkeiten zur Vermeidung von Deadlocks in dem folgenden Beispiel. Das folgende Beispiel ist eine typische bank-Konto übertragen deadlock-problem. Was sind einige bessere Ansätze, es zu lösen in der Praxis ?

was bedeutet es konfigurieren MPI für shared-memory?

Anzahl der Antworten 1 Antworten
Ich habe ein wenig Forschung bezogenen Fragen zu stellen. Derzeit habe ich fertigen Umsetzung von Struktur-Skelett-frame-Arbeit basiert auf MPI (insbesondere mit openmpi 6.3). der Rahmen der Arbeit verwendet werden soll, auf eine einzige Maschine. nun, ich bin

Wie zum ausführen von zwei Kind-Prozesse, die gleichzeitig in C?

Anzahl der Antworten 2 Antworten
So, ich bin immer in Nebenläufige Programmierung, aber aus irgendeinem Grund kann ich nicht einmal die basics zu arbeiten. Ich habe eine Datei namens Gabel.c enthält eine Methode main. In dieser Methode main I Gabel zweimal, in

Parallel Linq-query-Optimierung

Anzahl der Antworten 2 Antworten
Seit einiger Zeit nun habe ich die Strukturierung von meiner code um Methoden mit keine Nebenwirkungen, um zu verwenden, parallel linq um die Dinge zu beschleunigen. Auf dem Weg habe ich mehr als einmal stolperte auf lazy

QML: ausführen von Funktionen, welche in parallelen threads

Anzahl der Antworten 3 Antworten
In meinem code, den ich erschaffe 16x16 Tasten im Zyklus, und dies wenige Sekunden. onCreateField: { for(var i=0;i<fieldWidth;i++) { for(var j=0;j<fieldHeight;j++) { createButton(i, j); } } } function createButton(x, y) { __buttonX = x; __buttonY = y;

Parallel Dijkstra

Anzahl der Antworten 1 Antworten
Ich bin mit OpenMP zu machen, parallele version des Dijkstra-Algorithmus. Mein code besteht aus zwei teilen. Erste Teil ist die Ausführung durch einen thread (master). Dieser thread wählt neuen Knoten aus der Liste. Der zweite Teil ist

Ist es sicher, leiten Sie die Ausgabe von mehreren parallelen Prozessen, die zu einer Datei mit >>?

Anzahl der Antworten 9 Antworten
Ich bin Schaben Daten aus dem web, und ich habe mehrere Prozesse von meinen Spachtel parallel laufen. Möchte ich die Leistung von jeder dieser Prozesse, um am Ende in der gleichen Datei. Solange der Linien des Textes

Unterschied zwischen Parallelität und gleichzeitige?

Anzahl der Antworten 1 Antworten
Nun studiere ich parallel computing und algorithmen bin ich etwas verwirrt über die Bedingungen concurrent execution und simultaneous execution. Was ist der Unterschied zwischen diesen Begriffen? Wann haben wir zum nutzen concurrent und Wann müssen wir nutzen

Was ist der Zustand von OCaml ist die Parallelisierung Fähigkeiten?

Anzahl der Antworten 3 Antworten
Ich bin daran interessiert, mit OCaml für ein Projekt, aber ich bin mir nicht sicher, wo seine Parallelisierung Fähigkeiten werden mehr. Gibt es eine message-passing-Fähigkeit in OCaml? Ist OCaml in der Lage, effektiv zu nutzen, mehr als

Mehrere dbcontexts in parallele threads, EntityException "Erneut Ihre Aussage, wenn weniger Benutzer aktiv sind,"

Anzahl der Antworten 3 Antworten
Ich bin mit Parallel.ForEach zu tun, die Arbeit auf mehrere threads, mit einer neuen EF5 DbContext für jede iteration, alle eingewickelt in ein TransactionScope, wie folgt: using (var transaction = new TransactionScope()) { int supplierIds; using (var

Große Matrix-Inversion

Anzahl der Antworten 5 Antworten
Ich bin auf der Suche bei Einnahme der inversen einer großen matrix, gängige Größe von 1000 x 1000, aber manchmal übersteigt 100000 x 100000 (das ist derzeit nicht wegen der Zeit und Speicher). Ich weiß, dass die

Wie, um eine IEnumerable-Methode parallel-Methode

Anzahl der Antworten 1 Antworten
Nach diesem post, Ich will parallelisieren dieser Methode : public IEnumerable<string> GetAllLogs(IEnumerable<IComputer> computers) { foreach (var cpt in computers) { foreach (var log in cpt.GetLogs()) { yield return log; } } } Möchte ich die Methode "geben

Hadoop MapReduce vs MPI (vs Spark vs Mahout vs Sofort) - Wann verwendet man einen über den anderen?

Anzahl der Antworten 2 Antworten
Ich bin neu auf parallel-computing und nur ab und zu versuchen, MPI und Hadoop+MapReduce auf Amazon AWS. Aber ich bin verwirrt darüber, Wann eine über die andere. Beispielsweise eine Allgemeine Faustregel Rat, den ich sehen, kann wie

MPI_Type_create_subarray und MPI_Gather

Anzahl der Antworten 1 Antworten
Habe ich zu lösen, ein wenig mpi problem. Ich habe 4 slaves verarbeitet und jede dieser schicken will, ein 2d-subarray (CHUNK_ROWS X CHUNK_COLUMNS) zur master-0. Master 0 sammelt alle Brocken in ddd[ZEILEN][SPALTEN], und drucken Sie es. Ich

Caffe/pyCaffe: legen Sie alle GPUs

Anzahl der Antworten 3 Antworten
ist möglich, alle GPUs für Caffe (vor allem pyCaffe)? Etwas wie: caffe train -solver examples/mnist/lenet_solver.prototxt -gpu all Verwandte: stackoverflow.com/q/33446612/1714410 InformationsquelleAutor gulliver | 2015-11-15

Besten Spring-batch-scaling-Strategie

Anzahl der Antworten 1 Antworten
Wir haben einfache batch-Prozesse, die funktionieren. Vor kurzem haben wir neue reqmnt die Umsetzung der neuen batch-Prozess, um Berichte zu generieren. Wir haben diff Quelle der Daten Lesen Sie zur Vorbereitung dieses reports. Speziell haben wir vielleicht

einfache dask map_partitions Beispiel

Anzahl der Antworten 2 Antworten
Lese ich Folgendes SO thead und nun versuche, es zu verstehen. Hier ist mein Beispiel: import dask.dataframe as dd import pandas as pd from dask.multiprocessing import get import random df = pd.DataFrame({'col_1':random.sample(range(10000), 10000), 'col_2': random.sample(range(10000), 10000) })

Wie laufen die tests parallel in Django?

Anzahl der Antworten 3 Antworten
In meinen Django-Projekten verwende ich sqlite-Datenbank zum ausführen von tests. Da nutzt es nur Erinnerung, es ist viel schneller als MySQL, aber es ist immer noch nicht schnell genug. Während des tests, nur eine 4-Prozessoren verwendet wird,

Distributed-computing-framework für Clojure/Java

Anzahl der Antworten 4 Antworten
Entwickle ich eine Anwendung, wo ich verteilen müssen eine Reihe von Aufgaben, die über einen potenziell sehr großen cluster von verschiedenen Maschinen. Idealerweise möchte ich eine sehr einfache, idiomatische Weise, dies zu tun in Clojure, z.B. so

Parallele Aufgaben In Den Windows-Diensten

Anzahl der Antworten 2 Antworten
Ich habe einen Windows-Dienst startet eine Funktion auf einem timer. Die Funktion fragt die Datenbank für neue Datensätze und dann ruft einen web-service für jeden neuen Datensatz, den es findet. Es ist nun eine Anforderung, die dieser

Wie und Wann @async und @sync-Julia

Anzahl der Antworten 1 Antworten
Habe ich gelesen, das Dokumentation für die @async und @sync Makros aber immer noch nicht herausfinden, wie und Wann Sie zu verwenden, noch kann ich finden, viele Ressourcen oder Beispiele für die Sie an anderer Stelle auf

Was ist der beste Weg, um ein parallel-Endlosschleife?

Anzahl der Antworten 3 Antworten
Habe ich genutzt, um mit Hilfe Parallel.Für() in .Net, die parallel extensions, da es eine einfache Möglichkeit der Parallelisierung von code, ohne manuell zu starten und zu pflegen threads (das kann fummelig). Ich bin jetzt auf der

multi-core-Programmierung mit JavaScript?

Anzahl der Antworten 3 Antworten
Also ich habe das ernst rekursive Funktion, die ich gerne verwenden möchte mit meinem code. Das Problem ist es nicht wirklich die Vorteile der dual-core-Maschinen, weil js ist single threaded. Ich habe versucht mit Webworker aber nicht