Tag: parallel-processing
Parallele Verarbeitung ist, im Gegensatz zu nur eine Gleichzeitige Verarbeitung garantiert über start / ausführen / beenden alle auf thread-Ebene und/oder-instruction-level-Aufgaben ausgeführt, die in einem parallel-Mode und bietet eine garantierte finish der gleichzeitig ausgeführten code-Pfade.
1
Antworten
Arbeite ich mit Python (IPython & Baldachin) und einen Erholsamen content-API, auf meinem lokalen Rechner (Mac). Ich habe ein array von 3000 eindeutige IDs zu den pull-Daten von der API und kann nur rufen Sie die API
2
Antworten
Ich bin an der Entwicklung einer kleinen neuronalen Netzes, dessen Parameter müssen eine Menge Optimierung, so dass eine Bearbeitung so viel Zeit. Ich habe profilierten mein Skript mit cProfile und was bringt 80% der Prozessor-Zeit ist die
2
Antworten
Ich kennen, dass Sie können die Anzahl der zu verwendenden threads für alle .par-Operationen wie so: collection.parallel.ForkJoinTasks.defaultForkJoinPool.setParallelism(parlevel: Int) Aber ist es möglich, die Anzahl der zu verwendenden threads für nur eine .par nennen? Ich nehme an, man
10
Antworten
Ich habe ein großes array der Länge N, sagen wir so etwas wie: 2 4 6 7 6 3 3 3 4 3 4 4 4 3 3 1 Muss ich split das array in P subarrays
1
Antworten
Ich versuche, parallele Verarbeitung zu beschleunigen, ein paar von verschachtelten Schleifen, aber ich habe Probleme dabei, die syntax Recht. Ich bin versuchen, um eine zu zählen, wie viele Pixel in einer bitmap sind entweder rot, weiß oder
2
Antworten
Ich bin versucht, erstellen Sie ein Programm mit mehreren Prozessen, und ich würde gerne sauber beenden Sie alle Prozesse hervorgebracht, wenn Fehler auftreten. unten habe ich geschrieben, einige pseudo-Art code für das, was ich glaube ich tun
3
Antworten
Hinweis: ich habe bereits angesprochen, dieses problem in einem anderen, SO post - Die Verwendung einer semaphore innerhalb einer geschachtelten Java 8 parallel-stream handeln, kann der DEADLOCK. Ist das ein bug? -, aber der Titel von diesem
3
Antworten
Ich bin neu in der parallelen Programmierung, und habe Probleme damit, eine einfache parallele Fortran-Programm für die Verwendung von mehreren threads bei OpenMP. Das folgende Programm: Program Hello Use omp_lib Implicit None INTEGER nthreads nthreads = 4
2
Antworten
Ich bin versucht zu parallelisieren, ein code. Mein code sieht wie folgt aus - #pragma omp parallel private(i,j,k) #pragma omp parallel for shared(A) for(k=0;k<100;<k++) for(i=1;i<1024;<i++) for(j=0;j<1024;<j++) A[i][j+1]=<< some expression involving elements of A[i-1][j-1] >> Auf dem ausführen
2
Antworten
Habe ich codiert ein Programm in C unter Verwendung von MPI, wobei die struct-variable, die gesendet werden, in einen ring Mode, um die Prozesse und, basierend auf den empfangenen Wert aus der variable, die Arbeit für diesen
1
Antworten
Wenn ich die folgenden: $ printf '%s\n' "${fa[@]}" 1 2 3 4 5 6 7 8 9 denen jede Zeile wird ein neues array-element. Ich möchte in der Lage sein, die Spaltung des Elements Trennzeichen durch Leerzeichen
1
Antworten
Habe ich Sammlung von Elementen, die möchte ich parallel verarbeiten. Wenn ich mit einem List, Parallelität funktioniert. Jedoch, wenn ich mit einem Set es nicht parallel laufen lassen. Schrieb ich ein Codebeispiel, das veranschaulicht das problem: public
2
Antworten
Was passiert, wenn ich lief ein MPI-Programm, das 3 Knoten (d.h. mpiexec -np 3 ./Programm) auf einer einzelnen Maschine hat 2 cpu? Darf ich vorschlagen, das entfernen von "Gleichzeitigkeit" als tag? MPI gibt Sie, parallele Ausführung, aber
1
Antworten
Ich bin ein Anfänger zu tensorflow. Derzeit arbeite ich auf einem system mit 2 GPUs jeweils von 12 GB. Ich will zu implementieren-Modell Parallelität zwischen den beiden GPUs um Zug große Modelle. Ich habe auf der Suche
4
Antworten
Ich bin mit lion und xcode 4.2. Ich installierte openmpi mit macports. Es sind alle erfolgreich installiert. Doch ich kann nicht finden Sie eine Anleitung, um mir zu sagen, wie/welche Bibliotheken gehören zu kompilieren eines Beispiels (siehe
4
Antworten
Aus der Stream javadoc: Stream-Pipeline ausführen können entweder sequentiell oder parallel. Dieser Ausführungsmodus ist eine Eigenschaft des Streams. Streams erstellt werden, mit einer anfänglichen Wahl der sequentielle oder parallele Ausführung. Meine Annahmen: Es gibt keinen funktionalen Unterschied
2
Antworten
Ich habe ein problem mit dem Anhängen von Werten an einen Daten-frame durch parallele Verarbeitung. Ich habe eine Funktion, die einige Berechnung und liefert ein dataframe, einschließlich dieser Berechnung ist ein Zufallsprodukt. also, was ich gemacht habe
3
Antworten
Ich habe Folgendes problem Ich habe einen dataframe master enthält Sätze wie master Out[8]: original 0 this is a nice sentence 1 this is another one 2 stackoverflow is nice Für jede Zeile in Master -, I-lookup
2
Antworten
Ich versuche zu vergleichen Parallelisierung Optionen. Speziell, ich Vergleiche den standard SNOW und mulitcore Implementierungen von denen doSNOW oder doMC und foreach. Als ein Beispiel problem, ich bin zu illustrieren, central limit theorem durch die Berechnung der
3
Antworten
Muss ich rufen Sie eine gespeicherte Prozedur, die macht einiges an Arbeit. Ich möchte in der Lage sein, zu "feuern und vergessen" - e.g nicht warten, für die Reaktion die gespeicherte Prozedur auf, bevor die nächste Aufzeichnung
2
Antworten
Nachdem ich gespielt habe, um für einige Zeit mit R Paket parallel auf meinem Debian-basierte Maschine, die ich noch nicht finden können, ein Weg, um entfernen Sie alle zombie child-Prozesse nach einer Berechnung. Ich bin auf der
10
Antworten
In der Suche bei Go und Erlang-Ansatz, um die Parallelität bemerkte ich, dass Sie beide verlassen sich auf message-passing. Dieser Ansatz offensichtlich verringert die Notwendigkeit für komplexe sperren, da es keinen gemeinsamen Staat. Jedoch den Fall betrachten,
4
Antworten
Memcached in der Lage, die volle Nutzung der multi-core? Oder gibt es eine Möglichkeit, tuning dieser? InformationsquelleAutor Mickey Shine | 2010-05-28
3
Antworten
Ich habe 4 batch-Dateien. Ich will laufen one.bat und two.bat auf einmal, gleichzeitig. Nach Fertigstellung dieser zwei batch-Dateien, three.bat und four.bat ausführen sollten, auf einmal, parallel. Ich habe versucht, mit vielen Möglichkeiten, aber mot, funktioniert einwandfrei. Kann
4
Antworten
Ich bin verwirrt über den Begriff der "Funke" Ist es ein thread in Haskell? Oder ist die Aktion erzeugt einen neuen thread ? Danke an alle: Also, um zusammenzufassen, die Funken sind nicht thread, sondern viel mehr
1
Antworten
Folgenden code verwende ich für die parallele csv-Verarbeitung: #!/usr/bin/env python import csv from time import sleep from multiprocessing import Pool from multiprocessing import cpu_count from multiprocessing import current_process from pprint import pprint as pp def init_worker(x): sleep(.5)
7
Antworten
Ist es möglich, dass Microsoft in der Lage sein, um F# - Programme, die entweder auf die VM-Ausführung Zeit, oder eher zur compile-Zeit, zu erkennen, dass ein Programm gebaut wurde, mit einer funktionalen Sprache-und automatisch parallelisieren es
6
Antworten
Frage ich mich, was sind die alternativen Möglichkeiten zur Vermeidung von Deadlocks in dem folgenden Beispiel. Das folgende Beispiel ist eine typische bank-Konto übertragen deadlock-problem. Was sind einige bessere Ansätze, es zu lösen in der Praxis ?
1
Antworten
Ich habe ein wenig Forschung bezogenen Fragen zu stellen. Derzeit habe ich fertigen Umsetzung von Struktur-Skelett-frame-Arbeit basiert auf MPI (insbesondere mit openmpi 6.3). der Rahmen der Arbeit verwendet werden soll, auf eine einzige Maschine. nun, ich bin
2
Antworten
So, ich bin immer in Nebenläufige Programmierung, aber aus irgendeinem Grund kann ich nicht einmal die basics zu arbeiten. Ich habe eine Datei namens Gabel.c enthält eine Methode main. In dieser Methode main I Gabel zweimal, in
2
Antworten
Seit einiger Zeit nun habe ich die Strukturierung von meiner code um Methoden mit keine Nebenwirkungen, um zu verwenden, parallel linq um die Dinge zu beschleunigen. Auf dem Weg habe ich mehr als einmal stolperte auf lazy
3
Antworten
In meinem code, den ich erschaffe 16x16 Tasten im Zyklus, und dies wenige Sekunden. onCreateField: { for(var i=0;i<fieldWidth;i++) { for(var j=0;j<fieldHeight;j++) { createButton(i, j); } } } function createButton(x, y) { __buttonX = x; __buttonY = y;
1
Antworten
Ich bin mit OpenMP zu machen, parallele version des Dijkstra-Algorithmus. Mein code besteht aus zwei teilen. Erste Teil ist die Ausführung durch einen thread (master). Dieser thread wählt neuen Knoten aus der Liste. Der zweite Teil ist
9
Antworten
Ich bin Schaben Daten aus dem web, und ich habe mehrere Prozesse von meinen Spachtel parallel laufen. Möchte ich die Leistung von jeder dieser Prozesse, um am Ende in der gleichen Datei. Solange der Linien des Textes
1
Antworten
Nun studiere ich parallel computing und algorithmen bin ich etwas verwirrt über die Bedingungen concurrent execution und simultaneous execution. Was ist der Unterschied zwischen diesen Begriffen? Wann haben wir zum nutzen concurrent und Wann müssen wir nutzen
3
Antworten
Ich bin daran interessiert, mit OCaml für ein Projekt, aber ich bin mir nicht sicher, wo seine Parallelisierung Fähigkeiten werden mehr. Gibt es eine message-passing-Fähigkeit in OCaml? Ist OCaml in der Lage, effektiv zu nutzen, mehr als
3
Antworten
Ich bin mit Parallel.ForEach zu tun, die Arbeit auf mehrere threads, mit einer neuen EF5 DbContext für jede iteration, alle eingewickelt in ein TransactionScope, wie folgt: using (var transaction = new TransactionScope()) { int supplierIds; using (var
5
Antworten
Ich bin auf der Suche bei Einnahme der inversen einer großen matrix, gängige Größe von 1000 x 1000, aber manchmal übersteigt 100000 x 100000 (das ist derzeit nicht wegen der Zeit und Speicher). Ich weiß, dass die
1
Antworten
Nach diesem post, Ich will parallelisieren dieser Methode : public IEnumerable<string> GetAllLogs(IEnumerable<IComputer> computers) { foreach (var cpt in computers) { foreach (var log in cpt.GetLogs()) { yield return log; } } } Möchte ich die Methode "geben
2
Antworten
Ich bin neu auf parallel-computing und nur ab und zu versuchen, MPI und Hadoop+MapReduce auf Amazon AWS. Aber ich bin verwirrt darüber, Wann eine über die andere. Beispielsweise eine Allgemeine Faustregel Rat, den ich sehen, kann wie
1
Antworten
Habe ich zu lösen, ein wenig mpi problem. Ich habe 4 slaves verarbeitet und jede dieser schicken will, ein 2d-subarray (CHUNK_ROWS X CHUNK_COLUMNS) zur master-0. Master 0 sammelt alle Brocken in ddd[ZEILEN][SPALTEN], und drucken Sie es. Ich
3
Antworten
ist möglich, alle GPUs für Caffe (vor allem pyCaffe)? Etwas wie: caffe train -solver examples/mnist/lenet_solver.prototxt -gpu all Verwandte: stackoverflow.com/q/33446612/1714410 InformationsquelleAutor gulliver | 2015-11-15
1
Antworten
Wir haben einfache batch-Prozesse, die funktionieren. Vor kurzem haben wir neue reqmnt die Umsetzung der neuen batch-Prozess, um Berichte zu generieren. Wir haben diff Quelle der Daten Lesen Sie zur Vorbereitung dieses reports. Speziell haben wir vielleicht
2
Antworten
Lese ich Folgendes SO thead und nun versuche, es zu verstehen. Hier ist mein Beispiel: import dask.dataframe as dd import pandas as pd from dask.multiprocessing import get import random df = pd.DataFrame({'col_1':random.sample(range(10000), 10000), 'col_2': random.sample(range(10000), 10000) })
3
Antworten
In meinen Django-Projekten verwende ich sqlite-Datenbank zum ausführen von tests. Da nutzt es nur Erinnerung, es ist viel schneller als MySQL, aber es ist immer noch nicht schnell genug. Während des tests, nur eine 4-Prozessoren verwendet wird,
4
Antworten
Entwickle ich eine Anwendung, wo ich verteilen müssen eine Reihe von Aufgaben, die über einen potenziell sehr großen cluster von verschiedenen Maschinen. Idealerweise möchte ich eine sehr einfache, idiomatische Weise, dies zu tun in Clojure, z.B. so
2
Antworten
Ich habe einen Windows-Dienst startet eine Funktion auf einem timer. Die Funktion fragt die Datenbank für neue Datensätze und dann ruft einen web-service für jeden neuen Datensatz, den es findet. Es ist nun eine Anforderung, die dieser
1
Antworten
Habe ich gelesen, das Dokumentation für die @async und @sync Makros aber immer noch nicht herausfinden, wie und Wann Sie zu verwenden, noch kann ich finden, viele Ressourcen oder Beispiele für die Sie an anderer Stelle auf
3
Antworten
Habe ich genutzt, um mit Hilfe Parallel.Für() in .Net, die parallel extensions, da es eine einfache Möglichkeit der Parallelisierung von code, ohne manuell zu starten und zu pflegen threads (das kann fummelig). Ich bin jetzt auf der
3
Antworten
Also ich habe das ernst rekursive Funktion, die ich gerne verwenden möchte mit meinem code. Das Problem ist es nicht wirklich die Vorteile der dual-core-Maschinen, weil js ist single threaded. Ich habe versucht mit Webworker aber nicht