Wie die index-Datensätze in Solr schneller (und keine Auswirkungen auf ColdFusion-web-server)? Zwei JVM?

Ich habe ein 64 bit-server, 8 GB RAM, dual-quad-CPU. Keine Ressourcen sind immer zu schlagen, zu 100% (außer, ich denke, die JVM-richtig?).

Muss ich index mehrere Millionen Datensätze für Solr, aber die Maschine ist in Produktion. Ich erkenne an, dass eine zweite Maschine für die Indizierung wäre hilfreich.

Sollte ich widme Sie eine zweite Instanz der JVM, gewidmet Solr?

Gerade jetzt, wenn ich eine index-Seiten, die normalerweise serviert in 200 Millisekunden servieren in etwa 1,5 Sekunden, manchmal mehr... schlagen, auch, der gefürchtete "Dienst ist nicht Verfügbar" Fehler.

Ich meinen JVM-Heap wie folgt:

-Xmx1024m
-XX:MaxPermSize256m

Fall, ich jage die falsche Lösung ist, lassen Sie mich zu erweitern, die Landschaft ein wenig. Es scheint, dass ich keinen Einfluss auf die Indizierung Geschwindigkeit von Solr. Ich hatte vorher die Indizierung von etwa 150.000 Datensätze pro Stunde auf einem dev-server virtualisiert auf einer workstation. In einer Produktionsumgebung mit viel mehr hardware verfügbar ist, bin ich die Indizierung an der exakt gleichen Geschwindigkeit.

Ohne Daten, um es zu beweisen, ich denke, dass meine JVM-Einstellungen nicht beschleunigen die Indizierung, obwohl es möglicherweise erlaubt, das CF-server weiterhin auf Seiten dient. Ich muss sagen, die Indizierung Geschwindigkeit ist furchtbar langsam, aber ich weiß, dass es nicht eine Funktion des data access layer. Ich schrieb es aus Reine ORM-Objekte unterstützt durch Gespeicherte SQL-Prozeduren zu denken, dass war die Verlangsamung (keine Wirkung).

  • Klarstellung: der index-Prozess ist eine HTTP-Post (nicht eingebettet).
  • Sie sollten nicht die Indizierung einer Menge von Daten, die Häufig Recht? Sie können action=update
  • Richtig, Henry, es wird wahrscheinlich eine monatliche batch (neue Daten importiert, einige Daten aktualisiert).
InformationsquelleAutor Chris Adragna | 2010-10-13
  1. 3

    verwenden Sie eine separate Instanz für die Indizierung der index, der einzige trick daran ist, die laufen auf der Suche Instanz zu re-Lesen Sie den aktualisierten index, in dem Fall richten Sie ein master (der indexer) und slave(die Suchenden) und führen Sie die Replikation. dies wird sowohl dem Suchenden nicht unterbrochen, und der indexer wird die Verwendung seines eigenen JVM einschließlich seinen eigenen Anteil an den Ressourcen.

    • Ausgezeichnet. Ich dachte, ich könnte nicht nur eine JVM für die Indizierung UND Suche Arbeit. Sie gab mir den fehlenden link. Danke!
    InformationsquelleAutor recursive9
  2. 1

    Haben Sie versucht, diese Tipps zur Optimierung?

    http://bloggeraroundthecorner.blogspot.com/2009/08/tuning-coldfusion-solr-part-1.html

    http://bloggeraroundthecorner.blogspot.com/2009/08/tuning-coldfusion-solr-part-2.html

    http://bytestopshere.com/post.cfm/lessons-learned-moving-from-verity-to-solr-part-1

    • Ich sehe durch meine besuchten link-Farben, die ich habe auf das erste, aber nicht die zweite zwei. Ich werde überprüfen Sie diese heraus. Danke! Meine Hoffnung ist, dass ich investieren kann, ein paar Stunden zu finden, ein guter trick, der Rückkehr viele Stunden sank der Indizierung. Nochmals vielen Dank.
    InformationsquelleAutor Henry
Schreibe einen Kommentar