Tag: amazon-redshift
Amazon Redshift ist ein petabyte-scale data-warehousing-service mit bestehenden business-intelligence-tools, um die Daten zu analysieren. Die Rotverschiebung ist eine spaltenorientierte MPP-Datenbank auf Basis von ParAccel
Ungültige zitieren, Formatierung der CSV mit Anführungszeichen (Rotverschiebung laden)
1 Antworten
Ich habe eine CSV mit folgendem Inhalt: id,homie_id,user_id,some_data,some_datetime,list_stuff,confirmed_at,report_id 1,57,1,,,"{\"assets\":}","2014-12-26 16:50:32",18 2,59,1,,,"{\"assets\":}","2014-12-26 16:50:46",18 Wenn ich den COPY-Befehl, bekomme ich die Fehlermeldung "Ungültige zitieren, Formatierung der CSV" Warum ist das so? Es hat den umgekehrten Schrägstrich vor dem quote,
Wie eine Verbindung zu Amazon Redshift oder andere DB ' s in Apache Spark?
5 Antworten
Ich versuche, die Verbindung zu Amazon Redshift über die Funke, damit ich beitreten kann, Daten, die wir haben auf S3 mit Daten über den RS-cluster. Ich fand einige sehr spartanische Dokumentation hier für die Fähigkeit der Verbindung
Regulären Ausdruck/ Rotverschiebung
4 Antworten
Habe ich folgende Daten, die, wie ich finde, 11. vorkommen von ':' . Will ich drucken/anzeigen der Informationen nach dem 11. auftreten von ':'. https://www.example.com/rest/1/07/myself/urn:ads:accod:org:pki:71E4/Riken/List:abc:bcbc:hfhhf:ncnnc:shiv:hgh:bvbv:hghg: Ich habe versucht, [ ^ ] - tag, aber es funktioniert nicht.
Löschen Sie aus der Tabelle Einen Beitritt auf dem Tisch Eine Rotverschiebung in
2 Antworten
Ich versuche zu schreiben, die folgende MySQL-Abfrage in PostgreSQL 8.0 (insbesondere mithilfe der Rotverschiebung): DELETE t1 FROM table t1 LEFT JOIN table t2 ON ( t1.field = t2.field AND t1.field2 = t2.field2 ) WHERE t1.field > 0
Wie kann ich kopieren Sie eine Rotverschiebung Tabelle, aber fügen Sie ein sortkey für eine Spalte?
2 Antworten
Zur Zeit arbeite ich an einem Projekt, das mit einer Rotverschiebung Tabelle mit 51 Spalten. Jedoch, die person, die die Tabelle vergessen ein sortkey für unsere time Spalte, die verletzen Leistung für unsere Anwendung, wenn wir nicht
ROW_NUMBER() in Rotverschiebung zu wählen größte Zeile aus jeder Gruppe?
1 Antworten
Brauche ich, um wählen Sie eine Zeile aus jeder Gruppe basierend auf COUNT(1) Feld. In anderen Datenbanken, die ich verwenden würde, ROW_NUMBER () - Funktion, die in die Rotverschiebung ist noch nicht unterstützte. Rotverschiebung unterstützt jetzt Window-Funktion
Amazon 500150 Fehler beim schließen der Verbindung der Allgemeinen SSLEngine
3 Antworten
Während die Verbindung Amazon RedShift, bekomme ich die folgende Fehlermeldung: 2016-04-14 13:49:30 ERROR SQL Exception when connecting [Amazon](500150) Error setting/closing connection: General SSLEngine problem. java.sql.SQLException: [Amazon](500150) Error setting/closing connection: General SSLEngine problem. at workbench.db.DbDriver.connect(DbDriver.java:546) at workbench.db.ConnectionMgr.connect(ConnectionMgr.java:244) at
Amazon Redshift bei 100% Festplattenauslastung durch VAKUUM Abfrage
4 Antworten
Lesen der Amazon Redshift documentatoin ich lief ein VAKUUM auf eine bestimmte 400GB Tabelle, die nie gesaugt, bevor Sie im Versuch zum verbessern der Abfrageleistung. Leider, das VAKUUM hat dazu geführt, die Tabelle wächst auf 1,7 TB
Rotverschiebung mit SSIS/SSDT
2 Antworten
Hat sich schon jemand erfolgreich mit Amazon Redshift als Quell-oder Ziel-ODBC-Komponente in SQL Server Data Tools 2012? Ich habe installiert die PostgreSQL-Treiber zur Verfügung gestellt von Amazon und bereits erfolgreich getestet haben eine Verbindung in den Windows-ODBC-Treiber-administrator,
Rotverschiebung/Postgres: wie kann ich Ignoriere Zeilen, die Fehler erzeugen? (Ungültige JSON in json_extract_path_text)
7 Antworten
Ich versuche, führen Sie eine Abfrage in der Rotverschiebung, wo ich auswähle, mit json_extract_path_text. Leider, einige der JSON-Einträge in dieser Spalte in der Datenbank sind ungültig. Was passiert: Wenn die Abfrage hat eine ungültige JSON-Wert, Stoppt es
generate_series () - Methode schlägt fehl, in der Rotverschiebung
6 Antworten
Wenn ich die SQL-Abfrage ausführen: select generate_series(0,g) from ( select date(date1) - date(date2) as g from mytable ; Gibt es einen Fehler: INFO: Function "generate_series(integer,integer)" not supported. ERROR: Specified types or functions (one per INFO message) not
Spark Rotverschiebung mit Python
6 Antworten
Ich versuche zu verbinden Spark mit amazon Redshift, aber ich bin immer diese Fehlermeldung : Mein code ist wie folgt : from pyspark.sql import SQLContext from pyspark import SparkContext sc = SparkContext(appName="Connect Spark with Redshift") sql_context =
Sehr schlechte Leistung von UNION select-Abfrage in der Rotverschiebung / ParAccel
2 Antworten
Ich habe zwei Tabellen in einer Rotverschiebung: tbl_current_day - etwa 4,5 M Zeilen tbl_previous_day - etwa 4,5 M Zeilen, mit den gleichen Daten genau so, wie tbl_current_day Neben es, ich habe eine Ansicht mit der Bezeichnung qry_both_days
Pivot-mehrere Zeilen in Spalten in der Rotverschiebung
1 Antworten
Arbeite ich mit aws redshift und haben einen Fall, wo ich mehrere Zeilen für eine eindeutige ID und SQL verbinden Sie die Zeilen in eine Spalte pro unique-ID. Ich habe gesucht, wie dies zu tun, und wie
Mongodb zu Rotverschiebung
5 Antworten
Haben wir ein paar collections in mongodb, die wir übertragen wollen, um die Rotverschiebung (eine automatische inkrementelle täglich). Wie können wir es tun? Sollten wir den export der mongo csv? Ich denke, wenn die Menschen wollen, um
Wie ändern Sie die Spalte bestellen in Amazon Redshift
3 Antworten
Gibt es eine Möglichkeit zum ändern der Spalte bestellen in Amazon Redshift (oder Postgres, da es nach es)? Oder vielleicht fügen Sie eine Spalte an einer bestimmten position? In mysql gibt, die Sie tun können: ALTER TABLE
Hive — split-Daten in Dateien
1 Antworten
Ist es, einen Weg zu weisen Hive zum aufteilen der Daten in mehrere Ausgabe-Dateien? Oder vielleicht cap die Größe der Ausgabe-Dateien. Ich bin der Planung bis zur Nutzung die Rotverschiebung, die empfiehlt Aufspaltung der Daten in mehrere
Versucht, eine Verbindung zu einer Rotverschiebung von Über AWS Lambda
2 Antworten
Ich bin mit dem Knoten-postgres client für mein AWS Redshift Datenbank. Lokal, ich bin in der Lage, führen Sie den folgenden code in node, erste print-Anweisungen für ">> connected" und ">>> erfolgreiche Abfrage. jsonResult: ". Allerdings, wenn
Amazon Redshift : drop table if exists
2 Antworten
Macht Redshift unterstützen, jegliche Aussage, die äquivalent zu den folgenden? DROP TABLE IF EXISTS tablename InformationsquelleAutor Attilah | 2013-11-24
Löschen Duplikate Zeilen aus der Rotverschiebung
6 Antworten
Ich versuche, löschen Sie doppelte Daten in meinem Rotverschiebung Tabelle. Unten ist meine query:- With duplicates As (Select *, ROW_NUMBER() Over (PARTITION by record_indicator Order by record_indicator) as Duplicate From table_name) delete from duplicates Where Duplicate >
Wie Sie die GRUPPE DURCH und VERKETTEN von Feldern in der Rotverschiebung
2 Antworten
Wie Sie die GRUPPE DURCH und VERKETTEN von Feldern in die Rotverschiebung e.g Wenn ich die Tabelle ID COMPANY_ID EMPLOYEE 1 1 Anna 2 1 Bill 3 2 Carol 4 2 Dave Wie bekomme ich z.B. Folgendes
Das laden der Daten (inkrementell) in Amazon Redshift, S3 vs. DynamoDB vs. Einfügen
5 Antworten
Habe ich eine web-app muss zum senden von berichten über die Verwendung, möchte ich mithilfe von Amazon RedShift, wie ein data warehouse für diesen Zweck, Wie soll ich die Daten erfassen ? Jedes mal, wenn der Benutzer
Wie sicher entladen/kopieren einer Tabelle in einer Rotverschiebung?
1 Antworten
In die Rotverschiebung, ist es bequem zu bedienen entladen/kopieren zum verschieben von Daten auf S3 und laden zurück, um die Rotverschiebung, aber ich fühle, es ist schwer zu wählen Sie das Trennzeichen und das jedes mal. Die
Wie füge ich Zeilennummern in einer Rotverschiebung?
2 Antworten
Ich würde gerne eine Tabelle erstellen mit einer select-Anweisung und fügen Sie eine Spalte mit Zeilennummern So, ich würde gerne etwas schreiben wie: create table schema.table_w_rownumbers as select identity(1, 1) as nrum, foo.* from schema.initial_table as foo;
Amazon Redshift Grants - Neue Tabelle kann nicht zugegriffen werden, obwohl Benutzer gewährt auf alle Tabellen im schema
4 Antworten
Ich habe ein bisschen eine komische situation in Amazon Redshift, wo ich einen Benutzer X, der hat grant select auf alle Tabellen im schema der öffentlichkeit, aber sobald eine neue Tabelle erstellt, diese gewähren scheint nicht zu
kann keine Verbindung zu redshift-Datenbank
4 Antworten
Ich versuche eine Verbindung zu Redshift-Datenbank von SQL Workbench/J mit Postgre-JDBC-Treiber, aber ich kann nicht durchkommen. Ich bekomme diese Fehlermeldung "Verbindung fehlgeschlagen". Der jdbc-Treiber ist richtig gelegen. Ich habe auch versucht durch Aginity Workbench für Rotverschiebung, aber
Kopieren von Daten von Amazon S3, um die Rotverschiebung und vermeiden Sie doppelte Zeilen
4 Antworten
Ich bin kopieren von Daten von Amazon S3, um die Rotverschiebung. Während dieses Prozesses, ich brauche zu vermeiden, die gleichen Dateien wieder geladen. Ich habe keine eindeutige Einschränkungen auf meinem Rotverschiebung Tabelle. Gibt es eine Möglichkeit dies
So berechnen Sie den median von AWS Redshift?
4 Antworten
Meisten Datenbanken verfügen über eine integrierte Funktion zur Berechnung des median, aber ich sehe nichts für median in Amazon Redshift. Könnte man berechnet den median mit einer Kombination der nth_value() und count() Analyse-Funktionen, aber das scheint kitschige.
Rotverschiebung psql auto increment auf gerade Zahl
3 Antworten
Ich versuche zum erstellen einer Tabelle mit einem auto-Inkrement-Spalte, wie unten beschrieben. Da die Rotverschiebung psql nicht unterstützt SERIELLE, musste ich IDENTITY-Datentyp: IDENTITÄT(Samen, step) Klausel, die angibt, dass die Spalte eine Identitätsspalte ist. Eine IDENTITY-Spalte enthält eine
Was bedeutet es, mehrere sortkey Spalten?
3 Antworten
Rotverschiebung ermöglicht die Ausweisung mehrere Spalten als SORTKEY Spalten, aber die meisten der best-practices-Dokumentation geschrieben ist, als gäbe es nur eine einzige SORTKEY. Wenn ich eine Tabelle erstellen mit SORTKEY (COL1, COL2) werden, bedeutet das, dass alle
Rotverschiebung - Wie zu entfernen not NULL-Einschränkung?
3 Antworten
Da die Rotverschiebung nicht unterstützen ALTER COLUMN würde ich gerne wissen, ob es möglich ist, entfernen Sie das not NULL-Einschränkungen von Spalten in einer Rotverschiebung. InformationsquelleAutor shihpeng | 2015-04-09
Rotverschiebung: erstellen einer Tabelle mit Timestamp-Spalte standardmäßig auf Jetzt()
1 Antworten
Ist es ein Weg, um erstellen Sie eine Tabelle mit einer timestamp-Spalte säumige jetzt? Einer der folgenden gelingt der Schöpfung, sondern schlägt auf einfügen. CREATE TABLE MyTable ( device_id VARCHAR(64) NOT NULL encode lzo, app_id VARCHAR(150) NOT
Abfragen von JSON-Felder in der Rotverschiebung
4 Antworten
Wollen wir beginnen mit Rotverschiebung bald, und eines unserer Felder (Spalten) ist ein JSON-Wert. Es ist eine flache JSON (D. H. per definition keine verschachtelten Ebenen) und der Grund, müssen wir die Verwendung von JSON ist, dass
Get table schema in der Rotverschiebung
10 Antworten
Hallo, ich bin beim abrufen des Schemas einer vorhandenen Tabelle. Ich bin mysql-Entwickler und versuche zu arbeiten mit amazon redshift. Wie kann ich exportieren Sie das schema einer vorhandenen Tabelle. In mysql können wir die show create
Kopieren einer Tabelle von einer Rotverschiebung cluster zu einem anderen redshift-cluster(ohne s3)
1 Antworten
Können wir direkt kopieren einer Tabelle von einer Rotverschiebung cluster zu einem anderen redshift-cluster? Weiß ich die Tabelle kopieren kann erreicht werden durch s3 als temp-Speicher(D. H. entladen bis s3 vom ersten cluster und wählen Sie dann
Wie kann ich kopieren Sie eine IDENTITÄT Feld?
3 Antworten
Möchte ich update einige Parameter für eine Tabelle, wie die dist-und Sortierschlüssel. Um dies zu tun, habe ich umbenannt, die alte version der Tabelle, und neu erstellt die Tabelle mit den neuen Parametern (diese können nicht geändert
Bulk-Aktualisierung der vorhandenen Zeilen in der Rotverschiebung
3 Antworten
Dieser scheint, wie es sollte einfach sein, ist es aber nicht. Ich bin der Migration einer query von MySQL auf Rotverschiebung der form: INSERT INTO table (...) VALUES (...) ON DUPLICATE KEY UPDATE value = MIN(value, VALUES(value))
AWS Redshift - Add IDENTITY-Spalte zu vorhandenen Tabelle
3 Antworten
In AWS Redshift, wenn Sie versuchen, hinzufügen einer IDENTITY-Spalte zu einer vorhandenen Tabelle mit dem Befehl ALTER TABLE table_name ADD COLUMN id bigint IDENTITY(1,1); Bekomme ich die folgende Fehlermeldung FEHLERMELDUNG: ALTER TABLE ADD COLUMN unterstützt keine Spalten
Wie die Verbindung von Amazon Redshift zu python
3 Antworten
Dies ist mein python-code, und ich möchte eine Verbindung zu meinem Amazon Redshift-Datenbank auf Python, aber es zeigt Fehler im host. Sagen kann mir jemand die richtige syntax? Bin ich vorbei alle Parameter korrekt? con=psycopg2.connect("dbname = pg_table_def,
Ersten und letzten Tag des letzten Monats in der Rotverschiebung
2 Antworten
Will ich finde den ersten und letzten Tag des letzten Monats in die Rotverschiebung. Jedoch, die meisten postgresql Funktionen wie date_trunc scheinen nicht zu funktionieren. Wie kann ich das erreichen? Amazon RedShift unterstützt date_trunc(). InformationsquelleAutor Nithin Chandy
So ändern Sie die Tabelle schema erstellt nach in einer Rotverschiebung?
4 Antworten
Postgre unterstützt diesen Vorgang wie folgt: ALTER TABLE name SET SCHEMA new_schema Den Betrieb nicht arbeiten, in die Rotverschiebung. Gibt es eine Möglichkeit, das zu tun? Ich versucht, zu aktualisieren, pg_class zu setzen relnamespace(schema-id) für die Tabelle,
Gewusst wie: Laden von Daten in Amazon Redshift über Python Boto3?
2 Antworten
In Amazon Redshift ist Erste-Schritte-Handbuch Daten gezogen von Amazon S3 geladen und in einen Amazon Redshift-Cluster unter Verwendung SQLWorkbench/J. ich würde gerne zu imitieren, um den gleichen Prozess der Verbindung mit dem cluster und laden von sample-Daten
Spalte vom Typ timestamp ohne Zeit-zone, aber Ausdruck vom Typ character
3 Antworten
Ich versuche zum einfügen von Datensätzen auf meine zu versuchen, eine SCD2 auf Rotverschiebung bekomme aber eine Fehlermeldung. Der Ziel-Tabelle die DDL ist CREATE TABLE ditemp.ts_scd2_test ( id INT ,md5 CHAR(32) ,record_id BIGINT IDENTITY ,from_timestamp TIMESTAMP ,to_timestamp
SQL Server isNumeric () - äquivalent in amazon redshift
7 Antworten
Ich bin mit amazon redshift, wie mein data warehouse Ich habe ein Feld (Feld1)vom Typ string. Einige der strings beginnen mit vier zahlen und die anderen mit Buchstaben: 'alpha-test' '1382 beta testen' Ich will heraus zu filtern,
Zeit-Differenz in der Rotverschiebung
2 Antworten
wie man die genaue Zeit der Unterschied zwischen beiden Spalte zB: col1 date is 2014-09-21 02:00:00 col2 date is 2014-09-22 01:00:00 Ausgabe wie result: 23:00:00 Ich bin immer Ergebnis wie Hours Minutes Seconds -------------------- 3 3 20
Mit psycopg2 mit Lambda-Update Rotverschiebung (Python)
2 Antworten
Ich bin versucht, zu aktualisieren Rotverschiebung aus einer Lambda-Funktion mit python. Um dies zu tun, ich bin versucht zu kombinieren-2-code-Fragmente. Beide Fragmente sind funktionsfähig sein, wenn ich Sie laufen getrennt. Aktualisierung Rotverschiebung von PyDev für Eclipse import
Ungültige Ziffern auf Rotverschiebung
2 Antworten
Ich versuche zu laden, einige Daten von der Bühne in die relationale Umgebung und etwas passiert, habe ich nicht herausfinden können. Ich versuche, führen Sie die folgende Abfrage: SELECT CAST(SPLIT_PART(some_field,'_',2) AS BIGINT) cmt_par FROM public.some_table; Den some_field
Wie eine Verbindung zu einem cluster in Amazon Redshift mit SQLAlchemy?
3 Antworten
In Amazon Redshift ist Erste-Schritte-Handbuch erwähnt, die Sie nutzen können SQL-client tools sind kompatibel mit PostgreSQL zu verbinden, um Ihre Amazon Redshift-Cluster. Im tutorial, verwenden Sie SQL Workbench/J-client, aber ich würde es gerne nutzen, python (insbesondere SQLAlchemy).
Rotverschiebung left outer join ist das weglassen von Nullen
2 Antworten
Als hintergrund, ich habe 100 von Rotverschiebung Abfrage, viele viel komplexer als diese und doch, ich glaube, ich muss etwas fehlt einfach. Ich mache ein left outer join zwischen Tabelle 1 und Tabelle 2. Die Tabellen sind
while-Schleife in Amazon redshift
1 Antworten
Ich bin mit sql-server und wir haben eine while-Schleife gibt, die ich erstellt habe in einer Gespeicherten Prozedur.. ich bin Bewertung der Rotverschiebung und der Suche nach einem äquivalent in einer redshift von amazon. Unten ist das,