Zugriff verweigert bei hdfs

Ich bin neu auf hadoop distributed file system habe ich die komplette installation von hadoop single-node auf meinem Rechner.aber nach, wenn ich dabei bin, zum hochladen von Daten auf hdfs es eine Fehlermeldung geben Permission Denied.

Nachricht vom terminal mit dem Befehl:

hduser@ubuntu:/usr/local/hadoop$ hadoop fs -put /usr/local/input-data/ /input
put: /usr/local/input-data (Permission denied)

hduser@ubuntu:/usr/local/hadoop$

Nach der Verwendung von sudo und das hinzufügen von hduser zu sudouser:

hduser@ubuntu:/usr/local/hadoop$ sudo bin/hadoop fs -put /usr/local/input-data/ /inwe
put: org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="":hduser:supergroup:rwxr-xr-x

hduser@ubuntu:/usr/local/hadoop$

InformationsquelleAutor der Frage Vignesh Prajapati | 2012-07-21

  1. 55

    Löste ich dieses problem durch temporäre Deaktivierung des dfs permission.By hinzufügen von unten Eigentum code
    zu conf/hdfs-site.xml

    <property>
  <name>dfs.permissions</name>
  <value>false</value>
</property>

    InformationsquelleAutor der Antwort Vignesh Prajapati

  2. 45

    Ich hatte ähnliche situation, und hier ist mein Ansatz ist etwas anders:

     HADOOP_USER_NAME=hdfs hdfs dfs -put /root/MyHadoop/file1.txt /

    Was Sie wirklich tun ist, Sie Lesen lokale Datei in übereinstimmung mit Ihrer lokalen Berechtigungen aber beim platzieren der Datei in HDFS Sie authentifiziert sind, wie Benutzer mit hdfs. Sie können dies tun, mit anderen ID (Vorsicht vor echten auth-Systeme-Konfiguration, aber ist dies meistens nicht der Fall).

    Vorteile:

    1. Berechtigungen sind gehalten, die auf HDFS.
    2. Sie brauchen nicht sudo.
    3. Sie nicht brauchen, tatsächlich geeignete lokale Benutzer "hdfs".
    4. Sie brauchen nicht, etwas zu kopieren oder ändern von Berechtigungen aufgrund der vorangegangenen Punkte.

    InformationsquelleAutor der Antwort Roman Nikitchenko

  3. 14

    Sie erleben, sind zwei getrennte Probleme hier:

    hduser@ubuntu:/usr/local/hadoop$ hadoop fs -put /usr/local/input-data/ /input put: /usr/local/input-data (Permission denied)

    Hier, die Benutzer hduser keinen Zugriff auf das lokale Verzeichnis /usr/local/input-data. Das heißt, Ihr lokaler Berechtigungen zu restriktiv sind. Ändern Sie es.

    hduser@ubuntu:/usr/local/hadoop$ sudo bin/hadoop fs -put /usr/local/input-data/ /inwe put: org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="":hduser:supergroup:rwxr-xr-x

    Hier, die Benutzer root (da man sich mit sudo) keinen Zugriff auf das HDFS-Verzeichnis /input. Wie Sie sehen können: hduser:supergroup:rwxr-xr-x sagt nur hduser Schreibzugriff hat. Hadoop nicht wirklich Respekt root als einen besonderen Benutzer.

    Dieses Problem zu beheben, schlage ich vor, Sie ändern die Berechtigungen auf der lokalen Daten:

    sudo chmod -R og+rx /usr/local/input-data/

    Versuchen Sie dann, die put Befehl wieder als hduser.

    InformationsquelleAutor der Antwort Donald Miner

  4. 5

    Starten Sie eine shell als hduser (von der Wurzel), und führen Sie Ihren Befehl

    sudo -u hduser bash
hadoop fs -put /usr/local/input-data/ /input

    [update]
    Beachten Sie auch, dass die hdfs Benutzer ist der super-Benutzer und kann alle r/w-Rechte.

    InformationsquelleAutor der Antwort Martin Tapp

  5. 3

    Ich habe dieses problem gelöst, indem Sie mithilfe der folgenden Schritte

    su hdfs
hadoop fs -put /usr/local/input-data/ /input
exit

    InformationsquelleAutor der Antwort java_dev

Schreibe einen Kommentar