it-swarm.com.de

hdfs

Daten in Hadoop schreiben

Wo speichert HDFS Dateien standardmäßig lokal?

Wie führt Hadoop Eingangssplits durch?

Hadoop ein Verzeichnis kopieren?

Wo speichert Hive Dateien in HDFS?

Wie kann man eine HDFS-Verzeichnisgröße überprüfen?

LeaseExpiredException: Kein Lease-Fehler bei HDFS

Unterschied zwischen hadoop fs -put und hadoop fs -copyFromLocal

Namenode fängt nicht an

Es werden keine Datenknoten gestartet

Unterschiede zwischen Amazon S3 und S3n in Hadoop

Wie listet man alle Dateien in einem Verzeichnis und dessen Unterverzeichnisse in hadoop hdfs auf

Festlegen des Benutzernamens beim Ablegen von Dateien auf HDFS von einem Remotecomputer aus

So ermitteln Sie die Größe einer HDFS-Datei

Befehl "Verfügbarer HDFS-Speicherplatz"

Erlaubnis verweigert bei hdfs

Python Datei als Stream von HDFS lesen

Gibt es eine Möglichkeit, einem laufenden Hadoop-Cluster Knoten hinzuzufügen?

beim Laden der Daten aus flachen Dateien in Hive-Tabellen werden Nullwerte abgerufen

hive - wie man eine externe Hive-Tabelle zusammen mit Daten ablegt

Laden Sie CSV mit Kommas in zitierten Feldern

Beim Schreiben in HDFS von Java wurde "nur auf Knoten anstelle von minReplication repliziert"

Wie verarbeitet Hadoop Datensätze, die über Blockgrenzen verteilt sind?

Beste aufteilbare Komprimierung für Hadoop-Eingabe = bz2?

Das Schreiben in HDFS konnte nur auf Knoten anstelle von minReplication (= 1) repliziert werden.

Der Namensknoten befindet sich im abgesicherten Modus. Ich kann nicht gehen

Hadoop beim Umbenennen von Dateien

Schreiben Sie eine Datei in hdfs mit Java

Unterschied zwischen HBase und Hadoop / HDFS

Lesen von HDFS und lokalen Dateien in Java

Spark-Standalone-Modus: Wie komprimiert man die in HDFS geschriebene Funkenausgabe?

So kopieren Sie Dateien von HDFS in das lokale Dateisystem

Was ist der Unterschied zwischen "hadoop fs" Shell-Befehlen und "hdfs dfs" Shell-Befehlen?

hadoop-Verbindung an Port 9000 abgelehnt

Was genau bedeutet Non DFS Used?

hadoop fs -put Befehl

So beheben Sie beschädigte HDFS-Dateien

Datenblockgröße in HDFS, warum 64 MB?

Warum gibt es keinen Shell-Befehl 'hadoop fs -head'?

Fehler beim Erkennen eines gültigen hadoop-Stammverzeichnisses

Hadoop 2.2 Installation `. ' Keine solche Datei oder Ordner

Wo ist die Konfigurationsdatei für HDFS in Hadoop 2.2.0?

Holen Sie sich einige Zeilen HDFS-Daten

Was ist der Zweck der Misch- und Sortierphase im Reduzierer in Map Reduce Programming?

Warum schlägt "hadoop fs -mkdir" mit Permission Denied fehl?

Der Standard-Namenode-Port von HDFS ist 50070.Aber ich bin an einigen Stellen auf 8020 oder 9000 gestoßen

Anhängen von Daten an eine vorhandene Datei in HDFS Java

Wie kann man hadoop dazu bringen, Verzeichnisse anzulegen, wenn sie nicht existieren?

Falsche Konfiguration: Namenode-Adresse dfs.namenode.rpc-address ist nicht konfiguriert

Schreiben Sie mehrere Ausgaben mit einem Spark-Schlüssel - einem Spark-Job

wie man Benutzer in der Supergruppe von hdfs in Linux hinzufügt?

Analysieren Sie CSV als DataFrame / DataSet mit Apache Spark und Java

Suchen Sie die Portnummer, an der HDFS empfangsbereit ist

Es werden Datenknoten ausgeführt, und in dieser Operation werden keine Knoten ausgeschlossen

Iterieren Sie das HDFS-Verzeichnis

Benennen Sie das Verzeichnis in HDFS um

Kopieren Sie einen lokalen Dateisystemordner nach HDFS

Der Knoten/hbase befindet sich nicht in ZooKeeper

problem beim Ausführen des Spark-Jobs auf dem Garncluster

Spark-Submit funktioniert nicht, wenn sich die Anwendungsjar in HDFS befindet

Wie funktioniert Spark Partition (ing) auf Dateien in HDFS?

Spark - CSV-Datei als DataFrame laden?

apache-Funken - Überprüfen Sie, ob eine Datei vorhanden ist

Splitgröße vs. Blockgröße in Hadoop

Wie kopiere ich Daten von einem HDFS auf ein anderes HDFS?

Hadoop Mapreduce Error Eingabepfad existiert nicht: hdfs: // localhost: 54310/user/hduser/input "

So navigieren Sie durch Verzeichnisse in Hadoop HDFS

Wie bekomme ich Schema-/Spaltennamen aus der Parkettdatei?

Das Root-Arbeitsverzeichnis:/tmp/Hive auf HDFS sollte beschreibbar sein. Aktuelle Berechtigungen sind: rw-rw-rw- (unter Windows)

Wie entpacke ich .gz-Dateien in ein neues Verzeichnis in hadoop?

Hadoop: ... wird auf Knoten anstelle von minReplication (= 1) repliziert. Es sind 1 Datanode (n) aktiv und es werden keine Knoten ausgeschlossen

Wie greife ich auf Dateien in Hadoop HDFS zu?

Liest ganze Textdateien aus einer Komprimierung in Spark

hdfs dfs -put mit überschreiben?

Was sind die Vor- und Nachteile des Parkettformats im Vergleich zu anderen Formaten?

Gibt es einen Befehl hdfs zum Auflisten von Dateien im HDFS-Verzeichnis gemäß Zeitstempel?

wie können mehrere Parkettdateien mit dem Befehl linux oder hdfs zu einer einzigen Parkettdatei zusammengeführt werden?

Wie entferne ich Dateien im hadoop-Verzeichnis auf einmal?

So aktualisieren Sie eine Datei in HDFS

Wie kann ich ein RDD in HDFS speichern und später wieder einlesen?

hdfs dfs -mkdir, Keine solche Datei oder Verzeichnis

Python: Speichern Sie den Pandas-Datenrahmen in einer Parkettdatei

SparkSQL - Parkettdatei direkt lesen

Unterschied zwischen `yarn.scheduler.maximum-allocation-mb` und` yarn.nodemanager.resource.memory-mb`?

Durchsuchen Sie eine Tabelle in allen Datenbanken in hive

Wie kann ich mit dem spark-csv-Paket nur n Zeilen einer großen CSV-Datei in HDFS lesen?

localhost: ERROR: Die Priorität des Datenknotenprozesses 32156 kann nicht festgelegt werden

So speichern Sie eine Datei im Cluster