Užitečné příkazy prostředí Hadoop

Tento blog popisuje všechny užitečné příkazy prostředí Hadoop. Spolu s příkazy Hadoop Shell má také snímky obrazovky, které usnadňují učení. Číst dál!

HDFS znamená „ H čumák D přiděleno F s S ystem “. HDFS je dílčím projektem projektu Apache Hadoop. Tento projekt Apache Software Foundation je navržen tak, aby poskytoval souborový systém odolný proti chybám navržený pro provoz na komoditním hardwaru. K HDFS se přistupuje prostřednictvím sady příkazů prostředí, které budou popsány v tomto příspěvku.





Krátká poznámka před spuštěním: Všechny příkazy prostředí Hadoop Shell jsou vyvolány skriptem bin / hadoop.

Příkazy uživatele:

  • Spusťte systém souborů DFS:

Použití: hadoop fsck - /



Souborový systém Run-DFS (1)

  • C sakra verze Hadoop :

Použití: Verze Hadoop



Příkazy FS Shell:

Příkaz Hadoop fs spustí obecného klienta uživatele souborového systému, který komunikuje se souborovým systémem MapR (MapR-FS).

  • Zobrazit výpisy souborů:

Použití: hadoop fs -ls hdfs: /

řadič zobrazení modelu v Javě

  • Zkontrolovat stav paměti:

Použití: hadoop fs -df hdfs: /

  • Počet adresářů, souborů a bajtů v zadané cestě a vzoru souboru:

Použití: hadoop fs -count hdfs: /

  • Přesunout soubor z jednoho umístění do druhého:

Použití: -mv

  • Zkopírujte soubor ze zdroje do cíle :

Použití: -cp

  • Smazat soubor:

Použití: -rm

  • Vložte soubor z místního systému souborů do distribuovaného systému souborů Hadoop:

Použití: - vstup…

  • Zkopírujte soubor z místního na HDFS:

Použití: -copyFromLocal…

  • Zobrazit soubor v systému distribuovaných souborů Hadoop :

Použití: -kat

Příkazy pro správu:

  • Naformátujte účel :

Použití: hadoop purpose -format

program násobení matic v Javě

  • Počáteční sekundární účely:

Použití: hadoop secondrynamenode

  • Běh schválně :

Použití: hadoop účel

  • Běh datový uzel :

Použití: hadoop datanode

jak se naučit pl sql
  • Vyvažování klastrů :

Použití: hadoop balancer

  • Spustit uzel sledovače úloh MapReduce:

Použití: sledovač úloh hadoop

  • Spusťte uzel sledovače úloh MapReduce:

Použití: hadoop tasktracker

Máte na nás dotaz? Uveďte je prosím v sekci komentáře a my se vám ozveme.

Související příspěvky:

Operátoři v Apache Pig