役立つHadoopシェルコマンド



このブログでは、役立つすべてのHadoopシェルコマンドについて説明しています。 Hadoopシェルコマンドに加えて、学習を簡単にするためのスクリーンショットもあります。読む!

HDFSは「 H adoop D 配布 FS システム」。 HDFSは、ApacheHadoopプロジェクトのサブプロジェクトです。このApacheSoftware Foundationプロジェクトは、コモディティハードウェアで実行するように設計されたフォールトトレラントファイルシステムを提供するように設計されています。 HDFSには、この投稿で説明する一連のシェルコマンドを介してアクセスします。





開始する前の簡単な注意:すべてのHadoopシェルコマンドはbin / hadoopスクリプトによって呼び出されます。

ユーザーコマンド:

  • DFSファイルシステムを実行します。

使用法:hadoop fsck – /



Run-DFS-file-system(1)

  • C Hadoopの一体バージョン

使用法:Hadoopバージョン



FSシェルコマンド:

Hadoop fsコマンドは、MapRファイルシステム(MapR-FS)と対話する汎用ファイルシステムユーザークライアントを実行します。

  • ファイルリストの表示:

使用法:hadoop fs -ls hdfs:/

  • メモリステータスを確認します。

使用法:hadoop fs -df hdfs:/

  • 指定されたパスおよびファイルパターン内のディレクトリ、ファイル、およびバイトの数:

使用法:hadoop fs -count hdfs:/

  • ファイルをある場所から別の場所に移動します。

使用法:-mv

  • ファイルをソースから宛先にコピーする

使用法:-cp

  • ファイルを削除する:

使用法:-rm

オーバーロードとc ++のオーバーライド

  • ローカルファイルシステムからHadoop分散ファイルシステムにファイルを配置します。

使用法:-put…

  • ローカルからHDFSにファイルをコピーします。

使用法:-copyFromLocal…

java c ++ python
  • Hadoop分散ファイルシステムでファイルを表示する

使用法:-cat

管理コマンド:

  • 目的をフォーマットする

使用法:hadoop目的-フォーマット

  • 二次的な目的の開始:

使用法:hadoop secondrynamenode

  • わざと走る

使用法:Hadoopの目的

  • 実行 データノード

使用法:hadoopデータノード

  • クラスターバランシング

使用法:Hadoopバランサー

  • MapReduceジョブトラッカーノードを実行します。

使用法:Hadoopジョブトラッカー

  • MapReduceタスクトラッカーノードを実行します。

使用法:hadoop tasktracker

質問がありますか?コメント欄にご記入ください。折り返しご連絡いたします。

関連記事:

ApachePigの演算子