世界で最も信頼性の高いストレージでファイル操作を実行するために最も重要で頻繁に使用されるHadoop HDFSコ
Hadoop HDFSは、巨大なサイズのファイルに冗長なストレージスペースを提供する分散ファイルシステムです。 これは、ペタバイトにテラバイトの範囲内にあるファイルを格納するために使用されます。
最新の技術動向で更新滞在
電報にDataFlairに参加！!
Hadoop HDFSコマンド
HDFSコマンドの助けを借りて、我々は、ファイルの権限を変更するファイルの内容を表示し、ファイルやディレクトリを作成し、hdfsHDFSコマンドを開始する前に、Hadoopサービスを開始する必要があります。 Hadoopサービスを開始するには、次の手順を実行します。
1. ~/Hadoop-3.1.2ディレクトリ
2に移動します。 コマンドを使用してHadoopサービスを開始します
sbin/start-dfs.sh
このHadoopコマンドチュートリアルでは、トップ10のHadoop HDFSコマンドとその使用法、例、
ここで、HDFSコマンドから始めましょう。
バージョン
Hadoop HDFSバージョンコマンドの使用法:
version
Hadoop HDFSバージョンコマンドの例:
HDFSを使用する前に、Hadoopをデプロイする必要があります。hadoop3をインストールして設定するには、このガイドに従ってください。
hadoop hdfsバージョンコマンドの説明:
Hadoop fsシェルコマンドのバージョンは、Hadoopのバージョンを出力します。
hadoopのバージョンを出力します。
hadoop
mkdir
Hadoop HDFS mkdirコマンドの使用法:
hadoop fs –mkdir /path/directory_name
Hadoop HDFS mkdirコマンド例1:
この例では、mkdirコマンドを使用してhdfsにnewDataFlairという名前のディレクトリを作成しようとしています。
lsコマンドを使用して、HDFS内のディレクトリを確認できます。
例2:
Hadoop HDFS mkdirコマンドの説明:
このコ注:ディレクトリがすでにHDFSに存在する場合は、ファイルが既に存在するというエラーメッセージが表示されます。hadoop fs mkdir-p/path/directorynameを使用するので、ディレクトリが存在しても失敗しないようにしてください。このHDFS機能ガイドからHadoop HDFSのさまざまな機能を学びます。
ls
Hadoop HDFS lsコマンドの使用法:
hadoop fs -ls /path
Hadoop HDFS lsコマンドの例1:
以下の例では、lsコマンドを使用してHDFSに存在するファイルとディレ
Hadoop HDFS lsコマンドの説明:
Hadoop fsシェルコマンドlsは、ユーザーが指定したパスで指定されたディレクトリの内容のリス 指定されたディレクトリ内の各ファイルまたはディレクトリの名前、アクセス許可、所有者、サイズ、および変更日が表示されます。
Hadoop HDFS lsコマンド例2:
Hadoop HDFS ls説明:
このHadoop fsコマンドは-lsと同じように動作しますが、パスのすべてのサブディレhadoop HDFS putコマンドの使用法:
haoop fs -put <localsrc> <dest>
Hadoop HDFS putコマンドの例:
この例では、ローカルファイルシステムのlocalfile1をHadoopファイルシステムにコピーしようとしています。
Hadoop HDFS putコマンドの説明:
Hadoop fsシェルコマンドputはcopyFromLocalに似ています。hadoopファイルシステム。Hadoop HDFS copyFromLocalコマンドの使用法:
hadoop fs -copyFromLocal <localsrc> <hdfs destination>
Hadoop HDFS copyFromLocalコマンドの例:以下の例では、ローカルファイルシステムに存在する’test1’ファイルをHadoopのnewDataFlairディレクトリにコピーしようとしています。
Hadoop HDFS copyFromLocalコマンドの説明:
このコマンドは、ローカルファイルシステムからHDFSにフHDFSデータの読み取り操作の内部、ファイルの読み取り中にHDFSでデータがどのように流れるかを学習します。Hadoop HDFSコマンドにまだ疑問はありますか？ コメントしてください。hadoop HDFS getコマンドの使用法:
hadoop fs -get <src> <localdest>
Hadoop HDFS getコマンドの例:
この例では、hadoopファイルシステムの’testfile’をローカルファイルシステムにコピーしようとしています。hadoop HDFS getコマンドの説明:hadoop fsシェルコマンドgetは、Hadoopファイルシステムからローカルファイルシステムにファイルまたはディレクトリをコピーします。hadoop-HDFSコマンドからコピーされたファイルの確認
: ラック認識、高可用性
copyToLocal
Hadoop HDFS copyToLocalコマンドの使用法:
hadoop fs -copyToLocal <hdfs source> <localdst>
Hadoop HDFS copyToLocalコマンドの例:
この例では、HDFSのnewDataFlairディレクトリにある’sample’ファイルをローカ
lsコマンドを使用して、ファイルがコピーされているかどうかをクロスチェックできます。hadoop HDFS copyToLocal説明:
copyToLocalコマンドは、HDFSからローカルファイルシステムにファイルをコピーします。
cat
Hadoop HDFS catコマンドの使用法:
hadoop fs –cat /path_to_file_in_hdfs
Hadoop HDFS catコマンドの例:
この例では、catコマンドを使用して、HDFSのnewDataFlairディレクトリに存在する’sample’ファイルの内容を表示しています。
Hadoop HDFS catコマンドの説明:catコマンドは、HDFS内のファイルを読み取り、コンソールまたはstdoutにファイルの内容を表示します。
mv
Hadoop HDFS mvコマンドの使用法:
hadoop fs -mv <src> <dest>
Hadoop HDFS mvコマンドの例:
この例では、HDFSにディレクトリ’DR1’があります。 私たちは、hdfsのDataFlairディレクトリにDR1ディレクトリを移動するmvコマンドを使用しています。
Hadoop HDFS mvコマンドの説明:
HDFS mvコマンドは、HDFS内のソースから宛先にファイルまたはディレクトリを移動します。hadoop HDFS cpコマンドの使用法:
hadoop fs -cp <src> <dest>
Hadoop HDFS cpコマンドの例:
以下の例では、hdfsのnewDataFlairディレクトリにある’file1’をHDFSのdataflairディレクトリにコピーしています。Hadoop HDFS cpコマンドの説明:
cpコマンドは、HDFS内のあるディレクトリから別のディレクトリにファイルをコピーします。
hadoop HDFS cpコマンドの説明:
cpコマンドは、hdfs内のあるディレクトリから別のディレクトリにファイルをコピーします。これはすべてHadoop HDFSコマンドにありました。 あなたがそれを好き願っています。
What’s Next
- Hadoop HDFS Commands Part-II
- Hadoop HDFS Commands Part-III