Interstage Big Data Parallel Processing Server V1.2.0 ユーザーズガイド

14.2.8 Hadoop用のディレクトリ作成

マスターサーバ(プライマリ)でHadoop用のディレクトリを作成します。

1. Hadoopの動作に必要なディレクトリを作成します。

   構成ファイルbdpp.confのBDPP_PDFS_MOUNTPOINTパラメーター、およびBDPP_HADOOP_TOP_DIRパラメーターに指定したディレクトリ、およびその配下にディレクトリを作成します。

   bdpp.confに以下を指定している場合の例を示します。

   • BDPP_PDFS_MOUNTPOINT=/mnt/pdfs

   • BDPP_HADOOP_TOP_DIR=/hadoop

     # mkdir -p /mnt/pdfs/hadoop  # BDPP_PDFS_MOUNTPOINTとBDPP_HADOOP_TOP_DIRを連結
     # chown root:hadoop /mnt/pdfs/hadoop
     # chmod 0777 /mnt/pdfs/hadoop
     # 
     # mkdir -p /mnt/pdfs/hadoop/tmp
     # chmod 1777 /mnt/pdfs/hadoop/tmp
     # 
     # mkdir -p /mnt/pdfs/hadoop/mapred/mapredsystem
     # chown -R mapred:hadoop /mnt/pdfs/hadoop/mapred
     # chmod 0755 /mnt/pdfs/hadoop/mapred
     # chmod 0700 /mnt/pdfs/hadoop/mapred/mapredsystem
     # 
     # mkdir -p /mnt/pdfs/hadoop/user
     # chown root:root /mnt/pdfs/hadoop/user
     # chmod 0755 /mnt/pdfs/hadoop/user

     
     

2. ユーザーのホームディレクトリを作成します。

   構成ファイルbdpp.confのBDPP_HADOOP_DEFAULT_USERSパラメーターに指定したユーザー、およびセットアップ以降に作成したジョブ実行ユーザーのDFS上のホームディレクトリを作成します。

   参照

   作成方法については、12.1.2 DFS上にユーザーのホームディレクトリを作成を参照してください。

   
   

3. MapReduceジョブユーザー認証キーを設定します。

   2.でホームディレクトリを作成したユーザーについて認証キーを設定します

   参照

   設定方法については、12.1.3 MapReduceジョブユーザー認証キーの設定を参照してください。