ラベル ApacheHadoop の投稿を表示しています。 すべての投稿を表示
ラベル ApacheHadoop の投稿を表示しています。 すべての投稿を表示
2018年6月25日月曜日

VagrantでAmbari(HDP2.6)/HDFS/HBaseをインストールした仮想マシン(CentOS7.4)を構築する

›
Apache HBaseは列指向の分散データベースです。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagrantfileを使用して、Am...
2018年6月20日水曜日

VagrantでAmbari(HDP2.6)/HDFS/HBase/Phoenixをインストールした仮想マシン(Ubuntu16.04)を構築する

›
Apache PhoenixはHBase上に構築されるRDBレイヤーです。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagrantfil...
2018年6月19日火曜日

VagrantでAmbari(HDP2.6)/HDFS/Hiveをインストールした仮想マシン(Ubuntu16.04)を構築する

›
HiveでHadoop上のデータにクエリーを実行する事ができます。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagrantfileを使用...
2018年5月30日水曜日

VagrantでJupyter LabとHDFS/Hive/Sparkをインストールした仮想マシン(Ubuntu16.04)を構築する

›
Jupyter Labでインタラクティブなコンピューティング環境を提供する事ができます。AmbariでHDFS/Hive/Sparkをインストールした1ノードクラスタを構築します。 pysparkを使用して、JupyterからSparkに接続します。 〇Jupyter La...
2018年5月28日月曜日

VagrantでAmbari(HDP2.6)/HDFS/Sparkをインストールした仮想マシン(Ubuntu16.04)を構築する

›
Apache SparkでHadoop上のデータにクエリーを実行する事ができます。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagran...

VagrantでAmbari(HDP2.6)/HDFS/HBase/Phoenixをインストールした仮想マシン(CentOS7.4)を構築する

›
Apache PhoenixはHBase上に構築されるRDBレイヤーです。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagrantfil...
2018年5月25日金曜日

VagrantでAmbari(HDP2.6)/HDFS/HBaseをインストールした仮想マシン(Ubuntu16.04)を構築する

›
Apache HBaseは列指向の分散データベースです。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagrantfileを使用して、Am...
2018年5月23日水曜日

VagrantでAmbari(HDP2.6)/HDFS/Sparkをインストールした仮想マシン(CentOS7.4)を構築する

›
Apache SparkでHadoop上のデータにクエリーを実行する事ができます。 〇Ambariの画面 ブラウザでhttp://192.168.1.117:8080/にアクセスします。ユーザ/パスワードはadmin/adminです。 〇構築方法 以下のVagran...
2017年8月26日土曜日

Vagrantを使用してkerberos化した1ノードクラスタのhive環境を構築する

›
Kerberos認証を使用した1ノードのhive環境は、以下のVagrantfileを使用して構築できます。Kerberosとhiveのインストールと同時にテストユーザ(test)の作成とサンプルテーブルの作成も同時に行います。 Vagrantfile VAGRANTFILE...
2017年8月6日日曜日

VagrantとAmbari blueprintでSpark2の１ノードクラスタを構築する

›
以下のVagrantfileで、mysql, Ambari Server, Spark2などがインストールされた1ノードクラスタを構築できます。 Vagrantfile VAGRANTFILE_API_VERSION = "2" Vagrant.conf...
2017年8月3日木曜日

VagrantとAmbari blueprintでhiveの１ノードクラスタを作成する

›
以下のVagrantfileで、mysql, Ambari Server, Hiveなどがインストールされた１ノードクラスタを構築できます。 VAGRANTFILE_API_VERSION = "2" Vagrant.configure(VAGRANTF...