Hadoopの標準GUI HUEの最新情報
22 likes9,022 views
Hadoop User Conference 2014のHueのセッション資料です
![HUEの設定方法
HUE.INI
core-site.xmlに似ている
が、.INI形式の構文
場所?
/etc/hue/conf/hue.ini
または
$HUE_HOME/desktop/conf/
pseudo-distributed.ini
[desktop]
[[database]]
# Database engine is typically one of:
# postgresql_psycopg2, mysql, or sqlite3
engine=sqlite3
## host=
## port=
## user=
## password=
name=desktop/desktop.db](https://image.slidesharecdn.com/hucj2014hue36-140708034722-phpapp01/85/Hadoop-GUI-HUE-22-320.jpg)
![HOW
hue.iniにHadoop API
の全てのホストとポー
トをリスト
HBaseとHiveの例
Full
list
[hbase]
# Comma-separated list of HBase Thrift servers for
# clusters in the format of '(name|host:port)'.
hbase_clusters=(Cluster|localhost:9090)
[beeswax]
hive_server_host=host-abc
hive_server_port=10000
RPC CALL
全てのHADOOPコンポーネントに](https://image.slidesharecdn.com/hucj2014hue36-140708034722-phpapp01/85/Hadoop-GUI-HUE-31-320.jpg)
Hadoopの標準GUI HUEの最新情報
- 1. HADOOPの標準GUI HUEの 最新情報 Tatsuo Kawasaki kawasaki@cloudera.com Hadoop User Conference 2014, Jul 8, 2014
- 6. オープンソース 3350 のコミット 38 人のコントリビュータ 698 のスター 245 のフォーク github.com/cloudera/hue
- 7. 開発コアチーム Join us at team.gethue.com Romain Rigaux Enrico Ber5 Chang Abraham Elmahrek Amstel
- 8. トーク ミートアップとイベント: NYC, Paris, LA, Tokyo, SF, Stockholm, Vienna, San Jose, Singapore, Budapest… 近日予定: London, West coast AROUND THE WORLD 避暑 Nov 13 Koh Chang, Thailand May 14 Curaçao, Netherlands An5lles Nov 14 Goa, India
- 16. どのディストリビューションを使うべきか? 先進的なプレビュー版 最も安定し、コンポー ネント間での確認もな されている 非常に新しい GITHUB CDH / CM TARBALL ハッカー 先進的なユーザー 一般ユーザー
- 20. Python 2.4 2.6 パッケージを使用する場合。 ソースからビルドする場合は その他の packagesが必要 SERVER CLIENT ウェブブラウザ IE 9+, FF 10+, Chrome, Safari 必要なものは? Hi there, I’m “just” a web server.
- 21. HUEのサービスは? ページ、および静的コ ンテンツも提供するプ ロセス 1 SERVER 1 DB クッキー、保存したク エリ、ワークフロー用 Hi there, I’m “just” a web server.
- 22. HUEの設定方法 HUE.INI core-site.xmlに似ている が、.INI形式の構文 場所? /etc/hue/conf/hue.ini または $HUE_HOME/desktop/conf/ pseudo-distributed.ini [desktop] [[database]] # Database engine is typically one of: # postgresql_psycopg2, mysql, or sqlite3 engine=sqlite3 ## host= ## port= ## user= ## password= name=desktop/desktop.db
- 23. 認証 データベース (SQLite, MySQL, …)にLogin/ Passwordを管理 SIMPLE ENTERPRISE LDAP (最も使用され ている), OAuth, OpenID, SAML
- 24. DBバックエンド
- 25. LDAPバックエンド Integrate your employees: LDAP How to guide
- 27. グループのリストと権限 権限ができること: - アプリ(例: Hiveエ ディタ)へのアクセス を許可 - アプリからデータを 修正 (例: Hiveテーブ ルのDROPや、 HBaseブラウザでセ ルを編集） 設定 ‒ アプリケーションと権限 A list of permissions
- 31. HOW hue.iniにHadoop API の全てのホストとポー トをリスト HBaseとHiveの例 Full list [hbase] # Comma-separated list of HBase Thrift servers for # clusters in the format of '(name|host:port)'. hbase_clusters=(Cluster|localhost:9090) [beeswax] hive_server_host=host-abc hive_server_port=10000 RPC CALL 全てのHADOOPコンポーネントに
- 32. HTTPS SSL DB SSL WITH HIVESERVER2 さらに多く … AUDITING セキュリティ KERBEROS
- 33. 2つのHueインスタンス HA proxy Multi DB パフォーマンス: ウェブ サイトのようにほとんど がRPCコール 高可用性 HOW
- 34. Impala, Hiveの統合, Spark (Shark も) 対話的なSQLエディタ MapReduce、メタス トア、HDFSを統合 SQL WHAT
- 37. DEMO TIME
- 38. まとめ Hueでプロキシーユーザーと してHadoop Service APIを 有効化 各サービスAPIを示すよう にhue.iniを設定 @gethue や hue-user マシンにHueを インストール LDAPバックエンドを使用 インストール 設定有効化 ヘルプLDAP
- 39. 次の6ヶ月のロードマップ Sentry Search, Spark, SQL 多くのダッシュボード! Oozie v2 内部コンポーネントの統 合 (HBase <-> Search, インデックス作成ウィ ザード、ドキュメントの 権限), Hadoop Web apps SDK あなたのアイデアは？ WHAT
- 40. …GIVE CLOUDERA MANAGER A TRY! vimeo.com/91805055 設定が難しい…
- 43. TWITTER @gethue USER GROUP hue-‐user@ WEBSITE hp://gethue.com LEARN hp://learn.gethue.com THANK YOU! 翻訳版ブログ公開中 hp://gethue.com/blog/?lang=ja