「Apache Spark」の版間の差分

削除された内容追加された内容

インライン

2016年10月15日 (土) 15:59時点における版

Hadoop

Apache Spark はオープンソースのクラスタコンピューティングフレームワークで、もともとカリフォルニア大学バークレー校の AMPLab で開発されていました。 Hadoop の二段式ディスクベース MapReduce パラダイムと比較して、Spark のインメモリ処理はいくつかのアプリケーションにおいて100倍高速なパフォーマンスをもたらします。クラスタのメモリへのデータのロードと、繰り返しアクセスがユーザープログラムに許されているため、Spark は機械学習アルゴリズムに適しています。

インストール

apache-spark^AUR パッケージをインストールしてください。

設定

いくつかの環境変数が /etc/profile.d/apache_spark.sh に設定されています。

変数	値	説明
PATH	`$PATH:/usr/lib/apache_spark/bin`	Spark バイナリ

もしあなたのシェルが /etc/profile.d を読み込まなかったら、PATH 環境変数を調整する必要があるかもしれません:

export PATH=$PATH:/usr/lib/apache_spark/bin

@@ 19行目: / 19行目: @@
 {| class="wikitable"
 |-
-! ENV
+! 変数
-! Value
+! 値
+! 説明
-! Description
 |-
 | PATH
 | {{ic|$PATH:/usr/lib/apache_spark/bin}}
-| Spark binaries
+| Spark バイナリ
 |}
-もしあなたのシェルが {{ic|/etc/profile.d}} を読み込まなかったら、{{ic|PATH}} [[環境変数]] を調整する必要があるかもしれません:
+もしあなたのシェルが {{ic|/etc/profile.d}} を読み込まなかったら、{{ic|PATH}} [[環境変数]]を調整する必要があるかもしれません:
  export PATH=$PATH:/usr/lib/apache_spark/bin