【Spark】Spark-Shellの使用+サンプル
spark-shellの使い方と、Sparkの簡単なサンプルプログラムをメモとして残しておきます。-
タグ:
- #Spark
投稿日:2018-12-02
更新日:2018-12-02
CentOS7にSparkの環境を手っ取り早く構築する
sparkの構築手順の走り書きメモです。あくまでメモなので、手っ取り早くSparkを簡単に設定したい時用。環境はCentOS7、Apache2.4で設定しています。-
カテゴリ:
- サーバ
投稿日:2018-11-18
更新日:2019-01-29
Sparkの設定パラメータ一覧 ~スタンドアローンモード編
Sparkのスタンドアローンモードのアプリ起動時設定をまとめました。-
タグ:
- #Spark
投稿日:2018-11-13
更新日:2018-11-13
Sparkの設定パラメータ一覧 ~環境変数編
Sparkに関して、環境変数関連の設定値を一覧化してまとめました。-
タグ:
- #Spark
投稿日:2018-11-12
更新日:2018-11-13
Sparkの設定パラメータ一覧 ~本体設定編
Sparkを最近よく触っていて、設定値をデフォルトで設定して使っていましたが、もう少し使いこなしたいので一度整理するために一覧化してまとめました。-
タグ:
- #Spark
投稿日:2018-11-11
更新日:2018-11-13
【Scala】実行可能なJARの作成(開発環境はEclipse)
Scalaは基本コンパイルして動かす言語ですが、標準の機能としてShellのようにコマンドから実行することも可能です。(ただその場合も結局裏側でコンパイルして動いています。)運用や検証時など手動で処理を実行する場合は、コマンドラインから実行するだけで事足りますが、ほかのシステムと連携したり、プログラムとして組み込む場合は別の方法で実行する必要があります。今回は一つ...-
カテゴリ:
- Scala
-
タグ:
- #Spark
投稿日:2018-10-04
更新日:2019-02-18
1
サイト内検索
プロフィール
[Name : POCO(@PocoIt2019)]
都内で社内SEをしているおじさん。
仕事で得られる知識だけでは限界を感じ、
WEBの勉強がてらITブログを開始。
サーバからWEBサイトまでフルスクラッチで開発しました。
現在は勉強のモチベーションを保つために活用中。
興味があることを雑記的に書いていきます。
[スポンサーリンク]
カテゴリ
タグ
[スポンサーリンク]
最近の記事
- 「Docker Desktop for Windows」でdocker-compose up中に「user declined directory sharing」のエラーが出た時の対処法
- 【Vue.js】Vue.jsのインストールとプロジェクトの新規作成
- Node.jsをWindows10にインストールする
- 【phpMyAdmin】データインポート時に「スクリプトがタイムアウトしました。インポートを完了させたいのであれば同じファイルを再送信すればインポートが再開されます」が出た時の対処法
- 【phpMyAdmin】ローカル環境でデータインポート時に「Incorrect format parameter」のエラーが出た時の対処法
- 作業効率アップ!Googleドライブをローカルフォルダのように利用する方法