2019-09-01から1ヶ月間の記事一覧

EMRでSparkをつかうときの注意点

業務の関係で、EMRで上にSparkを載せたシステム構築によくかかわっているので、 その中でつまったところなどについて記載してみました。 ※本稿はHadoopやSparkに関する最低限の知識が必要です 1.EMRとは まず、そもそもEMRについて簡単に説明すると、AWSの…