Windows10でPySparkを動かします。 JDKのインストール SparkそのものはScalaで作られているのでJavaの環境が必要です。Java Deployment Kit のバージョン7以降をインストールしておきます。Oracleのサイトからインストールexeファイルをダウンロードして実行…

環境は以下です。 Windows10 VirtualBox 5.2.12 Vargrant 2.1.1 CentOS7 VirtualBoxのインストール 以下のサイトから、Windows用のVirutalBoxのモジュールを持ってきてインストール。 Oracle VM VirtualBox - Downloads | Oracle Technology Network | Oracl…

マニュアルには記載がないようなので、書いておきます。 Data PipelineのSQL Activityで、１度に複数のSQLクエリを実行できるか、という話です。S3に置いた１つのSQLファイルに、複数のステートメントを書いて実行きるのか否か、という話。結論からすると、 …