データが主食

データエンジニアの備忘録。分析だったり、読んだ本のメモだったり。

Coursera

Coursera「Functional Program Design in Scala」修了

はじめに ktr89.hateblo.jp の続編講座Functional Program Design in Scalaを修了したので、内容のメモです。

Coursera課題用EC2インスタンスのセットアップ

勉強用環境について ソフトウェアエンジニアが休日に勉強するための環境 - データが主食 で書きましたが、Android TabletのSSHアプリからEC2インスタンスにSSHしてコーディングをしています。 その際のセットアップの備忘録です。CourseraでScalaを勉強する…

Coursera「Functional Programming Principles in Scala」修了

Functional Programming Principles in Scalaとは 最近、仕事でMapreduceやSparkなどを扱うことがおおく、関数プログラミングをちゃんと勉強したいなと思っていました。関数プログラミング由来の概念を実務で使うことがあり全然問題はないのですが、原理原則…

ソフトウェアエンジニアが休日に勉強するための環境

courseraの受講環境は悩ましい 近頃だとスマホで何でもできてしまうため自宅にパソコンがない家庭も多いと思います。私はパソコンを一応所有していますが、あまり使う機会がなくて困っています。以前kaggleに取り組むために、メモリ盛り盛りのラップトップを…

Courseraの「Big Data Essentials: HDFS, MapReduce and Spark RDD」を修了した件

きっかけ 仕事で大量のアクセスログを分析することがあり、AWSのEMRとかAthenaとか使っています。 EMRでは計算機のクラスタが勝手に構築されて、HadoopとかHiveとかOozieとかとかが勝手にインストールされて、お膳立てしてもらった状態でやっとこさ分析でき…