2/8に開催されたHadoop / Spark Conference Japan 2016に参加してきましたのでメモなど残しておきます。 午後からの参加で見たセッションのみなので一部だけになりますが。。 www.eventbrite.com データドリブン企業における、Hadoop基盤とETL ～niconicoで…

1年くらい前にレコメンドロジックを実装するにあたってSpark MLlibのmllibパッケージ内のRDD版を使っていたのですが、 データの整形など不便だったため、その後リリースされたmlパッケージ以下のDataFrame版を使ってみたい。 きっと楽なはずということでサン…