つかびーの技術日記

情報系修士卒のWeb系技術日記です。現在のフォーカス分野はアドテクです。

Spark DataFrameのschemaにまつわる罠とschemaの補正

  2017/10/04    Spark , , ,

こんにちは、@s_tsukaです。今日はSpark DataFrameのsche …

fluentdのtimeの仕様とネストしたフィールドの扱い方

  2017/10/03    ツール

今回はfluentd(v0.14)についてです。 仕事柄、データ・ログを扱うこと …

Google Cloud Pub/Sub のデータをSpark Streamingで読む

今回はPub/SubのデータをSpark Streamingで読んでみたいと思い …

Google Cloud Pub/Sub を複数のProjectにまたがって利用する。またそのときの課金について

今回はPub/Subを複数のプロジェクトにまたがって利用する方法について調べてい …

Google Cloud Pub/Sub Java Client Library 入門 (サンプルはScala)

今回はGoogle Cloud Pub/SubのJava Client Libr …