鳥取マラソンで走ってきた。 www.nnn.co.jp 記録はネットタイムでギリギリサブ4の3:59:31 シーズンに1回はサブ4出したいと思っててなんとか達成できた。 しかし代償としてエイドのうどん食いそびれたw 大会としては良い大会なんだけど、もうちょっと給水を増…

spark thrift serverが不安定でOutOfMemoryになったりしてたんでJVMオプションをいじってた。 うちの環境だとambari管理なのでjava heapを増やす場合はAdvanced spark2-envのspark_daemon_memoryを増やせばOKです。ちなみにデフォルトは1GBです。 それ以外は…

yanagishimaというpresto web uiを作っていて気づけばhive, elasticsearchに続いてsparksqlをサポートしたので今回はその辺をちょっと書いてみようと思います。 https://github.com/yanagishima/yanagishima sparkではspark thrift serverなるものを起動すれ…