2013-03-01から1ヶ月間の記事一覧

新しいiMacにインストールしたものおよび設定

mac

なんか毎回忘れている気がするのでメモ インストールしたもの XCode Command Line Tools Chrome Adblock Plus Gmelius はてなブックマーク GoogleChrome拡張 FireFox Alfred Eclipse 3.7 subclipse egit Homebrew SourceTree Sublime Text CotEditor iTerm2 …

Redisでのbulk処理

Redisと仲良くなりたいです!って隣の人に言ったら、「障害に遭遇すると良いよ。それも深刻なやつにね。軽いやつだと軽い関係にしかなれないから」って言われたwyukawaです。こんばんは。軽い関係じゃなくてもうちょっと踏み込んだ関係になりたいと思ってま…

とりあえずStormをローカルモードで動かしてみた。

身近なところでStormがちょっとブームなので話題についていくためにも軽く素振りしたいと思います。日本語の資料でざっくり中身をつかむには下記がいいんじゃないでしょうか。 Twitterのリアルタイム分散処理システム「Storm」入門 from AdvancedTechNight S…

バルクロードでHBaseにインポートしたデータをHiveの外部テーブルでselectするときに遭遇した現象に関するメモ

タイトル長い。。。ちゃんと整理できてないですがとりあえずメモっときます。環境はHBase 0.94.4, Hive 0.10.0です。LoadIncrementalHFilesを使ってHBaseにデータをインポートしようとしたら下記のようなエラーが出ました。 Caused by: java.lang.IllegalSta…

HBaseのデータをHiveからselectする

参考にしたのはこの辺本家Wiki https://cwiki.apache.org/confluence/display/Hive/HBaseIntegrationHortonworksのスライド資料 Integration of Hive and HBase from Hortonworks 最初はHiveでselect insertしてHBaseにデータロードする方法を試していたけど…

dfs.datanode.failed.volumes.toleratedとdatanodeのdecommission

HDFSにはdfs.datanode.failed.volumes.toleratedという設定項目があります。defaultは0。 <property> <name>dfs.datanode.failed.volumes.tolerated</name> <value>0</value> <description>The number of volumes that are allowed to fail before a datanode stops offering service. By default any volume fai</description></property>…

JIRAのCLI

python製だとこんなのがあります。 http://tdoc.info/blog/2012/12/22/jira_cli.html Node.js製だとこんなの http://tebriel.github.com/jira-cli/ただ僕の環境(Mac 10.8.2)だと以下のようなエラーになりました。 $ jira -f HBASE-5533 TypeError: Cannot re…