気がつけば2015年も大晦日で，早い一年でした．ということで，恒例の今年読んだ本紹介をしておきたいと思います．ちなみに昨年と一昨年のはこちら．各セグメント毎に，個人的に参考になった順，面白かった順に並べています．マーケティングとマネジメントが…

連日イカに潜っているため，すっかりご無沙汰になっている当ブログです．今回は小ネタ．HDFS上に保存しているデータの日付カラムがISO8601形式だったりすることがよくあるんですけど，これってHiveのtimestamp型で読み込めないんですね．蜂初心者なので全く…

最近xgboostがだいぶ流行っているわけですけど，これはGradient Boosting（勾配ブースティング）の高速なC++実装です．従来使われてたgbtより10倍高速らしいです．そんなxgboostを使うにあたって，はてどういう理屈で動いているものだろうと思っていろいろ文…

ABテストといえば，だいぶ前に有意とか検定とかそのあたりで，データ系の界隈がいろいろと盛り上がっていたのが記憶に残っているトピックなわけですが，今年の1月にABテストの大手Optimizelyのエンジンがリニューアルされてました．これがなかなか興味深いん…

つい先日，stackingについての以下の記事が話題になっていました．ランダムフォレストと他の機械学習（or統計）を組み合わせて使う - じじいのプログラミングこのあたり，私自身は試したことがなかったので，実際に試してみましたよというお話． コード Rで…

前回でCaffeがインストールできたので，とりあえず今回はImageNetの特徴量抽出器を使うまで．Yahoo! JAPAN Tech blogの記事を参考にやってみたら，ハマりどころがたくさんあったので，そのあたりを共有しましょうの会です．ハマりどころを抜けるのに参考にし…

ClouderaさまよりHBase徹底入門を献本いただいたの*1で，だいぶ遅くなりましたが感想をまとめておきたいと思います．HBase徹底入門 Hadoopクラスタによる高速データベースの実現作者: 株式会社サイバーエージェント鈴木俊裕,梅田永介,柿島大貴出版社/メーカ…

前回からだいぶ間が空きましたが，その間なんもやってなかったので，いい加減まとめてエントリにしておきます．本当はSCWまでやってからにしたかったんですが，あきらめてCWだけで...実装して理解するオンライン学習器(1) - PassiveAggresive - About connec…

メモ代わりに手順まとめておきます．基本は install_caffe_osx10.10.md と CaffeをOS X 10.10 にインストールした // ichyo.jpを参考に，細かい修正を幾つか，という感じです．マシンはmac mini late 2012(core i7 2.3GHz quad core)です． CUDA CUDAとドラ…

最近「熊とワルツを」というプロジェクトにおけるリスク管理についての本を読みました．本の中にでてくるリスク管理シミュレーションをR実装しました，という話です．熊とワルツを - リスクを愉しむプロジェクト管理作者: トム・デマルコ,ティモシー・リスタ…

表題の通り，dplyr使って前処理する際に，それを関数化する方法のメモ．ユースケースとしては，ちょっとだけ条件変えてデータフレーム自体を何度か出し直すってとき用． 関数 まるっとフィルタ用のconditionと，select用のvariablesを引数で渡します*1．ポイ…

「高速文字列解析の世界」を読んでて，BW変換のところがよくわからなかったので，実際に書いてみました．高速文字列解析の世界――データ圧縮・全文検索・テキストマイニング (確率と情報の科学)作者: 岡野原大輔出版社/メーカー: 岩波書店発売日: 2012/12/27…