はてなブックマーク

はじめに DynamoDB をバックエンドのストレージとして利用するアプリケーションにおいて、 DynamoDB テーブル上のそれぞれの項目のある属性において map 型のデータ 1 を保持したい また、その map の特定の要素を追加・更新したい ただし、その項目や属性は追加・更新の操作をしようとした段階ではまだ存在していない可能性がある 加えて、更新操作は複数のアプリケーションのプロセスから同時並列的に行われうる なお、一度追加された属性 (!= 要素) の削除操作は行われないものとする 要素の追加・更新は後勝ち (最後に追加・更新された値を正しいもの) とする という状況下で、いい感じに map に対する要素の追加・更新操作したい場合に、どのような実装をすればいいのかを DynamoDB 弱者なりに毎回調べてしまっている気がするので、ここにメモを残すことにします。 うまくいかない操作

広告機械学習最前線 第54回 データマイニング+WEB ＠東京( #TokyoWebmining 54th ) ー深層学習・機械学習 祭りー のセッション「広告機械学習最前線」のメモです。 (後で詳しく調べるようにメモしているので、内容はちょっと雑になっています) Masa_s3 さんによる発表資料は こちら。 概要 入札ロジックの話がメインになる CTR / CVR 予測モデル 予算消化コントローラ 入札価格決定関数 今回の発表は Real Time Bid Optimization with Smooth Budget Delivery in Online Advertising を基にしている CTR / CVR 予測器や入札金額調整がどのように DSP に組み込まれるのか、そのフレームワークを提案している DSP の内部の話 アドリクエストの処理 アドリクエストを受ける CTR 予

Feedback Control of Real-Time Display Advertising WSDM 2016 勉強会 での発表資料です。次の論文の解説になります。 Feedback Control of Real-Time Display Advertising by Weinan Zhang, Yifei Rong, Jun Wang, Tianchi Zhu, Xiaofan Wang 問題設定 背景 インターネット広告 > ディスプレイ広告 > RTB (Real-Time Bidding) の世界の話 「ディスプレイ広告」は、ここではいわゆる「バナー広告」の類だと思って貰えれば OK バナー広告以外には「検索連動型広告」(Google AdWords など) があるが、こちらはこの論文のスコープ外 RTB における登場人物 (組織・システム) Publisher Web

Online Matching and Ad Allocation 勉強会第2回: Online Bipartite Matching / Online Vertex-Weighted Bipartite Matching機械学習MachineLearning最適化アドテクOptimization はじめに A. Mehta による Online Matching and Ad Allocation という書籍 (PDF) の輪読会の発表資料です。 以下の章・節の解説です。 3. Online Bipartite Matching (3.1 と 3.2 は参考程度の解説) 本解説はこちらをご参照ください http://qiita.com/taketon_/items/92731d58c957d3b6d5ab 3.3 Known IID 4. Online Vertex-Weighted B

Java で POJO などを JSON にシリアライズ、もしくは JSON からデシリアライズする場合は Jackson を使うのがもはや golden standard となっている今日この頃ですが、みなさまいかような Java JSON ライフをお過ごしでしょうか？ 今回はそんな Jackson を速度性能的により効率的に扱う必要があり、その際に以下のサイトをだいぶ参考にさせていただいたので、今後のためにもその内容をざっくりとメモしておきます。 Presentation: Jackson Performance Jackson Best Practices: Performance 基本 1. 生成処理などが重たいオブジェクトは再利用しよう データバインディングで利用する ObjectMapper や、ストリーミング処理で利用する JsonFactory は、特に再利用をするべきオブ

はじめに Java 8 を導入し始めて既に半年以上になるけど、未だに Java 8 の Stream API で複雑な処理をしようとすると頭を抱えてしまうので、その時々の 自分なりの ベストプラクティスをメモしておくことにします。 今回のお題 Stream API に慣れてくると、データクラスのオブジェクトからなる List オブジェクトに対して、データクラスのある属性をグルーピングのキーに、もう一つ別の属性をグルーピングされた結果を保持する List の構成要素として持つような Map オブジェクトを Stream API で華麗に表現したくなるのが人間ってもんです。 今回はこの問題について、 Collectors.toMap() を使った方法と Collectors.groupingBy() と Collectors.mapping() を組み合わせて使った方法で解消してみることにしま

以下の JSON のように トップレベルの要素がオブジェクトではなく配列 であるケースにおいて、Jackson を用いて POJO を含む List オブジェクトにデシリアライズする方法をメモメモしておきます。 import org.codehaus.jackson.map.ObjectMapper; import org.codehaus.jackson.type.TypeReference; import java.io.IOException; import java.util.List; /** * オブジェクトを含んだ配列の JSON を、POJO なオブジェクトを含むリストにデシリアライズするデモ。 * * @author KOMIYA Atsushi */ public class ListDeserializationDemo { public static class M

はじめに 「Spring Framework を使ったアプリケーションのテストコードを書いていて Theories ランナーを使ってパラメタライズドテストとかしたいんだけどさ、DI しようとすると SpringJUnit4ClassRunner ランナーとバッティングしてしまうんだよね… 困った困った」みたいなケースへの対処方法です。 Using JUnit Theories with Spring and Mockito に答えが書いてあるんですが、日本語での記事が見つからなかったのでメモメモしておきます。 ポイント テストランナーは Theories を使うよ SpringJUnit4ClassRunner を使う普段のケースと同じく、 テストクラスには、@ContextConfiguration アノテーションを付与しておくよ DI をしたいテストクラスのフィールドに @Autowi

VirtualBox の VM を立ち上げようとして cannot access the kernel driver などのメッセージが表示されたり、 E_FAIL (0x80004005) などのエラーコードが表示された場合の対処法です。 結論 深いことを考えずに、VirtualBox を再インストールする。 補足 厳密にはケースバイケースなのかもしれないけど、VirtualBox を最新版にアップデートする際に VirtualBox Interface のプロセスが立ち上がりっぱなしで、インストーラにて Ignore ボダンを押して無理矢理インストール作業を進めようとするとこの状態になることがあるっぽい。

Mac OS X 版 IntelliJ IDEA の Emacs キーマップで Option+W とかが効かないアレを解消するMacOSXIntelliJ はじめに いままで Windows 版の IntelliJ IDEA を Emacs キーマップで使っていたのですが、諸事情により Mac OS X で IntelliJ IDEA を使う必要が出てきたので、Option-W とかのキーストロークで Σ などの特殊文字が入力されてしまう Mac 特有の問題にちゃんと対処することにしたときのメモです。 Mac & IntelliJ & Emacs キーバインドでよくある問題 Emacs のキーマップに設定した IntelliJ IDEA のエディタ上で、 リージョンコピー : M-w ( Option-W ) スクロールダウン (ページアップ) : M-v ( Option-v ) 上記の

Jackson の、普段あんまり使わない機能過ぎて使いたいときに忘れてぐぐって時間を浪費してしまうようなケースを回避するためにメモメモします。随時更新予定。 見ればわかりますが、元ネタはほぼすべて Stack Overflow です。英語だけだと読むのが辛い、という方向け（主に自分）にまとめています。 snake_case でプロパティを表現している JSON と camelCase で表記している POJO をマッピングしたい java - Jackson overcoming underscores in favor of camel-case - Stack Overflow より。 引数に PropertyNamingStrategy.CAMEL_CASE_TO_LOWER_CASE_WITH_UNDERSCORES PropertyNamingStrategy.SNAKE_CAS

package biz.k11i.demo; import org.junit.Test; import static org.junit.Assert.assertThat; import static uk.co.datumedge.hamcrest.json.SameJSONAs.sameJSONAs; /** * hamcrest-json の利用デモ。 * <p>Gradle をお使いの方なら、以下のように記述すれば OK</p> * <pre> * dependencies { * testCompile group: 'junit', name: 'junit', version: '4.11' * testCompile group: 'uk.co.datumedge', name: 'hamcrest-json', version: '0.2' * } * </pre>

build.gradle で junit に付いてくる hamcrest-core を使わずに hamcrest-all を利用する dependencies の書き方JUnitgradlehamcrest 概要 JUnit 4.11 を依存ライブラリに加えると勝手に hamcrest-core が付いてきちゃうのだけど、 hamcrest-core じゃなくて hamcrest-all を使いたいという場合の dependencies の書き方をメモっておく。 build.gradle の記述例 apply plugin: 'java' sourceCompatibility = 1.5 version = '1.0' repositories { mavenCentral() } dependencies { testCompile (group: 'junit', name: 'ju

概要 String#split() に空文字列 "" を渡して、文字列を 1 文字毎ごとの部分文字列に分解、みたいな手抜き実装をよくやるのですが、Java 7 (以前？) と Java 8 でこの挙動が異なるみたいです。 Java 7 では、以下のサンプルにあるとおり、戻り値の配列の一番最初の要素が空文字列になるのですが、Java 8 ではこの空文字列がなくなるようです。 デモコード import java.util.Arrays; import java.util.regex.Pattern; public class StringSplit { public static void main(String[] args) { String str = "ABC"; // String#split() を試してみる String[] elems = str.split(""); Syst

概要 VirtualBox 上に Ubuntu の GUI 環境を構築すると、Windows でいうところのスタートメニュー的なものの表示であったり、ウィンドウのアニメーションがもっさりしてストレスを感じることがあるかと思います。 そんな場合は、以下のページにあるとおりの操作をすれば解消されることでしょう。 Ubuntu 13をVirtualboxにインストールすると遅い！！を直す方法 Virtualbox上のUbuntu13.04が遅く感じる時 3D Acceleration with Ubuntu guests 以降に、将来の自分のためにメモを残しておきます。 VirtualBox 側での操作 VM の設定画面にて、「ディスプレイ」の項目を選択します。続いて、その項目の右側の領域に表示されている「ビデオ」タブを選択します。 同タブ内にある以下の項目をそれぞれ設定します。 ビデオメモリー