Efficient data transfer through zero copyIBM Developer is your one-stop location for getting hands-on training and learning in-demand skills on relevant technologies such as generative AI, data science, AI, and open source.
Replication Booster for MySQL を試す - blog.nomadscafe.jp
松信さんが作った Replication Booster for MySQL をデータサイズが大きいデータベースに対して使ってみました。 Yoshinori Matsunobu’s blog: Making slave pre-fetching work better with SSD github - yoshinorim/replication-booster-for-mysql Replication Booster for MySQL をものすごく簡単に説明すると、以下のようになるでしょうか。 MySQL でレプリケーションを設定した場合、マスターのバイナリログをIOスレッドが読み取り、relay-logへ記録します。そしてSQLスレッドがrelay-logから読み取ってテーブルを更新して行きます。Replication Booster を実行するとrelay-logを読み取り、更
ScalaでMapReduce（導入編） | mwSoft
概要 Eclipse ＋ Maven ＋ ScalaでMapReduceしてみた。 割と強引なやり方なのでこれが正しいのかと言われると微妙ですが、とりあえず我が家の環境ではそれなりに動いてくれてます。 JavaやHadoopの導入は済んでいるものとします。済んでない場合は、とりあえず擬似分散モードなどで動く状態を作りましょう。本例ではCDH3を使って完全分散モード上で動かしています。 @Date 2011/11/02 @Versions CDH3, Scala2.9.1, Eclipse3.7, Maven2 @Updated 2012/02/26 Mavenのscopeでprovidedを使うよう変更 必要なものを揃える まずMaven2をインストールします。sbtでもできると思います。 $ sudo apt-get install maven2 次にEclipseをダウンロードします。
第29回 JavaオブジェクトとJSONオブジェクトの変換に便利な「Google Gson」 | gihyo.jp
基本型→JSONの変換 前回は2回にわたってJavaプログラムでJSONデータを扱うための「Jackson Java JSON-processor」を紹介しました。今回はJSONデータを扱うもう1つのJavaライブラリ「Google Gson」を紹介します。Gsonの特徴は、JavaオブジェクトとJSONオブジェクトの変換を、シンプルなコードで行うことができる点です。字句解析を行えるような低レベルのAPIも備えていますが、それよりもオブジェクト変換の簡潔さに注力しているあたりがJacksonとの大きな違いと言えます。 Gsonはこのページよりダウンロードすることができます。「google-gson-2.1-release.zip 」をダウンロードして解凍し、中のjarファイルをクラスパスに含めて使用します。 Gsonを使う場合に重要なのは、GsonクラスのtoJson()メソッドとfro
ScalaでHadoopを使ってみた。 - みずぴー日記
大名古屋ことGoogle グループの宿題で「Hadoopを動かしてみること」というのがあったので、試してみました。Javaを使う気にはならないので、Scalaで。 コード Hadoopの2章のコードを素直に写経する。一ファイル一クラスの制限がないのはいいね。 import java.util.Iterator import org.apache.hadoop.fs.Path import org.apache.hadoop.io._ import org.apache.hadoop.mapred._ class MapExample extends MapReduceBase with Mapper[LongWritable,Text,Text,IntWritable] { def map(key : LongWritable, value : Text, output : OutputC
DayOne.appを使いこなすために作ったもの、やっていること - すぎゃーんメモ
ゆーすけべー日記の記事あたりから周りでDayOneを使うヒトが増えて、自分も気になって使ってみた。 Day One | A simple and elegant journal for iPhone, iPad, and Mac. 基本的には「独りTwitter」なので、適当に短文を放りこんで蓄積していくもの。自分が感じた特徴としては、 イケてる点 自分用なのでヒトに見られたくないものまで気軽に何でも書ける Dropboxでデータ同期できる イケてない点 「書き込もう」という気になることはそうそうない 記録として蓄積していても見返すことは殆どない ということで「もっと簡単に記録を残せる環境、定期的にある程度読み返す仕組み」を作ればもっと活用することが出来るのでは、と思い色々と整えてみた。 作ったもの DayOne.app、自分のTweetやcommit logなんかも記録して、定期的に過去
ScalaでWebAPIをたたいてXMLを処理するための定型パターンのまとめ - ( ꒪⌓꒪) ゆるよろ日記
俺はLTなどの資料に使うためのネタ画像をTumblrで収集してるのですが、いざスライドに画像を貼ろうと思ったらTumblrから検索して落としてこなきゃいけなくてめんどくさいです。 ってことで、Tumblrから画像を落とすプログラムをscalaで書いてみました。 せっかくなので、この手のフィードのようなXML的なものをげとしてほげるための定型パターンをまとめたいと思います。 まぁ処理にもよりますが、だいたい50〜60行くらいでかけるので、scalaの練習にもちょうどいいと思います。 今まで書いたのは、Gistにおいてあります。 ゆろよろのGist もっといい書き方があるよ!って場合は、おしえてくだしあ＞＜ URLとか引数とか 引数にIDをもらって、String#formatを使ってURLを生成します。 "http://hogehoge/%s".format( args.first ) XML
Actorを学ぶ - syttruの日記
Actorがまだよくわからない。インターネットで検索したり色んな人のブログを見たりしてもまだよくわからない。 APIを見てもtraitのActorとobjectのActorがあってうんにゃかもんにゃかだ。 JavaのThreadクラスみたい objectのActorはひとまず置いといて、traitのActorから攻めてみよう。 これはなんだかJavaのThreadクラスみたいな感じだ。 actメソッドを実装してstartメソッドを呼ぶと、actメソッドの中身が非同期に実行されるみたい。 ちょっとやってみよう Actorを継承したオブジェクトを定義する。actメソッドの中身は1秒sleepしてから「アクション！」と出力するようにしておく。 import scala.actors.Actor object MyActor extends Actor { def act = { Thread.s
Parallel ssh (pssh)で複数ホストでコマンド同時実行 : しげふみメモ
2009年06月17日20:21 カテゴリLinux Parallel ssh (pssh)で複数ホストでコマンド同時実行 複数のホストに対してコマンドを同時に実行できるツールとして、以前にCluster SSHを試してみました。 今度は Parallel ssh (pssh) を試してみました。 参考: 1つのシェルから複数のSSHセッションを同時に実行するツール3種類を試す - SourceForge.JP Magazine bashでforループを回すのはちょっとした事だとよく使いますが、psshだと同時にできるのが利点のひとつ。 とりあえず、メモ程度ですがopenSUSE 10.3で試してみました。 Parallelということなので、ほぼ同時に実行開始されます。 そして、結果が返ってくるのはばらばらです。結果を標準出力に表示する場合は見辛いかもしれません。 -h オプションで対象ホ
はてなブックマーク - ヘルプ - ブックマークをタグで分類
ブックマークをタグで分類タグを使うと、ブックマークを分類することができます。タグとは、カテゴリあるいはフォルダのような、ブックマークを分類するための自分だけの識別子です。 ブックマークにタグをつけるには、コメントの先頭部分にタグを記入します。先頭から [...] でかこった単語がタグになります。例えば、『 [hatena][news] 』 と記述すると「hatena」タグと「news」タグを付けたことになります。 また、コメント欄下部の「タグを追加する」につけたいタグの名前を入力することで、同様の表示が可能になります。 「おすすめタグ」には他のユーザーがよく使っているタグが、「よく使うタグ」には自分がよく使っているタグが表示されています。これらをクリックすることで、直接タグを付けられます。 ブックマークにタグを付けておくと、同じタグを付けているエントリーをまとめて見られるようになります。は
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
import java.net.{Authenticator, PasswordAuthentication}import scala.Math._imp - Pastebin.com