過去のはてブがURL絞込みからたどれなくなってる件。 - Myrmecoleon in Paradoxical Library. はてな新館
id:naoya さんより詳細な仕様の説明がされていたので内容を修正しました。素早い回答ありがとうございました！ 下記のとおり，実質的な問題はやり方次第で回避できるようです。 http://naoya.g.hatena.ne.jp/naoya/20090208/1234048573 はてブ指数チェッカーご臨終のお知らせ。 はてなブックマークにはURLの前部を指定して，それに該当するブクマの新着・注目・人気などを調べる「URLで絞込み」という機能があるのですが，それがいまではある程度以前より前がたどれなくなっているらしい。 要するに， http://b.hatena.ne.jp/entrylist?sort=eid&url=http%3A%2F%2Fb.hatena.ne.jp&of=7920 記事書き終わってからみたら，もう一ページ前までしかなくなってました。 2008年11月13日より前
TechCrunch | Startup and Technology News
Welcome to Startups Weekly — Haje‘s weekly recap of everything you can’t miss from the world of startups. Sign up here to get it in your inbox every Friday. Well,…
僕やはてながPerlを選ぶ理由 - naoyaのはてなダイアリー
ご存知の通り、はてなのシステムはほぼすべてPerlで書かれています。そもそも僕がはてなに入った一つの理由に、僕が一番得意とする言語であるPerlを使ってシステムを構築していたという点があったりします。 世の中にはたくさんのプログラミング言語があります。Perl、Java、Ruby、PHP、Python、C、C++、lisp、Smalltalk、Cobol...数え上げたらキリがありません。そして、プログラマはかならずと言っていいほど、どれかひとつ以上の言語を愛しています。好き、ではなく愛しているのです。 自分が愛しているものを批判されると感情的になりやすいのは人の常、プログラミング言語の差異に関する議論は炎上しがちで、よく宗教戦争だなんて言われたりもします。その中で、言語なんてどれも一緒だなんていう乱暴なまとめがされることもよくあったりします。 しかし、何年かプログラマというものを経験して
naoyaのはてなダイアリー
ときどき、たまたま自分がそのとき考えていたことについてそれを補強するような材料が偶然たくさん集まってくる、なんてことがあります。そんな出来事があったので、ちょっとブログを書いてみようかなと。 以前に HBFav を作ったときこんなことを書きました。 Mark Zuckerberg は、いずれみんな、ニュースは友人知人経由で知ることになるだろうと言っていました。自分もそうなるだろうと思います。 4年ぐらいが経ちましたが、その思いは以前よりも増して確信めいたものになってきています。 ところで先日、Twitter の iOS アプリに「ニュース」という機能が追加されました。人によっては出てないそうなのでまだテスト中か、もしくは既に削除されているのかもしれないですが。 この機能についての自分の感想は以下のようなものでした。 もうすこし補足します*1。 Facebook や Twitter のような
Bigtableの使い方教えます - ひがやすを技術ブログ
GAE/Jを使うのに一番戸惑うのが、データのストレージがRDBMSではなく、Bigtableなことでしょう。 JOINが使えなかったり、WHERE句でORが使えなかったり、これまで慣れ親しんでいた方法が軒並み使えません。 これらの制限は、Bigtableに限ったことではなく、KVS(Key Value Store)型のクラウド系のデータベースではみんないえることだと思います。 最初、私も戸惑ったんだけど、いろいろ触っているうちに気付きました。昔、AS400でやってたころと一緒ジャンと。AS400とは、IBMから出ているオフコン(?)ですね。今は、System iと呼ばれているようです(最新だとまた違うようですが)。 AS400のファイル(テーブル)は、キーもしくはインデックスでアクセスします。インデックス(論理ファイル)は、ある行の特定のカラムがソートされていて、物理ファイル(テーブル)へ
アマゾンAPIを使うのに2009年8月15日から認証が必要になるらしい
アマゾンAPIを使うのに2009年8月15日から認証が必要になるらしい 2009-05-09-1 [Programming][Affiliate][WebTool] 「Amazon アソシエイト Web サービスの名称変更および署名認証についてのお知らせ」というメールが来ました。 （追記: ほぼ同内容のものが Forum とアソシ公式ブログにもありました。ただし Forum では15日ではなく16日となっています。） さて、このたび、Amazon アソシエイト Web サービスの名称を、「Product Advertising API」と変更しましたことをお知らせいたします。この新名称は、開発者の皆様が Amazon サイトで販売されている商品の広告作成を行い、これによって Amazon より広告費を受け取るという、API の目的をより正しく表しています。 はいはい、了解しました。 「Pr
HBase 入門 (1) - こども(てれび)
Hadoop と HBase で分散処理が書けるのはわかったけど、いざ使ってみるとなるとドキュメントが少なくて……、というあなたの為の HBase 入門、今回はセットアップから Java の API で HBase を触るまでを勉強します。 使用するバージョンは Hadoop 0.17.2.1、HBase 0.2.1 です。 0. 参考ページ http://hadoop.apache.org/core/docs/r0.17.2/ FrontPage - Hadoop Wiki http://hadoop.apache.org/core/docs/r0.17.2/api/index.html Hbase - Hadoop Wiki http://hadoop.apache.org/hbase/docs/r0.2.1/api/index.html 1. Hadoop のセットアップ http:
The Hadoop Distributed File System: Architecture and Design
Hardware Failure Hardware failure is the norm rather than the exception. An HDFS instance may consist of hundreds or thousands of server machines, each storing part of the file system’s data. The fact that there are a huge number of components and that each component has a non-trivial probability of failure means that some component of HDFS is always non-functional. Therefore, detection of faults
POSIX - Wikipedia
POSIX（ポジックス[1][2][3][注釈 1]、英: Portable Operating System Interface）は、オペレーティングシステム (OS) の標準的なインタフェースおよび環境を定義するIEEE規格である[5]。ソースコードレベルでの移植性の高いアプリケーションソフトウェアの開発を容易にすることを目的として、主にUNIX系のOSに関して、各OSが共通して持つべきコマンドラインインタプリタ（シェル）、共通のユーティリティプログラム、およびアプリケーションプログラミングインタフェース (API) について定めている。アプリケーション開発者とシステム実装者の両方から利用されることを意図している。 概要[編集] 規格の内容[編集] POSIXによって定められていることは、カーネルへのC言語のインタフェースであるシステムコール、プロセス環境、ファイルとディレクトリ、パス
http://www.cloudera.com/sites/default/files/HDFS_Reliability.html
The Hadoop Distributed Filesystem (HDFS) is a distributed storage system for reliably storing petabytes of data on clusters of commodity hardware. This short paper examines the reliability of HDFS and makes recommendations for best practices to follow when running an HDFS installation. Overview of HDFS HDFS has three classes of node: a single name node, responsible for managing the filesys
HDFSでアトミックな追記操作がサポート - moratorium
HDFSでアトミックな追記操作がサポート 2008-07-28 (Mon) 10:12 Hadoop 今週末、HDFS(Hadoop Distributed File System)についにアトミックな追記操作をサポートするパッチがコミットされたようです！ - HADOOP-1700 これが安定すれば、ログファイル等をどんどん追記して、半リアルタイムで解析するような基盤を簡単に作れるようになるでしょう。 そのほかにもHadoopは色々と開発が進んでいて、一部がTomWhiteさんのエントリにまとまっています。どんどん便利に、かつカスタマイズ可能になって行くので楽しいです。以下に簡単にまとめておきます。 JobSchedulerの改善(現在はFIFOしか無いが、Facebookから公平性を考慮したスケジューラーの実装が上がっている) HDFSのブロック配置アルゴリズムをプラッガブルに Ins
HDFS Reliability Document by Cloudera. Inc. - moratorium
HDFS Reliability Document by Cloudera. Inc. 2009-01-14 (Wed) 23:57 Hadoop HDFS Reliability Clouderaという会社から、HDFSの耐障害性の解説と、運用する点でのポイントが書かれたドキュメントが出ているみたいです。 Cloudera このClouderaという会社はSleepycat(BDB作ってた会社、Oracleが買収)の元CEOが立ち上げた会社で、Hadoopの商用サポート・トレーニングをしてるみたいですね。 メンバーを見ると、層々たる面々。ChristophさんはGOOGにいる時に取り上げられてたりしてましたね。 Hadoop周りの人(そんな人いるのか？)は要注目の会社だと思います。 Similar Posts: HDFSでアトミックな追記操作がサポート Hadoopのインストールとサンプ
Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)
ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog こんにちは、地域サービス事業部の吉田一星です。 今回は、Hadoopについて、Yahoo! JAPANでの実際の使用例を交えながら書きたいと思います。Hadoopとは、大量のデータを手軽に複数のマシンに分散して処理できるオープンソースのプラットフォームです。 複数のマシンへの分散処理は、プロセス間通信や、障害時への対応などを考えなければならず、プログラマにとって敷居が高いものですが、 Hadoopはそういった面倒くさい分散処理を一手に引き受けてくれます。 1台では処理にかなり時間がかかるような大量のデータも、複数マシンに分散させることで、驚くべきスピードで処理を行うことができます。 例えば、今まで1台でやっていた、あるログ集計処理
TechCrunch | Startup and Technology News
Welcome to Startups Weekly — Haje‘s weekly recap of everything you can’t miss from the world of startups. Sign up here to get it in your inbox every Friday. Well,…
Veoh - Wikipedia
Veoh（ヴィオ・ヴィデオ）は、FC2が運営する動画共有サイトである。 特徴[編集] Veohはユーザーが動画を投稿、共有することが可能であり、Stage6と同様にVeoh専用のダウンロード、アップロード用ソフト（Veohプレーヤー）を利用する事によってテレビの様なフルスクリーンで高画質な映像を楽しむことができる。 アップロードの方法は2種類あり、上記に記したVeohプレーヤーを利用する方法とYouTubeのようにブラウザ上でのアップロードがある。ブラウザ上でのアップロードの場合はPublish（パブリッシュ）のUploadで行う。どちらの方法もアップロードするにはユーザー登録を行いアカウントを作成する必要がある。 アップロードできる動画ファイルはAVI、WMV、QuickTime（拡張子がMOVのファイルが投稿でき、MQVのファイルはエラーメッセージが出るので投稿できない）、MPEG4（
Hulu - Watch your favorites. Anytime. For free.
Live TV Makes It BetterGet 95+ top channels on Hulu (With Ads) + Live TV with your favorite live sports, news, and events - plus the entire Hulu streaming library. With Unlimited DVR, store Live TV recordings for up to nine months and fast-forward through your DVR content. Includes access to endless entertainment with Disney+ and live sports with ESPN+. Hulu (With Ads) + Live TV plan $76.99/mo. af
PoweredBy - HADOOP2 - Apache Software Foundation
Powered by Apache HadoopThis page documents an alphabetical list of institutions that are using Apache Hadoop for educational or production uses. Companies that offer services on or based around Hadoop are listed in Commercial Support. Please include details about your cluster hardware and size. Entries without this may be mistaken for spam references and deleted._ _ To add entries you need write
グーグルとアマゾンのクラウドの違い ― ＠IT
2008/05/29 米グーグルは現地時間の5月27日、これまでプレビュー版として一部ユーザーに公開していたWebアプリケーションプラットフォームサービス「Google App Engine」（GAE）を、一般向けに公開すると発表した。同時に2008年後半に導入予定の料金体系も明らかにした。 これまで通り500MBのストレージ、月間500万ページビューまでの利用であれば無料。それを超える分については、1CPUコア1時間当たり10～12セント、1GB・1カ月当たり15～18セントかかる。通信帯域の月額は受信について1GB当たり9～11セント。送信については1GB当たり11～13セントとなっている。 この価格設定はAmazon Web Services（AWS）と極めて類似している。例えば「Amazon EC2」（Elastic Compute Cloud）は、1.7GBのメモリ、1CPUコア
Amazonクラウドに新機能追加
米アマゾン子会社の米Amazon Web Servicesは3月27日、Amazon EC2に新たに「Elastic IP」、「Availability Zones」の2つのサービスを追加し、提供を開始したと発表した。Amazon EC2（Elastic Compute Cloud）はアマゾンが持つサーバ群上で提供されるホスティングサービス。利用するCPUの数やストレージ容量、ネットワーク帯域などを必要に応じてダイナミックに変更できるのが特徴。具体的には、OSやライブラリ、アプリケーションを含むイメージ（AMI：Amazon Machine Image）を作成し、それを同社のオンラインストレージサービス「Amazon S3」上にアップロードする。続いてWebサイトからネットワーク関連の設定を行い、AMIをインスタンス化してサーバを起動する。インスタンスの数はニーズに応じて1つから数千という
MapReduceのJava実装Apache Hadoopを使ってみた (1/3) - @IT
MapReduceのJava実装Apache Hadoopを使ってみた：いま再注目の分散処理技術（後編）（1/3 ページ） 最近注目を浴びている分散処理技術「MapReduce」の利点をサンプルからアルゴリズムレベルで理解し、昔からあるJava関連の分散処理技術を見直す特集企画（編集部） Apache Hadoopプロジェクトとは何か？ 本特集では、いま再注目の分散処理技術についていろいろと紹介してきました。前編の「GoogleのMapReduceアルゴリズムをJavaで理解する」では、分散処理技術で最近注目を浴びているものとして、グーグルのMapReduceアルゴリズムを紹介し、中編の「イロイロな分散処理技術とイマドキのWebサービス」では、MapReduceに至るまでのさまざまな分散処理技術やWebサービスについて紹介しました。 そのMapReduceアルゴリズムをJavaで実装したも
Hadoopのインストールとサンプルプログラムの実行
前回はGoogleの基盤技術とそれに対応するオープンソースソフトウェアとして、Hadoop & hBaseを紹介しました（図1 参照）。今回はHadoopを1台にインストールし、サンプルプログラムを動かします。次にHDFSとMapReduceのアーキテクチャを解説します。最後にサンプルプログラムのソースコードを解説します。 2. Hadoopの概要 Hadoopは主にYahoo! Inc.のDoug Cutting氏によって開発が進められているオープンソースソフトウェアで、GoogleFileSystemとMapReduceというGoogleの基盤技術のオープンソース実装です。Hadoopという名前は開発者の子供が持っている黄色い象のぬいぐるみの名前に由来しています。HadoopはHDFS（Hadoop Distributed File System）、Hadoop MapReduce F
Hardware Abstraction Layer - Wikipedia
この記事は検証可能な参考文献や出典が全く示されていないか、不十分です。出典を追加して記事の信頼性向上にご協力ください。（このテンプレートの使い方） 出典検索?: "Hardware Abstraction Layer" – ニュース · 書籍 · スカラー · CiNii · J-STAGE · NDL · dlib.jp · ジャパンサーチ · TWL（2020年12月） Hardware Abstraction Layer (HAL、ハードウェア抽象化レイヤー) とは、コンピュータのハードウェアとそのコンピュータ上で動作するソフトウェアの間に存在する、ソフトウェアで実装した抽象化レイヤーである。オペレーティングシステム (OS) のカーネルからハードウェア毎に異なる差異を隠蔽する機能を持ち、それによってカーネルコードは異なるハードウェアのシステム上で動作してもほとんど変更する必要がなく
QEMU - Wikipedia
QEMU（キューエミュ、キューエム[1][2][3][4][5][6]）は、Fabrice Bellardが中心となって開発しているオープンソースのプロセッサエミュレータである。 概要[編集] QEMUは機械全体をエミュレーションするシステムエミュレーションと呼ばれる環境と、Linuxのユーザーランドをエミュレーションするユーザーエミュレーションと呼ばれる環境がある。 ユーザーエミュレーション環境は、非特権モードのエミュレーションおよび、Linuxのシステムコール命令をネイティブのシステムコールに変換する。この環境は、組み込み機器のクロスコンパイルや非x86環境でWineを動かすために使用可能である。 システムエミュレーション環境は主にWindowsやLinuxなどのオペレーティングシステム (OS) を動かすことを目的に利用されており、OSの動作確認用としてQEMUを同梱する事がある。携
QEMU CPUエミュレータユーザードキュメント
Table of Contents 1. はじめに 1.1 特徴 2. Installation 2.1 Linux 2.2 Windows 2.3 Mac OS X 3. QEMU PCシステムエミュレータの起動 3.1 はじめに 3.2 クイックスタート 3.3 起動 3.4 キー操作 3.5 QEMUモニター 3.5.1 コマンド 3.5.2 整数の表現方法 3.6 ディスクイメージ 3.6.1 ディスクイメージ作成のクイックスタート 3.6.2 スナップショットモード 3.6.3 qemu-imgの起動 3.6.4 Virtual FATディスクイメージ 3.7 ネットワークのエミュレーション 3.7.1 VLAN 3.7.2 TAPネットワークインターフェースの使い方 3.7.3 ユーザーモードでのネットワークの使い方 3.7.4 QEMUの間でのVLANの接続 3.8 Linu
QEMU on Windows
QEMU は、多種のCPUをエミュレートするプログラムです。Linux、Windows、FreeBSD、Mac OS X上で動作します。Windows版はアルファバージョン（開発初期のバージョン）です。ここでは、その開発についての情報や使い方について紹介していこうと思います。 こまかなことは、こちらにあるかも。 What's New! 更新を停止します。(2007/03/10) ご協力ありがとうございました。 Kqemuのインストーラを加えました。(2007/02/20) Qemu 0.9.0のインストーラを加えました。 USBフィルタドライバがウィルスに感染していたことがわかりました。(2007/02/15) お使いのコンピュータをアンチウィルスソフトでチェックしてください。 バージョン0.9.0にあがりました。(2007/02/07) 移植メモを更新しました。 すべ
テキスト マイニングなら株式会社リッテル
株式会社リッテルはテキストマイニング技術を応用したWEBソリューションを提供します。株式会社リッテルは、東京大学情報基盤センター 図書館電子化研究部門 (中川研究室)で研究されてきた「図書館レファレンス・サービスの自動化」、「事例レポートのマイニング（テキストマイニング）」、「大規模な自然言語テキストを知識として用いる自動質問応答システム（テキストマイニング）」といったテキスト マイニング（自然言語処理）に関する技術を事業化し、研究の成果を一般に広めていくことをミッションとして設立されました。 東京大学中川教授のメッセージ 2008.10.08 第10回図書館総合展に出展・フォーラム発表します 2008.09.09 事例紹介を更新しました 2008.09.06 Hadoop（大規模分散処理プラットフォーム）構築支援を開始します 2008.07.23 関連語検索システム、日経産業新聞に掲載さ
Googleの誇る巨大データベースBigTableのオープンソースクローン「Hypertable」
Googleのあの巨大な検索システムなどを支えるデータベース「BigTable」は書き込みが毎秒700MB、読み込みが毎秒18GBという化け物システムなのですが、それのクローンを作るプロジェクト「Hypertable」というのがあるようです。既にバージョンが今年の2月4日に「0.9 Alpha」まで到達しており、超巨大な分散データベースを考えている人々から注目されているようです。 詳細は以下から。 Hypertable: An Open Source, High Performance, Scalable Database http://www.hypertable.org/ ダウンロードは以下から。同梱されているテキストファイルにインストール方法などが記されています。 Download Hypertable 実際のテスト結果などは以下に書いてあります。 PerformanceTestAO
話題の携帯向けOS「Android」をx86パソコンで動かしてみよう
皆さんはじめまして，この度ひょんな事から本稿を寄稿することになりました，ミラクルリナックスの中河宏文と申します。ミラクル・リナックスは，LinuxサーバーOSの開発，販売をメインに行っている会社で，現在のメイン・プロダクトとして「Asianux Server 3 == MIRACLE LINUX V5」というLinuxサーバーOSを国内販売しています。私は普段，このミラクル・リナックスで，組み込み関連の開発業務を行っています。 自己紹介はこれくらいにして，早速本題に入らせていただきましょう。突然ですが皆さん，「Android」ってご存知ですか？ Androidとは米Googleが2007年11月に発表し，2008年10月にオープンソースとして公開された，携帯電話向けソフトウエア・プラットフォームです。既に米国では，世界初のAndroid搭載スマートフォン「T-Mobile G1」が発売され
Embedded MIRACLE - ミラクル・リナックス
日経BP社 日経Linux共同企画、ITproに掲載されたAndroidのUSBブート･イメージです。本製品は日経BP社 日経Linux紙とミラクル･リナックス株式会社（以下ミラクル）の共同企画で、ITproに掲載されたAndroidの USBブート･イメージです。 USBメモリーにAndroidのブートイメージをインストールすることで、お手持ちのネットブックやMIDで簡単にAndroidを使うことができます。 詳しくはITproの記事をご確認下さい。 http://itpro.nikkeibp.co.jp/article/COLUMN/20090219/325052/ 必要なもの x86アーキテクチャのPC、USBメモリよりブート可能なこと （OSは問いませんが、下記の手順ではLinuxを仮定しています。） USBメモリ（512MB以上） 下記のリンクからUSBメモリイメージを
はてなのブックマーク数順で検索結果を表示する
例えばこんな検索ができます。 † rubyについて書いてあるページで、最もブックマークされているのはどこ？ http://okra.ark-web.jp/~konuma/cgi-bin/search.cgi?keyword=ruby www.ark-web.jpにあるページで、最もブックマークされているのはどこ？ http://okra.ark-web.jp/~konuma/cgi-bin/search.cgi?keyword=site%3Awww.ark-web.jp 追記、これはこっちを使ったほうがいいです。 http://b.hatena.ne.jp/entrylist?sort=count&url=http%3A%2F%2Fwww.ark-web.jp ↑ 詳細 † このサービスは以下の三つのファイルから成り立ってます search.cgi -- 表示部分 Hatena/Searc
ジョブスケジューラ TORQUEの利用法
ジョブスケジューラ TORQUEの利用法 梶原 広輝, 廣安 知之, 三木, 光範 ISDL Report No. 20050809003 2005年 7月 1日 Abstract 本報告では, クラスタなどで利用されているジョブスケジューラの一つであるTORQUE（Tera-scale Open-source Resource and QUEue manager）[1]の利用法についての報告である. 1 はじめに クラスタは通常, 複数のユーザが同時に利用する. あるユーザが他のユーザのジョブが実行されていることを意識しないでジョブを実行してしまうと, 一つのノードで複数のジョブが同時に実行される可能性がある. プロセス数の多い並列ジョブほど, ジョブの衝突が起こる可能性が高くなる. 他のユーザのジョブと衝突しないように気をつける場合も, プロセス数が多い並列ジョブほど, ど
)
リファクタリング (プログラミング) - Wikipedia
この記事には独自研究が含まれているおそれがあります。問題箇所を検証し出典を追加して、記事の改善にご協力ください。議論はノートを参照してください。（2020年10月） この記事で示されている出典について、該当する記述が具体的にその文献の何ページあるいはどの章節にあるのか、特定が求められています。ご存知の方は加筆をお願いします。（2014年4月） リファクタリング (refactoring) とは、コンピュータプログラミングにおいて、プログラムの外部から見た動作を変えずにソースコードの内部構造を整理することである。また、いくつかのリファクタリング手法の総称としても使われる。ただし、十分に確立された技術とはいえず、また「リファクタリング」という言葉に厳密な定義があるわけではない。 リファクタリング登場の経緯と目的[編集] リファクタリングが登場する以前は、一度正常な動作をしたプログラムは二度と手
括弧 - Wikipedia
この項目では、約物について説明しています。会話中の括弧については「エアクオート」を、シガー・ロスのアルバムについては「( )」をご覧ください。 括弧（かっこ）は、約物の一種であるところの、区切り符号（句切り符号）の一つ[1][2]。特定の文字・語句・文・数列・数式などを囲って他の部分との区別や結合関係を明らかにするための記号であり[3][4][5]、また、その記号で囲むこと[5]（その符号を付けること[4]）をも指す。 概要[編集] 括弧は対で使用され、先に記述される括弧を括弧開き（かっこひらき）または始め括弧（はじめかっこ）、後に記述される括弧を括弧閉じ（かっことじ）または終わり括弧（おわりかっこ）と呼ぶ。横書き表記の記述においては、相対的に左括弧（ひだりかっこ）・右括弧（みぎかっこ）とも呼ぶ。また、対となる括弧がそれぞれ縦並びの括弧を縦括弧（たてかっこ）、横並びの括弧を横括弧（よこかっ
060108 Locality-Sensitive Hashingの実装が一段落 - 飛行船通信
飛行船通信 飛行船通信MLの主催者(few01)が気になった事を記録するWIKI トップページページ一覧メンバー編集 060108 Locality-Sensitive Hashingの実装が一段落 最終更新： few01 2006年01月11日(水) 00:43:46履歴 Tweet 昨年末からプログラミングを始めたLSH: Locality-Sensitive Hashingの開発がやっと一段落した。今日の昼に何とか動くようになった。まだ細かなバグ修正や、処理速度の向上は必要だろうが、大きな山はこえた。 LSHというのはハッシュテーブルの一種である。 ハッシュテーブルというのは、ハッシュ関数を使った索引のことだ。 2006/1/10 ミスを修正 ハッシュ関数とは ハッシュ関数h()というのは、入力の値 x に対して、h(x) の値が、 近い x の場合にぶつかりにくく 一定の範囲に収ま
はてなグループの終了日を2020年1月31日(金)に決定しました - はてなの告知
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
楽天版MapReduce・HadoopはRubyを活用 － ＠IT
2008/12/01 楽天は11月29日、東京・品川の本社で開催した技術系イベント「楽天テクノロジーカンファレンス2008」において、近い将来に同社のEコマースサービス「楽天市場」を支える計画があるRubyベースの大規模分散処理技術「ROMA」（ローマ）と「fairy」（フェアリー）について、その概要を明らかにした。 レコメンデーションの処理自体はシンプル 楽天市場では現在、2600万点の商品を取り扱い、4200万人の会員に対してサービスを提供している。この規模の会員数・商品点数でレコメンデーション（商品の推薦）を行うのは容易ではない。 ※記事初出時に楽天市場の会員数を4800万人としてありましたが、これは楽天グループのサービス利用者全体の数字でした。楽天市場の会員数は正しくは4200万人とのことです。お詫びして訂正いたします。 レコメンデーションの仕組みとして同社は、一般的でシンプルなア
IBMが都内にクラウド検証施設、Hadoopのデモも実施 ― ＠IT
日本IBMは8月1日、都内の日本IBM 晴海事業所内にクラウド・コンピューティングの検証施設「IBM クラウド・コンピューティング・センター＠Japan」を開設したと発表した。クラウド・コンピューティングのビジネスメリットを顧客に提案したり、新しいシステム環境を検証する場として活用する。IBMによるとクラウドの検証施設の開設は日本で初めて。 IBMは世界各地でクラウド・コンピューティングの検証施設を設けていて、東京の開設は5番目。会見した米IBMのIBMソフトウェア・グループ ハイ・パフォーマンス・オンデマンド・ソリューションズ担当ストラテジー・バイス・プレジデントのウィリー・チゥ（Willy Chiu）氏は「このようなセンターを世界中に開設することで、クラウドのメリットを知ってもらい、顧客のビジネスをサポートしたい」と話した。「センターの数は今後数カ月で2倍にしたい」とも述べ、IBMとし
それぞれのメリット／デメリット
皆さん、こんにちは。本連載を担当するビーブレイクシステムズの山之内です。 前回まで「iBATIS」「Torque」「Hibernate」という3つのO/Rマッピングツールを見てきました。実際に各フレームワークを利用してサンプルを作成することで、各フレームワークの特長をつかめたかと思います。 最終回となる今回は、まとめとして各フレームワークの特長やクセに注目し、メリット／デメリットをあげながら各フレームワークを比較していきます。また、軽くではありますがEJB 3.0も取り上げ、その特長を説明したいと思います。 iBATIS 「SQL Maps」というO/Rマッピング機能と、「DAO Framework」というDAOパターン用のフレームワークで構成されている。マッピング・ファイルにSQL文を記述する必要がある。 Torque Active Recordパターン(エンティティが「O/Rマッパー」
0×0018 till I die » はてなnaoyaさん「はてなを支えるバックエンドシステム」
403 Forbidden nginx
perl - for(;;)よりforeach : 404 Blog Not Found
2009年03月29日23:45 カテゴリLightweight Languages perl - for(;;)よりforeach Perlベストプラクティス Damian Conway / クイープ訳 [原著:Perl Best Practices] 最近のid:naoyaのソースがすごく気になったので。 何が気になるかというと、for(;;)の利用。それもCやJavaScriptなど、事実上それしかないソースからそのまま転写したとかならとにかく、編集距離 (Levenshtein Distance) - naoyaのはてなダイアリーでは Python版がちゃんとxrangeを使っているのにPerl版がfor(;;)のでますます解せない。 "Perl Best Practices"でも、読みやすさの観点からCスタイルのforは避けよ(pp. 100-101)と言っているが、もう一つ損な
AWK - Wikipedia
AWK（オーク）は、プログラミング言語の一つ。 テキストファイル、特に空白類（スペースの他、タブなど）やカンマなどで区切られたデータファイルの処理を念頭に置いた仕様となっているが、一般的なプログラミングに用いることも可能である。UNIX上で開発された。 概要[編集] AWKは、ベル研究所におけるUNIX開発の過程で、sedやgrepのようなテキスト処理ツールに演算機能を持たせた拡張ツールとして1977年[1]に開発された。そのため、UNIX上のユーティリティである sort の存在を前提としている[1]。 簡単なスクリプトを記述することで効率的にテキストファイルを処理することが目的であった。 当初はそれほど多くの機能は無かったが、普及するにつれ、さまざまな処理をAWKで実行したいと考えるユーザーが増え、その希望に応えて1985年[1]に機能の拡張が行われた。その結果、汎用のプログラミング言
AWKの第一歩
小栗栖 修 金沢大学理学部計算科学科 2001年1月8日(月): 第1版 2002年10月10日(木):第1.1版 ogurisu[AT]kanazawa-u.ac.jp この文書の目標は AWKを使ったことがない人が使い始めるきっかけになれば というところにあります。 Cや Javaよりも気楽にプログラミングが楽し めて、もちろん実用的なプログラムが書けるのが AWKやperl, rubyに代表さ れるスクリプト言語です。すでにweb上にも AWKの文書が日本語のものも含 めてたくさんあります。本格的なマニュアル形態の文書も、 A4に印 刷して数枚程度のものもあります。が、ちょっと使ってみようというには本格 的な文書はしんどいし、 A4数枚程度のものは簡潔すぎて何ができる のかよくわからないと思います。それを補完できればなと思っています。もし、 この文書以上のことをしたくなったら、もっと
screenを縦分割するモード(vertical split)のパッチを当てる - 日々是鍛錬
screenは無いと死ねるくらい便利なのですが，画面を分割する(split)モードは水平(horizontal)しかありません．MacBookは縦の解像度がなきに等しいのでvim同様screenもvertical splitできるととっても嬉しい訳です． 調べてみると，splitのパッチを作成している方を見つける．という訳で自分の環境(MacBook Leopard)にも導入してみることにしました． screenの入手 現在GNU screenの最新版は4.0.3です．screen install memoから取得してください． # GNUのミラーサイトにはなぜか4.0.3が置いてないのです． vertical split のパッチの入手 Vertical Split for GNU Screenから取得してください． パッチを当てる まずscreen, パッチを解凍しパッチをscreen
Installing screen
便利なScreenを使ってみよう! [an error occurred while processing this directive] Screenは、UNIXをCUI環境で使わなければならないぼくら視覚障害者にはなくてはならない物です。普通は、Xとか使えば簡単に複数の仕事をすることができますが、CUIつまり、文字だけで作業する物には、screenを使って複数の仕事を同時に行います。仕事と書いているのは、例えば、ftpで、ファイルをgetしている間に、telnetで他のhostへアクセスしたり、muleで原稿の編集をしたりということです。これをマルチタスクとでもいうのかな。ではとりあえず、screenをインストールしてから実際の使い方を紹介しましょう。 1. Screenのインストール なあに、screenのインストールなんてすぐにできます。FreeBSDのcdromには、packag
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Cloudera
Hadoop分散ファイルシステム：アーキテクチャと設計
HBaseの開発者がHadoop、BigTable、分散データベースについて語る
http://www.caramel-tea.com/2009/01/hatena_bookmark-2/
Amazon.co.jp: クラウド大全: 日経BP社出版局 (著), 日経BP社出版局 (編集): 本
http://b.hatena.ne.jp/guide/plus
TechCrunch Japanese アーカイブ � ヤフーが検索にHadoop採用、グーグルっぽく脱皮を図る
form
Amazon.co.jp: Java言語で学ぶリファクタリング入門: 結城浩: 本
Amazon.co.jp：本： リファクタリング―プログラムの体質改善テクニックObject Technology Series
飛行船通信 - livedoor Wiki（ウィキ）
黒木メイサ 父の死も気丈に“女優プロ魂”（芸能） ― スポニチ Sponichi Annex ニュース
Google Trends
http://www.tsujita.jp/blojsom/blog/default/Linux/2007/07/23/PostgreSQL-.html
はてなブログ | 無料ブログを作成しよう