MyISAMではなく、原則InnoDBを使う - [Mi]みたいなもの
あまり考えずに、MyISAMを使うこと前提にSQLを書いていたのですが、やっぱりInnoDBを使おうと思ったのでメモしておきます。 各テーブルのストレージエンジンとして、MyISAMを使うか。InnoDBを使うか。 MyISAM InnoDBで検索すると、比較記事が山とひっかかるように、古くして新しい問題（みたい）です。 MySQLでは、受発注データ等のトランザクションを厳密にやる必要がある場合でなければ、トランザクションの処理をしない等によりスピードが速いから標準のMyISAMを使っておくといいよ、ぐらいに理解してました（入門者が入門レベルの記事をざっと読んだものですので^^;） しかし最近の流れは、 原則として、InnoDB。例外的に、MyISAM という感じのようです。 背景には、InnoDBの性能向上やMyISAMのテーブルロック等があるみたいですね。 以下の記事等が大変参考になり
![MyISAMではなく、原則InnoDBを使う - [Mi]みたいなもの](https://cdn-ak-scissors.b.st-hatena.com/image/square/83a525fa931c507279956873d4c4d4cd1a356992/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F17680117127156572702%2F17680117127156590931%2F1558483472)
(特にMyISAMを使っていた)ウェブ屋さんがInnoDBを使う場合の設定項目 - kazuhoのメモ置き場
InnoDBはMyISAMと比較して安全(OSクラッシュや電源断が発生してもテーブルが壊れない)分、書き込みが遅い。データベース屋さんからすると、それは当然のことでMyISAMがおかしいんだ、ということになり、だからバッテリバックアップ機能のついたRAIDカードを使うんだ、という話になる。でも、MyISAMを使っているウェブ屋さんの現場では、場合によって多少データが消えてもかまわないから、安いハードウェアで大量のアクセスを捌きたい... って乖離があるんじゃないかなーと思ってる。 そのような場合には、my.cnf の innodb_flush_log_at_trx_commit パラメータを調整することで、MyISAMに比肩する書き込み速度を得ることができる(そのかわり、クラッシュや電源断の場合は、設定によって直近１秒以内の変更が失われる)。 他のパラメータも含めて書いておくと、データベー
参照と更新が頻繁に発生するテーブルでMyISAMとInnoDBを比較 - cloned.log
[追記 2012/09/29] 最近でもこの記事を参照してくださる方がいるので追記します。下記エントリを書いた時点では非常に局所的なケースで重い現象に悩まされていたことを前提に調査しており、その延長線上で「一律InnoDBというのは言い過ぎな印象を受けるパフォーマンス差に感じる」ということを書いてしまっていますが、その後色々と勉強した結果、特定箇所のニッチなベンチマークではなく一般的な運用上の負荷を焦点にした場合はInnoDBは適切に設定しておれば十分にパフォーマンスがある（もしくはInnoDBの方が有利）というのが現在の意見です。 「MyISAM InnoDB」で検索するとあちらこちらであるように、今時は理由がなければInnoDB、ということでMyISAMのテーブルをいくつかInnoDBに変更したところ、かなりパフォーマンスが落ちるケースがあった。 InnoDBにしたら軒並み遅くなったと
ついに登場！ MySQL 5.5 （1/2）－ ＠IT
2011年はどんな年になるのでしょうか。データベースがどう進化するのか楽しみですね。一年の計としてスキルアップを掲げた人もいるのではないでしょうか。今回はMySQLの新バージョンと、データベース関連の資格試験のお話です。 可用性向上を図ったMySQL新バージョン まずは昨年末に飛び込んできたニュースから。2010年12月16日、オラクルがリレーショナルデータベース管理システム（RDBMS）「MySQL」の新版である「MySQL 5.5」の提供を始めました。 「よかった、本当によかった」と私は胸をなで下ろしました。何よりも、新バージョンがGA（正式版）に到達できて安心しました。2010年4月のMySQL Conference ＆ Expoでは5.5の紹介がありましたが、一時は5.6というバージョンナンバーが出てきたこともありました。内心どうなることかとはらはらしていたのですが、これで落ち着き
MySQL 管理しやすくなりました！5.5 のパーティショニング | QK
mysql 5.5になり、パーティションの機能もバージョンアップしました。MySQL 5.1では以前、当ブログにて書きましたが、今回は、MySQL 5.5で書きたいと思います。 後ろの行で、MySQL 5.1 と 5.5の比較（のようなもの）を書きましたのでご確認ください。 では、さっそく検証開始！ ・パーティショニングが対応になっているか確認する mysql> show variables like '%partition%'; +-------------------+-------+ | Variable_name | Value | +-------------------+-------+ | have_partitioning | YES | +-------------------+-------+ 1 row in set (0.05 sec) ・テスト用スキー
GitHub製Resqueを使用したRubyでのバックグラウンド処理(バッチ処理) - Masatomo Nakano Blog - Web開発を極める
そこそこの規模のWebシステムになってくるとバックグランド処理(batch処理)は欠かせないものになってくる。メールの送信、データの日次、月次、年次処理、削除(フラグ)データのpurgeやバックアップ、等々いろいろな物が出てくる。 現在はBackgrounDRbを使っているが、いろいろといまいちなので今回Resqueを評価してみた。ちょっと触った段階での第一印象をメモ。 まず、バッチ処理系で評価のポイントになってくる部分はなんだろうかと考えてみると、なんと言っても見通しのよさと異常系の処理だと思う。画面系と違い、バッチ処理は「見えにくい」ところで実行されるので、その二つが特に大事になってくる。「知らないうちに止まっていました」では困るのがバッチ処理。 たとえば、 異常時の処理無視?管理者に通知?リトライ? 復旧処理タスクの削除(問題を修復後)リトライ 状態の監視いくつのJobが残っているか
RailsでResque使い始めた - Masatomo Nakano Blog
これとこれの続き。この後、もう少し調査して、Resqueを実際のシステムの一部で使い始めてみたのでその感想とメモ。 前回までのあらすじ Resqueはバックグラウンドでジョブの実行をするもので、かなりの大規模サイトでかつ更新系の処理が多そうなシステムであるGithubで開発され使われている。よくある使い方としては、「Web UIを軽く見せるため、処理の依頼だけを受け付け、実際の処理はバックグラウンドで実行」「バッチ処理などで、大量のJobをQueueに突っ込んでおいて、(複数の)workerで並列で効率よく処理」などがある。 不安なところ Resqueの大きな特徴は、QueueをRDBMSではなくRedis上に作るところにある。Redisは、Memcacheのようにシンプルに使え、すべてのデータはメモリ上に展開されるのでとても速く、データはディスク上にも永続化されるので、何かあったときにも
大量のデータをRailsでバッチ処理する方法 | 変なヤバいもんログ
Posted on 2008年10月27日 Posted by ちゅう コメントする Posted in Development Tags: Rails Railsで、ユーザが500万件居たりすると User.find(:all) とかやっただけでかなりきつい。こういうのをやるときって、バッチ処理だと思うんだけど、結構工夫してループ内で何回も find したりしても、メモリ足りなくなったりするから、結局 script/runner で Rails の起動コストを引いても シェルスクリプト回したほうが安全っていう結論になる。 50000件ずつループで処理して、Railsを再起動みたいな感じになる。 #!/bin/sh limit=50000 count=50000 while [ $count -le 5000000 ]; do script/runner "User.find(:all,
RailsアプリでActiveRecordを使ったバッチ処理 その２ - ひげろぐ
script/runnerを使うといいようだ。 これは引数の文字列をRubyスクリプトとして解釈し、Rails環境で実行するというもの。 script/runnerによって ruby script/runner 'p Onsen.count' といった具合にコマンドラインからモデルを使った処理を実行できる。 コントローラは使えません。（でした） 対象にする環境は-eオプションを使ってdevelopment,production,testをそれぞれ指定できる。 何も指定しない場合のデフォルトはdevelopment。 ゆえにproduction環境で実行したければ以下のごとし。 ruby script/runner -e production 'p Onsen.count' ちなみに多少複雑なバッチ処理は当然ファイルに書いたスクリプトから読ませたい。 しかしそのために普通にパイプとか使っても
WheneverでRailsのバッチ処理 - ひげろぐ
WheneverはCronを利用して繰り返し処理を行うためのライブラリ。 シェルコマンドやRailsのRunner、RakeタスクなどのジョブをCronで実行できる。 実際のところCrontabへの登録を補助してくれるだけなのだが、そのシンプルさがかえって分かりやすい。 バッチ処理の管理にうってつけ。 タイトルではRailsとなっているがRails以外でも利用できる。 以下はRails3での使い方メモ。 導入 Gemfileに以下の行を追加してbundle install gem 'whenever', :require => false schedule.rbの編集 config/schedule.rbにスケジュール設定を書いていく。 bundle exec wheneverize . を実行するとひな形を作ってくれるので、それを元に編集していくのが吉。 スケジュールは「every」に続
Resqueを利用したRailsでの非同期処理/バッチ処理
Railsアプリケーションの中で非同期処理（バッチ処理）を実現したいことがあります。例えば、こんな場合です。 ユーザーが「送信」ボタンを押したら数千通のメールを送る。 数千通のメールを送るにはかなり時間がかかるので、その処理は後回しにして、ユーザーにはすぐにレスポンスを返したいところです。 非同期処理を行うためのRubyライブラリとしてはBackgrounDRbやdelayed_jobなどが有名ですが、もう一つ有望な選択肢としてResqueというのがあることを最近知りました。 と言っても、私が知らなかっただけで、RubyGems.orgによれば11万回以上もダウンロードされている有名なライブラリです。昨年(2010年)1月に書かれた、あるブログ記事には詳しい評価が載っています。 以下、私の試用報告を書きます。なお、OSはUbuntu 10.04(LTS)、Railsのバージョンは3.0.5
Ruby Scraping - scRUBYt!
@@ -28,6 +28,18 @@ puts google_data.to_xml >>> + +!関連情報 +* [[公式サイト|http://scrubyt.org/]] +* [[リファレンスマニュアル(rdoc)|http://scrubyt.rubyforge.org/]] +* [[公式Wiki|http://wiki.scrubyt.org/index.php?title=Main_Page]] + +* ソースコード(github) +** [[メインツリー|http://github.com/scrubber/scrubyt/tree/master]] +** [[リライト版ブランチ|http://github.com/rubypond/skimr/tree/master]] +*** 0.5.0になる予定のもの。小さくて、ちゃんとテストされて
Ruby Scraping - Mechanize
@@ -1,5 +1,8 @@ ウェブサイトのアクセスを自動化するライブラリ。HTMLの解析には[[Hpricot]]を使っている。 +以下のサイトがとてもまとまっています↓ +* [[RubyのWWW::Mechanizeを解説 for 0.9 （仮） - きたももんががきたん。|http://d.hatena.ne.jp/kitamomonga/20081209/kaisetsu_for_ver_0_9_ruby_www_mechanize]] + !リファレンス * class [[WWW::Mechanize]] * class [[WWW::Mechanize::Page]] @@ -36,4 +39,6 @@ !リンク *公式サイト(リファレンスのみ) : http://mechanize.rubyforge.org/ *RubyForgeのプロジェクト
スクレイピングのためのNokogiri利用メモ - それはそれ、これはこれ
スクレイピングのチュートリアルを書いてみた。 参考：http://nokogiri.rubyforge.org/nokogiri/Nokogiri.html まだまだたくさんのクラスやメソッドがあるが(読んでない)、HTMLのスクレイピングに限定すれば多分これくらいで十分。 2014-02-16追記 なんかたくさんブックマークされていることに気づいたので、サンプルコードのRuby1.9/2対応のアップデート。 Mechanize周りも修正。WWW::Mechanize → Mechanize 等 (0) 前提知識 Ruby、HTML、DOM、CSSセレクタまたはXPath (1) クラス構造の理解 Nokogiri::HTML::Document < Nokogiri::XML::Document < Nokogiri::XML::Node < Object Nokogiri::XML::
Requests Dialog - Facebook開発者
The Web Games on Facebook and Facebook Gameroom platforms are no longer available for new submissions. This documentation is intended solely for developers with existing games. To learn more, read our blog post. ゲームリクエストにより、プレイヤーが友達をゲームに招待するメカニズムが実現しています。リクエストは、プレイヤーから1人または複数の友達に送信され、ゲームのコールトゥーアクションを必ず含みます。リクエストは、既存のプレイヤーにも新しいプレイヤーにも送信できます。 ゲームリクエストは、新しいプレイヤーを引き付けたり、既存のプレイヤーを呼び戻したりするために利用できます。リクエス
２ちゃんねらーが選ぶエロ漫画大賞まとめ @ wiki - トップページ
おすすめリンク | 価格比較@price デジカメプリント | 年賀状 | ましかくプリント | @wiki - 無料レンタルウィキサービス | プライバシーポリシー| 関連ページ| 関連ホットワード| リンク元| トラックバック
画像を劣化させずに拡大することは不可能なのでしょうか？…
画像を劣化させずに拡大することは不可能なのでしょうか？200x200pixくらいの画像を400x400pixくらいに、劣化させずに拡大したくていろいろ調べているのですが、いい情報がみつかりません。
【今さら聞けない】無料通話＆チャットiPhoneアプリ「LINE」の始め方 - ネタフル
ベッキーのテレビCMでもお馴染みの、無料通話＆チャットiPhoneアプリ「LINE」を今さら始めてみました。もしかしたら「気になっているけど‥‥」という人もいるかと思い、始め方と簡単な使い方をまとめておきます！ 「LINE」はリリース直後にレビューを書いていますが、ユーザインターフェースなども大きく変わっていますので、改めて使い方をまとめておきます。 しかし、ユーザ数が多いというのは正義ですね。話題になっているので久しぶりにインストールし直したのですが、その瞬間から友達がたくさんいる訳ですよ。テレビCMは大正解でした（非IT系の中学時代の友人までいた！）。 ということで、まずはインストールから説明します（以前のバージョンより分かりやすくなっていました）。 まずは、自分の電話番号を入力します。そして「規約に同意して番号認証」をタップします。 「友だちを探すためにアドレス帳の情報をLINEサー
「Firefox6.*や5.*でもXUL/Migemoを動かしたい」まとめ
まずは結果から。 Firefox6.0.2でもXUL/Migemoが使えるようになった。以下はその経緯。 ********************************************************** 今回の記事で紹介している方法は、「非公式ビルド(MOD)」などと呼ばれる、ユーザーが勝手に改造して使う方法です。 その結果うまく動くかわかりませんし、なにか不具合があっても誰も責任は負えません。 きちんとバックアップを取るなどしていつでも前の状態に戻せるようにして、なにかあっても自分で解決できる方のみ試してみてください。 ********************************************************** とにかくMigemo動かしたいから早く教えろ、な人は↓のアドオン入れてFirefox再起動したら動くんじゃないかな、と思います。 Ad
pylori*style wiki - HTMLパーサ Hpricot
Hpricotは Ruby用の HTML パーサです。スキャン部分は C 言語で書かれていて高速に動作します。 HTMLの解析や書き換えに威力を発揮する便利なライブラリです。 rubygemsを使うのが簡単です。 # gem install hpricot すると以下のようにプラットフォームを聞いてきます。Unix系OSであれば 1 を、mswin32 であれば 2 を選びます。 Select which gem to install for your platform (i386-freebsd6) 1. hpricot 0.4 (ruby) 2. hpricot 0.4 (mswin32) 3. Cancel installation コンパイルが始まり、インストールが行われます。 Building native extensions. This could take a while.
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
株式会社スタイルズ
Blogger
Ruby Scraping - Hpricot
Ubico - お絵描きメッセンジャーアプリ
Mobile Archives
ゆぐらどらしる [MugenViewer] 画像を劣化なしで無限に拡大
LINE
Google+風に、Picasaの画像を高さを揃えたイメージギャラリーを実装するjQueryプラグイン・jquery-photowal