一定期間更新がないため広告を表示しています

大手コンピュータ・メーカー勤務。入社以来10数年をソフトウェア開発の現場で過ごし，その後ソフトウェア品質部へ異動。現場への技術支援や品質教育開発などを主に行っている。「APIで学ぶWindows徹底理解」(日経BP社)などを執筆。 今を去ること十数年前，PC（パソコン）のOSの主流がDOSだったころ，アプリケーションが利用できるメモリーは，高々500Kバイトしかなかった。プログラマは，少ないメモリーをいかに有効利用するかに腐心したものだし，mallocなどのメモリー割り当て関数が，メモリー不足のためにエラーを返すのも珍しいことではなかった。OSがWindowsやLinuxなどに変わり，メモリーの大容量化や低価格化が進んだ今，少なくとも一般的なアプリケーション開発に関する限り，メモリーが確保できるかどうかを心配する開発者はほとんどいないのではないだろうか。 しかし，それでもメモリーは有限であ

J2EEがミッションクリティカルな分野に適用されるようになり、Javaのパフォーマンスチューニングの重要性はさらに高まっています。パフォーマンスチューニングにはさまざまなパラメータがありますが、中でもJava VMに関連するチューニングの効果は大きいといわれています。本稿は、Java VMに関連するチューニング手法を学ぶための前提知識を提供することを目的にしています（編集部）。 Java VMに関連するチューニングを行い、J2EEアプリケーションのパフォーマンスを上げるためには、Java VMについて詳しく知る必要があります。本稿は2回に渡ってJava VMの基本構造と動作原理を詳細に解説しますが、内容を理解するためにはプログラムがコンピュータ上で動作する基本原理とJava VMの基本用語を知っている必要があります。Java VMの基本用語に関しては、「実行スピードに挑戦するJavaアーキ

前回は，プロセスが利用するメモリーをLinuxがどのように管理するかを説明しました。Linuxでは，ページングという仕組みに基づいた仮想記憶機構を利用して，プロセスごとに実際のメモリー空間とは別の仮想メモリー空間を準備します。この仮想メモリー空間は，プロセス・スケジューラによって実行が切り替わるたびに切り替えられます。このような仕組みを採ることで，複数のプロセスで競合を起こさず，できるだけ効率的にメモリーを使えます。 ところで，メモリーを利用するのはプロセスだけではありません。カーネル自身もメモリーを使いますが，その利用方法はプロセスの場合とは異なっています。また，物理メモリー・アドレスと仮想メモリー・アドレスの変換を行うのはプロセッサ（MMU）の仕事ですが，実際にその変換表（ページ・テーブル）を用意するのはカーネルの役割です。空き物理ページのうちどのページを割り当てるのか判断するのもカー

HugePages は free コマンドで見ると used に計上される - ablog の続き。 Huge Page はユーザープロセスから使われる前はOSカーネル内に確保され、used に計上されるが、ユーザプロセスが使用すると cahched に計上されるぽい。 検証結果 # ulimit -l unlimited # ulimit -l unlimited # sysctl -w vm.nr_hugepages=200 vm.nr_hugepages = 200 # sysctl vm.nr_hugepages vm.nr_hugepages = 200 # gdb hugepage-shm GNU gdb (GDB) Red Hat Enterprise Linux (7.2-60.el6) Copyright (C) 2010 Free Software Foundation

というか、GUIモードで起動したものの、 マウス操作もキーボード操作も受け付けなくなってしまいましたのよ。 デバイスを受け付けるサービスをoffしてしまった模様。 では、CUIでたちあげればなんとかなるか？ とか思って、やってみたことになります。 強制的にシングルユーザーモードで起動します。 起動するときに「F8」を打。 カーネルのバージョン選択画面がでてくるので、 そこで「e」で編集にうつります。 遷移した画面で、カーネルを選択し、「e」で編集 そしてプロンプトの末尾に「single」を追加してリブート そうすると、rootでアクセスできました。 目的はCUIにして起動することでしたので、 vim /etc/inittab デフォルトランレベルを3に変更して、起動しなおしました。 # デフォルトランレベル（ランレベル3を指定） id:3:initdefault: ランレベル 1 ： Wi

SELinux (エスイーリナックス) とは何か SELinuxは、Security Enhanced Linuxの略で、文字通り、Linuxのセキュリティを向上させるための仕組みです。 おおよその仕組みは以下の通りです。 Linuxに限らず、多くのオペレーティングシステムでは管理者と呼ばれるユーザーでログインするとすべてのアクセスが可能となります。 このことは、逆に見れば、管理者を乗っ取られれば、すべてのアクセスを許してしまうことを意味します。 Linux(UNIX)の場合、管理者はrootと呼ばれます。 SELinuxでは、このrootにセキュリティが一極集中することを避けて、rootにすべてのアクセス権限を許すのではなくて、HTTPやFTPといったプロセスごとにアクセス権限を設けることができます。 CentOSを初め多くのLinuxのディストリビューションではSELinuxはデフォル

ドロップインによるユニットのカスタマイズ systemdには、サービスの起動・停止の制御や依存関係、起動順序の制御だけでなく、プロセス管理の挙動に関するパラメータを詳細に設定することが可能となっています。例えば、Apache Webサーバーで有名なhttpdサービスのパラメータは以下で確認することが可能です。 # systemctl show --all httpd 様々なパラメータが設定可能であることがわかります。しかし、特定のパラメータについて明示的に設定を行う場合には、ユーザー独自の設定ファイルに特定のパラメータのみを記述しておくとアプリケーションやサービスの運用管理が煩雑化しにくくなります。ここでは、httpdサービスにパラメータを個別に指定して管理する方法を紹介します。まず、systemdでは、ユーザー独自のパラメータを指定するためのディレクトリを作成します。httpd.serv

1回目のマイナーGCまでの流れを把握する 前回は、HotSpot JVM（以下HotSpot）のヒープ構造を解説しました。今回は、HotSpot JVMの4つのヒープ領域がどのように使用されていくのかを見ていきましょう。 まず、アプリケーションがオブジェクトを作成すると、HotSpotはそのオブジェクトにEden領域を割り当てます。 図1　オブジェクトが生成されるとEden領域が割り当てられる アプリケーションが処理を実行していくと、オブジェクトがどんどん作成されていきます。その結果、Eden領域が次々と使用されていきます。 Eden領域がいっぱいになり、空き領域がなくなると、HotSpotはNew領域を対象にGCを行います。このGCは「マイナーGC」と呼ばれ、世代別GCで言う「若い世代のGC」になります。 このように、Eden領域で短命なオブジェクトを回収することで、ヒープを再利用できる

今日は#pyhack & Kaggleに初参加してみました。 Kaggleとは? Kaggleは企業や研究者がデータを投稿し、世界中の統計家やデータ分析家がその最適モデルを競い合う、予測モデリング及び分析手法関連プラットフォーム及びその運営会社である。 bywikipedia とりあえず今日の目標は、機械学習とか全くわからないけど、とりあえず何か提出してみよう、という感じです。 挑戦するのはDigit Recognizerという、手書きの数字の画像から数字を判別するチュートリアルコンテストです。 データは実際には画像ではなくて、28*28の0~255の数字で用意されています。 まずは適当にやってみる 誰かの記事なんかに沿ってやってくのは難しいしよくわからないし、ワクワクしないので、とりあえず最初に自分で考えたしょぼい方法でどこまでできるかやってみます。 機械学習（教師あり）は一切知識がない