POIのhssfを使って、巨大なエクセルファイルを読み込むには。 - 設計と実装の狭間で。
日本企業の皆様におかれましては、エクセルが大好きかと、存じます。 いや、僕も大好きなのだけどもさ、表計算かわいいよ、表計算。 ウルトラハイパフォーマンスで、データストアとしても超一流。 コードの自動生成してもいいし、まかり間違ったりすると、方眼紙としても使えちゃったり…とか。 と、まぁ、色々使い道が多いので、ついJavaでもエクセルを読書きしたくなったりとかするヨネ。 で、そこでApache POIでつよ、となる訳だけど、POIのHSSFは普通に使うと、 ちょっと大きいエクセルファイルを読もうとしただけで、ｱﾌｫ程メモリを食ってしまうのですな。 例えば、こんなコードで読み込むのが、まぁ普通ダヨネ。 @Override protected void readExcel(File excel) { BufferedInputStream bi = null; try { bi = new Bu
JavaとMySQLの組み合わせでUnicodeのU+00A5を用いたSQLインジェクションの可能性
補足 この記事は旧徳丸浩の日記からの転載です（元URL、アーカイブ、はてなブックマーク1、はてなブックマーク2）。 備忘のため転載いたしますが、この記事は2008年12月22日に公開されたもので、当時の徳丸の考えを示すものを、基本的に内容を変更せずにそのまま転載するものです。 補足終わり 今年のBlack Hat Japanには、はせがわようすけ氏が「趣味と実益の文字コード攻撃」と題して講演され話題となった。その講演資料が公開されているので、私は講演は聞き逃したが、資料は興味深く拝見した。その講演資料のP20以降には、「多対一の変換」と題して、UnicodeのU+00A5（通貨記号としての￥）が、他の文字コードに変換される際にバックスラッシュ「\」（日本語環境では通貨記号）の0x5Cに変換されることから、パストラバーサルが発生する例が紹介されている。 しかし、バックスラッシュと言えばSQL
Java 7で登場する新機能一覧、クロージャは残念な状況 | エンタープライズ | マイコミジャーナル
Javalobby OpenJDKをベースにして登場するメジャーアップグレード版になるとみられるJava 7だが、実のところどういった新機能が導入されることになるのだろうか。Javaはバージョンアップするごとに機能が増え、追加された新機能をキャッチアップするだけでも大変だ。JavalobbyにJava 7 Update from Mark Reinhold at DevoxxのタイトルのもとDevoxxでMark Reinhold氏が発表したJava 7アップデートのサマリが紹介されている。Java 7で登場する機能を把握しておく上で便利なサマリなのでJavaデベロッパはチェックしておくとよさそうだ。 紹介されているサマリからさらに興味深い点をまとめると次のとおり。 大きな変更点 非同期I/Oの実現 (ただの非ブロックI/Oではなく、リアルに非同期I/Oを実現) リアルファイルシステムAP
あなたの知らないJDKの便利ツールたち
「Java News.jp（Javaに関する最新ニュース）」の安藤幸央氏が、CoolなプログラミングのためのノウハウやTIPS、筆者の経験などを「Rundown」（駆け足の要点説明）でお届けします（編集部） 標準JDKに含まれる便利なツール 読者の皆さんは、最近のJDK（Java SE）に、開発やデバッグに便利な新しいツールが含まれていることをご存じでしょうか？ 古くからのJava開発者は、古い時代のJDKのツールしか知らず、一方で新しいJava開発者はEclipse/NetBeansなどの統合開発環境に慣れてしまい、細かなコマンドツールを直に使う状況が減ってきているかもしれません。 そこで今回は、最近のJava SE 6含めて比較的新しいと思われるツールを以下の5種類に分けて紹介します。 プロファイリング トラブルシューティング／情報取得 監視 配備／補助 スクリプティング 「こんなツー
Javaの性能を分析する10のツール | エンタープライズ | マイコミジャーナル
JDK16 jconsoleの動作例 JavalobbyにおいてJavaパフォーマンストラブルシューティングに役立つ10のツールがTop 10 Java Performance Troubleshooting Toolsとして紹介されている。OSの限定されるツールもあるため実質的には7つの紹介とみていいだろう。Javaのパフォーマンス分析といえばJDK 6 Update 7からJava VisualVMが同梱されるなど今後のさらなる発展が期待される分野だ。同文書で紹介されているツールは次のとおり。 jconsole - JDK1.5およびそれ以降のバージョンに同梱されているJavaモニタリングおよびコンソール管理ツール。JMX互換のグラフィカルツールでローカルで動作しているJava仮想マシンもリモートで動作しているJava仮想マシンもどちらもモニタリング可能 VisualVM - 高性能な
JavaからGnuPG(PGP)の鍵を利用する - まどぎわBLOG
鍵生成のついでにJavaから利用する方法のメモ 自力で読み込みプログラムを作成すると大変なので、Bouncy Castleのライブラリを利用します。必要なjarファイルはbcprovとbcpgの二つになります。 最初にGnuPGの鍵が保存されているsecring.gpgを読み込みます。読み込まれた結果はPGPSecretKeyRingに格納されます。 FileInputStream is = new FileInputStream("secring.gpg"); PGPSecretKeyRing keyRing = new PGPSecretKeyRing(is); is.close(); PGPSecretKeyRingは主鍵と副鍵からなる複数のPGPSecretKeyの集合になっています。getSecretKeys()で全ての鍵を取り出すことができます。またgetSecretKey()
Tomcat 6で実現！ Ajaxを超える通信技術Comet (1/3) - ＠IT
Tomcat 6で実現！Ajaxを超える通信技術Comet：Tomcatはどこまで“安全”にできるのか？（3）（1/3 ページ） Ajaxを超える？ Tomcat 6で搭載されたCometとは？ 前回はTomcatを“安全”に活用するために、ツールを使った運用の仕方やTomcatの設定について解説しました。 今回はTomcatの安全性から少し離れて、Tomcat 6の新機能の利用方法について解説します。Tomcat 6では、いくつかの大きな拡張がありましたが、今回はJ2SE 1.5で実装されたNew I/O API（java.nioパッケージ）を用いたComet（コメット）通信について解説します。 おさらい 「通常のHTTPでの通信」 通常のHTTPでの通信はクライアントのWebブラウザなどからサーバへリクエストを送信し、サーバはリクエストを解釈してレスポンスを返します。つまり、通信のタイ
ERダイアグラムを編集するAmaterasERDでDB設計
AmaterasERDの特徴 AmaterasERDは、ベースとしてAmaterasUMLのコンポーネントを利用しており、AmaterasUMLの姉妹品といえます。AmatarasUMLについては、本連載第14回「軽量なUMLプラグインAmaterasUML」をご覧ください。AmaterasERDは次のような特徴を持ちます。 物理設計と論理設計をサポート 多くのフリーERダイアグラム作成ツールは物理設計しかサポートしていませんが、AmaterasERDは論理設計も行うことができます。 また、論理設計と物理設計がシームレスに行えるようになっているため、論理設計モードで上流工程のモデリングを行えば、下流工程の物理設計をスムーズに行うことができます。 DDLファイルの生成 さらに、物理設計により作成したテーブルからDDL（Data Definition Language、データ定義言語）ファイル
【真夏の夜のミステリー】Tomcatを殺したのは誰だ？ (1/3) - ＠IT
【真夏の夜のミステリー】Tomcatを殺したのは誰だ？：現場から学ぶWebアプリ開発のトラブルハック（6）（1/3 ページ） 本連載は、現場でのエンジニアの経験から得られた、APサーバをベースとしたWebアプリ開発における注意点やノウハウについて解説するハック集である。現在起きているトラブルの解決や、今後の開発の参考として大いに活用していただきたい。（編集部） 【第1章】Tomcatが無応答!? トラフィックの多い大規模サイトでは、その負荷のためにさまざまな問題が発生する。それらの問題を回避するには、性能を考慮して作られたアプリケーションや、ノウハウに基づいたミドルウェアのチューニングが必要となる。 TomcatはServletコンテナとしての長い歴史を持ち、多くの採用実績を持つオープンソースのアプリケーションサーバ（以下、APサーバ）だ。大規模なサイトで採用される事例も出てきており、To
Cybozu Developer Network: Facebookで開発されたオープンソースのRPCフレームワーク「Thrift」調査報告
サイボウズはクラウドベースのグループウェアや業務改善サービスを軸に、社会のチームワーク向上を支援しています。
ログをTwitterへ出力 - Log4Twitter 1.0.0登場 | エンタープライズ | マイコミジャーナル
Yusuke Yamamoto氏は29日、Log4Twitterの最新版にして初のリリースとなるとなるLog4Twitter 1.0.0を公開した。Log4TwitterはJavaで開発されたプラグイン。Log4jやLogbackに組み込んで使うAppenderプラグインで、ログ出力をTwitterメッセージとして出力する機能を提供する。同プラグインを活用すると、Log4jやLogbackを活用しているアプリケーションに変更を加えることなくプラグインを組み込むことで、ログをTwitterメッセージとして出力できるようになる。 Log4Twitter 1.0.0はJDK 1.4.2およびそれ以降のバージョン、Log4jであれは1.2.x以降のバージョン、Logbackであれば0.9.6以降のバージョンで動作する。同アプリケーションはThe BSD Licenseのもとオープンソースソフトウェ
人気のAjaxフレームワークがメジャーバージョンアップ! - DWR 2.0.1リリース | エンタープライズ | マイコミジャーナル
DWRプロジェクトは26日、DWRのメジャーアップデートバージョンである「DWR 2.0.1」をリリースした。バージョン2系の最初のリリース候補公開から実に5ヵ月以上を経ての正式リリースとなった。 DWRは、サーバサイドのJavaコードとクライアントサイドのJavaScriptコードをシームレスに統合するフレームワークである。DWRを用いれば、JavaScriptコードからサーバサイドにあるJavaのメソッドを自然な形で呼び出せるほか、サーバサイドのJavaコード中にブラウザ内のJavaScriptを操作するコードを記述することも可能だ。 今回のメジャーバージョンアップで追加された機能は以下の通り。 Reverse Ajax: サーバサイドのJavaコード内にクライアントサイドのJavaScriptを操作するコードを記述できる JavaScriptプロキシAPI: Script.aculo
【新人研修向け特別企画】JavaでPHPを使ってみた
教育界、技術者コミュニティでJava言語の教育と啓蒙に長年携わってきた筆者が、独自の視点からJavaの面白さを掘り下げていく。（編集部） Webサービスを実装する際によく使われるプログラミング言語として、Java以外には何があるでしょうか？ RoR（Ruby on Rails）の出現によりRubyが最近は注目されていますが、普及度を考えるとPHPではないでしょうか。数年前には、LAMP（Linux、Apache HTTP Server、MySQL、PHP）という用語が流行しました。もちろん、LAMPのPはPerlやPythonを意味する場合もあるようですが、筆者がよく使用しているWebアプリケーションはJavaかPHPでコーディングされたものが多いので、PHPの方をすぐに想像してしまいます。今回は、Javaで記述されたPHP実行エンジンがあるということで調べてみました。 Quercusとは
【ハウツー】アノテーションプログラムの開発方法が変わる! - Annotation mock builder (1) Annotation mock builderとは | エンタープライズ | マイコミジャーナル
米Sun Microsystemsの川口耕介氏は9日、「Annotation mock builder」というツールを発表した。同ツールは、Javaアノテーションに対するモッククラス(以下、アノテーションモック)を自動的に作成するためのもの。これまであまり注目されてこなかった技術であるが、Google発のDIフレームワークであるGuiceが採用したことから注目が集まっている。 アノテーションモックを作成すると何が嬉しいのか。それは、「アノテーションのインスタンスを自由に作成できる」ということになる。通常、アノテーションのインスタンスを作成するのはJVMの役目であり、プログラムは実行時にリフレクションを用いてインスタンスを取得し、情報を読み取る。アノテーションモックを利用すれば、プログラムを「アノテーションのインスタンスを取得する部分」と「アノテーションのインスタンスから得た情報に応じて動作
【ハウツー】JVMレベルでクラスタリングを可能に - OpenTerracotta (1) JVMレベルのクラスタリングって何? | エンタープライズ | マイコミジャーナル
Open Terracottaは、複数のJVMをまたいでJavaオブジェクトをキャッシュすることができるクラスタリングソリューションだ。以前は商用製品であったものが、2006年末にオープンソース化された。ライセンスは、Mozilla Public LicenseをベースとしたTerracotta Public Licenseであり、商用プロダクトにも問題なく利用できる。 なぜTerracottaが必要か アプリケーションにとって「パフォーマンス」は重要だ。特にデータベースを使用するアプリケーションはデータベースへのネットワークアクセス、検索クエリの実行性能などに足を引っ張られてパフォーマンスが思うように出ないことも多い。 そこで考え付くのが検索結果をキャッシュして再利用することであるが、これには別の問題がある。一つは、キャッシュを利用すると将来的な拡張性を損ねる可能性があることである。例え
【ハウツー】クラス構造がまる見えに! UDocでJavaをダイナミックに分析する (1) Ja...
UML、なかでもクラス図はクラスの関係を把握するうえで欠かせないダイアグラムだ。できれば既存のAPIはクラス図を見て簡単に全容を把握しておきたい。その際に全自動でクラス図を作成できると大変便利だろう。そこで紹介したいのがUDocだ。こうした用途にぴったりのアプリケーションである。 UDocはJava クラスをUMLライクのダイアグラムによって視覚化するGUIアプリケーションだ。Javadoc、Javaバイナリファイル、Javaソースコードなどから動的に UMLライクのダイアグラムを生成できる。生成されるダイアグラムそのものを動的に編集することも可能なので、グリグリといぢりながらクラス関係を解析できるすぐれものだ。動作にはJDK 5.0かそれ以上のバージョンが必要。本稿執筆時点の最新版は12日(米国時間)に公開された1.005であり、GNU GENERAL PUBLIC LICENSE Ve
Apacheライセンスの正規表現ライブラリ"Jakarta Regexp 1.5"登場 | エンタープライズ | マイコミジャーナル
The Apache Jakarta ProjectおよびJakarta Regexp teamは18日(米国時間)、Jakarta Regexpの最新版となるJakarta Regexp 1.5を公開した。1.5はメンテナンスリリースにあたり、バグフィックスのほかにパフォーマンスの最適化が実施されている。 Jakarta RegexpはJavaで開発された正規表現ライブラリ。もともとJonathan Locke氏からApache Software Foundationに寄贈されたコードをベースにしている。ベースとなるコードは1996年に開発されたものであるため、すでに長い時間をかけて動作試験が実施されてきたことになる。 Jakarta RegexpはApache License Version 2.0の下で公開されている。正規表現ライブラリはすでにJavaコアAPIに用意されているが、同
【コラム】Java API、使ってますか? (6) JavaBeansのプロパティを同期させるバインディングAPI | エンタープライズ | マイコミジャーナル
JSR 295: Beans Bindingとは JSR 295は、複数のJavaBeansのプロパティを同期させるための標準的な方法を策定するために提案された。たとえば2つの異なるBeanオブジェクトBeanAとBeanBがあるとき、BeanAのプロパティが変更されたらそれが自動的にBeanBのプロパティにも反映されるようにするというものだ。とくにSwingアプリケーションを作成している場合などには、このような処理を必要とするケースがよく出てくる。ユーザがテキストフィールドに入力した値を、リアルタイムにテーブルコンポーネントの表示に反映させたい場合などがそれにあたる。 通常、このような同期を行うためには状態の変更を検知するいくつかのリスナを登録し、相互のプロパティを確認し合わなければならない。JSR 295の目的は、シンプルな手段でこれらプロパティの同期を実現できるようにすることである。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Loading...
BouncyCastle PGP Encryption - One Mo’ Gin - Sometimes Once Isn’t Enough