GraphXよりも使いやすいグラフデータ処理ライブラリ「GraphFrames」
GraphXよりも使いやすいグラフデータ処理ライブラリ「GraphFrames」：Java、Pythonでのグラフデータ処理が簡単に 「Apache Spark」のグラフデータ処理ライブラリ「GraphFrames」がリリースされた。米Databricks、米カリフォルニア大学バークレー校、米マサチューセッツ工科大学がSparkの「DataFrame」をベースに共同で開発したもの。 オープンソースの高速な大規模分散データ処理フレームワーク「Apache Spark」（以下、Spark）の開発を主導する米Databricksは2016年3月3日（米国時間）、Sparkのグラフデータ処理ライブラリ「GraphFrames」をリリースした。GraphFramesは、Databricksと米カリフォルニア大学バークレー校、米マサチューセッツ工科大学（MIT）がSparkの「DataFrame」をベ
Java の CSV/TSV/固定長ファイル Parser ライブラリ uniVocity-parsers の使い方 - Qiita
（2019/12/20修正）公式サイトの Documentation ページのURLを修正しました。 （2017/02/19修正）CsvParserSettings#setRowProcessor が非推奨になっていたので CsvParserSettings#setProcessor へ変更しました。settings.setRowProcessor(rowProcessor); → settings.setProcessor(rowProcessor); へ変更しています。 Java で CSV ファイルを処理するために最初 OpenCSV の使い方を Web で調べていたのですが、stackoverflow を見ていたら uniVocity-parsers というライブラリが OpenCSV より速いと書かれている記事を見かけたので使い方等を調べてみました。 概要、使ってみた感想 CSV
Javaを使うなら知っておきたい技術、フレームワーク、ライブラリ、ツールまとめ
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? Javaの開発と言っても、各種ミドルウェアやフレームワーク、ライブラリ、ツールなどが豊富にあり選択に悩むことは少なくないと思います。 そこで関連技術のインデックスになればと作成しました。 あくまで知っている範囲で記述しているので、コメントしてもらえれば随時追加します！ すべてを書くと膨大な量になるため、現状採用が減ってきているものや、そもそもあまり採用されていないもの、後継があったり、類似のものと比較した場合に明らかに劣っているものは省いています。 ちなみにライブラリには高機能なものも多いので、分類は参考程度にご覧下さい。 サーバ系 A
JavaからC言語で書かれた処理を呼ぶ。(JNA) - Qiita
はじめに JavaからC言語で書かれた処理を呼ぶ必要が出てきたため、調べたことをメモしておきます。 昔の知識でJNI(Java Native Interface)を使うものだと思っていたけれど、 最近ではJNA(Java Native Access)という便利なクラスライブラリがあって、 驚くほど簡単に呼び出せます。 JNAライブラリの入手 以下のWebサイトからダウンロードできます。 https://github.com/twall/jna#download jna.jar サンプルコード1 (静的にマッピング) C言語の標準ライブラリであるprintfを呼び出すサンプルです。(上記サイトを参考) まず、呼び出したい関数をinterfaceで定義しておきます。 このインタフェースをNative#loadLibrary()メソッドにかけるとあら不思議、 ライブラリ関数を呼ぶインスタンスが生
SankeiBiz（サンケイビズ）：自分を磨く経済情報サイト
サービス終了のお知らせ SankeiBizは、2022年12月26日をもちましてサービスを終了させていただきました。長らくのご愛読、誠にありがとうございました。 産経デジタルがお送りする経済ニュースは「iza! 経済ニュース」でお楽しみください。 このページは5秒後に「iza!経済ニュース」（https://www.iza.ne.jp/economy/）に転送されます。 ページが切り替わらない場合は以下のボタンから「iza! 経済ニュース」へ移動をお願いします。 iza! 経済ニュースへ
【即席】コピペでできる暗号化／符号化処理 Java編【3日目】 | DevelopersIO
こんにちは。いつの間にか、サーバー側のこむろです。 最近、クライアント側も高性能になってきたため、色々な大事な情報を格納したりすることも増えてきました。またサーバーとの通信によって最新の情報を取得することも多いです。そんな中、暗号化や符号化は重要な技術ですが、自分で実装するのはなかなか骨が折れます。 しかし、最近のプログラム言語では、１から自分で実装しなくても、便利なクラスやライブラリが含まれていることが多いと思います。今回は自分の備忘録も含めて、自分のよく使う暗号化やら符号化やらのプログラムの断片をまとめてみました 今回は、Javaを例にサンプルコードをざざっと記述してみました。Javaには元から色々な便利な暗号に関するクラスやライブラリが用意されているので、存分に利用していきたいと思います。 Base64 Encode/Decode バイナリ等のダメ文字を含むデータを、64種類の印字可
第19回 Javaプログラムから外部プロセスを起動するための「Apache Commons Exec」 | gihyo.jp
Apache Commons Execとは Javaプログラムから外部プロセスを実行する一般的な方法としては、標準ライブラリに用意されているjava.lang.ProcessBuilderクラスや、java.lang.Runtime.exec()メソッドがあります。しかしこれらのクラス／メソッドによるサポートは限定的であり、あまり使い勝手が良くないことでも知られています。「Apache Commons Exec」（以下、Commons Exec）は、そのような標準的な方法に変わる外部プロセスの起動手段を提供してくれるオープンソースのライブラリです。特にプロセスに対する適切な入出力処理が、比較的簡単に記述できるようになっている点が大きなメリットです。 Commons Execはこのページよりダウンロードできます。本稿執筆時点での最新版はバージョン1.1です。ダウンロードしたファイルを解凍
XMLをJavaオブジェクトにマッピングするJavaライブラリ「Apache Commons Digester 3.0」リリース | OSDN Magazine
The Apache Software Fondation（ASF）のApache Commonsプロジェクトチームは7月6日、XMLファイルをJavaオブジェクトにマッピングする「Apache Commons Digester 3.0」を公開した。実装が大きく書き直され、多数の新機能も含んでいる。 Apache Commons DigesterはXMLファイルをJavaオブジェクトにマッピングするためのJavaライブラリ。あらかじめ指定しておいた「ルール」に基づき、特定のXML構造を認識してそれをトリガーにアクションを実行できる。 Apache Commons Digester 3.0は、2009年1月にバージョン2.0がリリースされて以来のメジャーアップグレードとなる。全体にわたって実装が書き直され、ルール作成用言語「EDSL（Embedded Domain Specific Lang
【コラム】攻略! ツール・ド・プログラミング (52) Googleが開発した高速圧縮ライブラリ「Snappy」をJavaで使う | エンタープライズ | マイコミジャーナル
「Snappy」はGoogle社が開発した高速圧縮/伸長(解凍)ライブラリである。もともとは「Zippy」という名称で知られていたものだが、BSD Licenseに基づいてオープンソース化され、誰でも利用できるようになった。ZippyはBigTableやMapReduceから内部的なRPC処理にいたるまで、Google社内のあらゆるプロジェクトで利用してきた実績を持つ。 Snappyの最大の特徴は、圧縮/伸張の実行速度である。シングルコアのIntel Core i7プロセッサにおけるベンチマークでは、圧縮で毎秒250MB以上、伸張で毎秒500MB以上の性能を実現しているという。一方で圧縮率はzlibやLZOといった主要なツールよりも劣る。圧縮率はプレーンテキストで1.5から1.7倍、HTMLで2から4倍、JPEGやPNGといった圧縮済みのファイルフォーマットでは1.0倍となっており、これは
Akkaが1.0になった。JavaとScalaにアクターモデルをもたらす
原文(投稿日：2011/02/16)へのリンク Akkaは、Scalaで書かれたライブラリで、アクターモデルを使って、耐障害性のある、非常にスケーラブルなアプリケーションをJavaとScalaで書くことを簡単にする。 Carl Hewitt氏によって1973年に始めて提案されたアクターモデルは、Erlangのような言語に採用されて成功した。電気通信業会では、非常に高可用性のある、非常にスケーラブルなシステムが普通である。 Scala言語の生みの親である Martin Odersky氏が言うには、 Akkaアクターは、欲しい物をたくさん備えている。非常にスケーラブル、高パフォーマンスで、分散システムで非常に良く機能する。 プロジェクト リードの Jonas Boner氏が今日、Akkaは、1.0マイルストーンに到達した、とアナウンスした。InfoQは、氏にプロジェクトについてより詳しく聞いた
ExCella
お知らせ ExcellaのリポジトリはGitHubへ移行しました。 最新の情報はこちらをご覧ください https://excella-core.github.io/ コンセプト Excelは様々なシステムのフロントエンド・バックエンドで利用されるようになってきました。 またExcel2007では、扱えるデータ件数の増加、ピボットテーブル/ピボットグラフの機能の充実などが行われ、今後より多くのシーンでの利用が予想されます。 一方、JavaからExcelを操作するには POIやJava Excel APIなどの低レベルのAPIを利用するのが一般的ですが、 これらのAPIを利用してExcelを操作するには多くのコーディングをする必要があり、Excelのバージョンの違いにも悩まされます。 このような問題を解決する目的で作られたのがExCellaです。 ExCellaでは、ベースとなるフレームワーク
JExcelApi
Java Excel API - A Java API to read, write, and modify Excel spreadsheets Java Excel API is a mature, open source java API enabling developers to read, write, and modifiy Excel spreadsheets dynamically. Now java developers can read Excel spreadsheets, modify them with a convenient and simple API, and write the changes to any output stream (e.g. disk, HTTP, database, or any socket). Any operating s
【コラム】攻略! ツール・ド・プログラミング (32) Javaプログラムに組み込んで使えるPDF描画ライブラリ「PDF Renderer」 | エンタープライズ | マイコミジャーナル
PDF Rendererとは PDF Rendererは、PDFファイルを読み込んでJavaプログラムで描画するための機能を提供するライブラリである。iTextやApache FOPは任意のPDF文書を生成したり、PDFファイルを編集をするための機能は持っていたが、PDF RendererにはそのようなPDF編集機能は用意されていない。 PDF Rendererの利点は、PDF文書の内容をjava.awt.ImageオブジェクトやGraphics2Dオブジェクトに読み込ませて描画できる点にある。これらのオブジェクトはSwingをはじめとするグラフィックライブラリで汎用的に扱うことができる。すなわち、PDF Rendererを利用すればPDFコンテンツをさまざまなGUIアプリケーションに簡単に取り込むことができるということだ。たとえばPDFをSwingアプリケーションの中に描画したり、Jav
iTextを利用してJavaからPDF形式の帳票を出力する
はじめに 現在のWebシステムにおいて帳票の出力を行う場合、PDF形式が選択されることが一般的になっています。その理由としては、データサイズをコンパクトにすることができる、情報の改ざんを防止できる、などが挙げられます。一般ユーザにも普及していますので、システム開発時に顧客からPDF形式での情報の出力を求められることも多いのではないでしょうか。 この記事では、「iText」というライブラリを活用して、PDFの出力を行う方法を解説します。 対象読者 Javaプログラミングで開発を行った経験のある方、および、Javaプログラミングに興味をお持ちの方を対象としています。 必要な環境 このサンプルアプリケーションを動作させるには、以下のソフトウェアが最低限必要です。環境についての詳細や設定方法については、サーバサイド技術の学び舎 - WINGSにある「サーバサイド環境構築設定」を参照してください。
【コラム】攻略! ツール・ド・プログラミング (30) JavaプログラムからApache FOPを利用する | エンタープライズ | マイコミジャーナル
XMLファイルからPDFファイルを生成する 前回は、Apache FOPを用いてXSL-FO文書を元にPDF文書を生成する方法を紹介した。Apache FOPでは、XSL-FOを直接記述するだけでなく、XML文書からPDF文書を生成する方法も用意されている。具体的には、XML文書をXSLTを利用してXSL-FO文書に変換し、そこからPDFを生成するという形になる。したがってこの方法では、元になるXMLファイルのほかにXSLTを記述したファイルを用意する必要がある。 まずはXMLファイルを用意しよう。本稿では次のような内容を記述した「fop-sample-ja.xml」というファイルを用意した。見てのとおり、<colmun>の子要素として<title>と<abstract>を持つ構造である。 リスト1 fop-sample-ja.xml <?xml version="1.0" encodin
【コラム】攻略! ツール・ド・プログラミング (29) XSL-FO文書からPDF文書を作成するための「Apache FOP」 | エンタープライズ | マイコミジャーナル
Apache FOPとは Apache FOPは、XSL-FO文書からPDF文書を作成するためのJavaライブラリである。XSL-FO(XSL Formatting Objects)とはW3C勧告として公開されているXML文書の仕様であり、XSL(Extensible Stylesheet Language)によって組版を行うことを目的として開発された。XSL仕様では、XSL-FOのほかに、XML文書からXSL-FO文書を生成するためのXSLTおよびXPathも規定されている。したがって、Apache FOPを利用すればXSL-FO文書からPDF文書を生成するだけでなく、XSTLを使ってXML文書からPDF文書を生成することも可能である。 Apache FOPでは、XSL-FOファイルまたはXML+XSLTファイルからPDFファイルを生成するためのコマンドラインベースのプログラムが提供され
Office Open XML形式に対応したPOIの概要と環境構築
はじめに POIはJavaからMicrosoftのドキュメントを操作するためのAPIで、2007年6月からApache Software Foundationのトップレベルプロジェクトに格上げされました。オープンソースとして提供されているので誰でも無償で利用することができます。 なぜ初期のリリース後、7年以上も経過し、多くの情報が存在するPOIを今回あらためて取り上げることにしたかと言うと、2009年9月リリースのVersion 3.5でOffice Open XML形式（以降、OOXML形式）への対応という大きな変更が加わったからです。 分かりやすくいうと2007形式のExcel（xlsx）やWord（docx）のファイルも扱えるようになったということです。 本連載では、POIの中からExcelを操作するコンポーネント（HSSF/XSSF）に対象を絞り、下記の予定で紹介していきます。 準
Google Collections 1.0 は Java Collections Framework の機能強化された実装を提供する
原文(投稿日：2010/01/15)へのリンク Google Collections Library 1.0 Final バージョンは、2009 年 12 月 30 日にリリースされた。http://code.google.com/p/google-collections/ でダウンロードすることができる。ライブラリは Google エンジニアの Kevin Bourrillion 氏と Jared Levy 氏が発明したものである。Google 以外のエンジニア(Doug Lea 氏、Josh Block 氏、Bob Lee 氏らのように)やオープンソースコミュニティ全体の貢献のおかげで、最近の数年における実質的な成長が見られる。 ライブラリは、Java プラットフォームのビルトインコレクションライブラリを拡張することを目指している。JDK コレクションライブラリ – 現在の標準として
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Ｒｉｄｇｅｌｉｎｅ Ｂｌｏｇ: HttpUnit（Linux・Java）
IBM Developer
