エクセル読み込みをPOIからFastExcelに置き換えてパフォーマンスを改善する
はじめに こんにちは！10 月から株式会社ログラスでエンジニアをやっています、Kyosuke です！ ログラスでは、エクセルファイルをプログラムから操作する処理が一部存在しており、Apache POIというライブラリを使用しています。（以後POIと呼びます） しかし、POI には処理方式によってはメモリを多量に使用してしまうという問題があります。 今回はその対応として、まずエクセルファイルの読み込みをFastExcelというライブラリに置き換えた話を振り返っていきます。 TL;DR POIのXSSFWorkbookは、ファイルをメモリ内に読み込んで操作するため、大きなエクセルファイルを処理する際にファイルサイズ以上のメモリを必要とすることがある POI の公式ドキュメントより FastExcelは、POIより機能は劣る代わりに、読み書きともにパフォーマンスは大幅に上回る 書き込み Fast
Embulk＋DigdagでExcelのデータをPostgreSQLにロードする | DevelopersIO
データインテグレーション部 大矢です。 DBのテストデータをExcelで書くことはよくあると思います。 今回はExcelで書いたデータをEmbulkでDBにロードする、ということをやってみようと思います。 使用した環境は以下のとおりです。 Embulk v0.8.13 Digdag v0.8.16 PostgreSQL 9.5.3 Mac OS X El Capitan version 10.11.6 ExcelのデータをPostgreSQLにロードする 作業ディレクトリ 先に今回の作業で使用するディレクトリ構成を示しておきます。最終的にはこうなります。 excelload ├── allsheet.dig └── embulk ├── sales.yml ├── testdata.xlsx └── users.yml Excelのテストデータ ロードするデータ Excelのテストデータシ
Excel方眼紙とスクショペタペタエビデンスのあるシステム開発の現場とは？ - Tbpgr Blog
経緯 Twitterで以下のような流れの会話がありました。 @tbpgr Excel方眼紙やスクショとはどういった仕事のことなんですか？てぃーびーさんのRTしたツイートの流れがよくわからないので教えてほしいです！— 学生 (@yuutarou22) 2016, 1月 13 確かに 学生さんたちに届けこの想い。 といっておきながら呟いている内容は体験した人にしか分からないので これでは届くはずがないですね。 ※ここでいう学生さんはツイッターの相手の 学生さん(@yuutarou22さん) ではなくて、一般の システム開発業界を志す学生さんたち です。 @yuutarou22 巻き込みリプを避けるためにあらためて個別にツイート。説明、長くなりそうなのでブログエントリで説明しますね。今日の夜書きますー。— てぃーびー (@tbpgr) 2016, 1月 13 ということで システム開発におけるE
Forguncy（フォーガンシー）は単純なExcel活用ツールではなく、業務アプリケーション開発のためのWeb開発ツールである［PR］
Forguncy（フォーガンシー）は単純なExcel活用ツールではなく、業務アプリケーション開発のためのWeb開発ツールである［PR］ グレープシティの「Forguncy」は、Web対応の業務アプリケーションを簡単に作れる開発ツールです。Webブラウザに表示される画面フォームは、Forguncyのツールで白紙の状態から作成することも、すでに業務で使っているExcelのワークシートを読み込んで作成することもできます。 Forguncyによる画面フォームの作成やカスタマイズは、メニューの細部にいたるまで、まるでExcelを操作しているように行えます。使い慣れたExcelの操作でWebアプリケーション開発ができるのです。 Forguncyで開発できるWeb対応の画面フォームは、Excelのワークシートが備えているリッチな表現力、例えば文字の大きさや色、太字などのスタイル、多彩な罫線、日付や金額、
なぜExcel表のタイトルは左上なのか
「一般のビジネスパーソンが普段作っているようなExcel表を作ってほしい」――。簡単なようで難しい、こんな要望を筆者が受けたのは、2014年7月中旬のこと。何らかの財務報告を目的とした、10行程度の表を作ってほしいという。要望を出してきたのは、かつて外資系投資会社に籍を置き、Excelの達人として知られる、慎 泰俊氏である。 筆者が同氏に依頼した原稿の執筆に必要だという。「ダメなExcel表を、見やすく分かりやすい表に変貌させる術を解説してほしい」とお願いしていた。すると、冒頭のようなメールを受け取ったという次第だ。 要するに、「ダメなExcel表の例を作ってほしい」という逆依頼である。慎氏にとっては、見やすく分かりやすいExcel表を作成する作法が身に付いてしまっており、あえてダメなExcel表を作るというのは、かえって難しい作業なのだという。 筆者にとっても、簡単な作業とは思えなかった
グレープシティ、Excelの操作性でWebアプリを開発できる「Forguncy」のラインアップを発表
グレープシティは、30日に特設サイトにおいて、Microsoft Excelの操作性そのままにWebアプリを簡単に開発可能なソフトウェア「Forguncy（フォーガンシー）」の製品ラインアップを発表するとともに、ユーザーからのフィードバックを元に改善を行った「Forguncy Preview 2」を公開した。 「Forguncy」は、ユーザーのスキルや、開発するアプリケーションの種類・規模に合わせた、「Forguncy」と「Forguncy Pro」の2種類のラインアップを用意する。 「Forguncy」は、プログラミング経験がない人でも簡単に操作でき、個人や部署内で使うアプリケーションや、1つの目的に特化した簡単なアプリケーションの開発に対応している。発売は2014年10～12月期の予定。 「Forguncy Pro」は、外部データベースへの接続や、JavaScriptコードの実行といっ
エクセルのカラースケール(ヒートマップ)の使い方 色分けで数値を見やすく | 初代編集長ブログ―安田英久
どういうものかというと、Excelのデータ表で範囲を指定してこれを設定すると、その範囲内での数値の大小で色分けしたりアイコンを表示したり、各セルの数値の大きさに応じた長さの棒グラフ的なバーを背景に表示したりしてくれるものです。 また、「上位10項目」などの条件でセルに色を付けたりすることも可能。 こうした条件書式の機能は、Excel 2007から追加されていたようです。ずっと使っていたくせに、今頃知りました……。昔から使っているExcelでこんな便利な機能が付いているなんて、想像してなかったですからね……。 使い方はかんたん。Excelのデータ表で、わかりやすい表示にしたい範囲を選んで、リボンの［ホーム］タブにある［スタイル］の［条件付き書式］から色つけのスタイルを選ぶだけです。 表全体を選んで指定すると、全体の数値範囲に基づいて処理されるので、列ごととかに設定していくのが基本ですね。次の
axlsx (gem) で xlsx ファイルをダウンロード - Rails つまみぐい
Ruby on Rails v3.2.11 axlsx v1.3.4 いい加減そろそろ Excel2003 形式 (.xls) で出力し続ける理由がなくなってきてしまったので(^_^;、ようやく重い腰をあげて Excel2007 形式 (.xlsx) で出力に移行することにしました。使えそうなライブラリはないかと gem を探してみました。とりあえず目についた以下の3つをさわってみました。 roo acts_as_xlsx axlsx 3つを試してみた印象 roo は xls と xlsx の両対応という触れ込みで、No.1候補か！？と思ったんですが、xls部は spreadsheet に丸投げのようで、xls部とxlsx部とで書き方の作法がまるで違って、別々のものを使っても大して変わらない… さらに独自に作成されたxlsx部は、cell, row, column といったクラスがなく常に
WordやExcelから直接SVNにコミットできるアドオンmsofficesvn - 小さい頃はエラ呼吸
はじめに WordやExcelのファイルをSubversionでバージョン管理している人向けに、おもしろいアドオンをご紹介します。今回紹介するのはmsofficesvnというアドオンで、このアドオンを使うと、WordやExcelから直接SVNにコミットすることができるようになります。 msofficesvn - Microsoft Office (Excel, Word, PowerPoint) add-ins that invoke TortoiseSVN commands - Google Project Hosting 通常、WordやExcelのファイルをコミットする場合、ファイルを保存して、エクスプローラから対象のファイルを選んでコミットします。msofficesvnではWordやExcelからもSVNにコミットすることができるため、いつものコミット操作を手間なく行えるようになり
僕たちプログラマーは、プログラミングに、Excelを使います！ - m2
なんとかカレンダー 21日目 id:miya2000 です。こんばんは！ 低級テキストエディタでせっせとコーディングしているあなた！そろそろ手がが疲れてきていませんか？ そんなあなたは、この記事で紹介する Excel コーディングをぜひ覚えてください。 わずか数秒で世界が変わります！ 元ネタ めんどうな作業がわずか数秒に！新人デザイナーが 知らないと一生後悔するExcelを使ったHTML生成 | Webロケッツマガジン http://webrocketsmagazine.com/entry/20111209/html-code-generation-using-excel.html Excelを使った高級コーディング とにかく Excel でコーディングを行った画面を見てみましょう。今回は Java のコーディングをやってみます。 どうでしょう？ 画面を見るだけでどれだけ恩恵があるかお分か
Excelの表（QA表, 不具合表... etc）を、すごく検索しやすくするツールを作りました。 - 地平線に行く
最近、仕事でやたらExcelを使うようになったので、こういうツールを作ってみました。 Excelインクリメンタルサーチ Excelの表を、すごく検索しやすくするツールです。 （QA表, 不具合表... etc） サンプルはこちら！ このツールを使うと、Excelの表をブラウザ上で素早く、わかりやすく検索できます。 データの自動変換スクリプトがついているので手間はほとんどかかりません。 また、複数のファイルにまたがるような場合でも、簡単に検索できるようになります。 日頃、Excelでバリバリ仕事をこなさなきゃいけないSIerの方にうってつけのツールです。 ぜひ、ご利用ください！ ダウンロード：ダウンロード - 地平線に行く 紹介ページ：Excelインクリメンタルサーチ - 地平線に行く 経緯 お客様とのやり取りは、どうしてもExcelで情報をやりとりしなくてはいけません。 しかし、Excel
Excelで業務用Webアプリを作成できるソフト 富士通が発売
富士通は、顧客管理などを行うWebアプリケーションをExcelを用いて簡単に作成できるようにするソフト「RapidWebSS」を発売した。 富士通と富士通アプリケーションズは8月10日、Microsoft Office Excelを利用して業務用Webアプリケーションを作成できるようにするソフト「RapidWebSS」を発売した。同ソフトにより、ユーザーは立替精算や顧客管理などを行うWebアプリケーションを、Excelを利用して簡単に作成できるようになるという。 サーバに同ソフトをインストールし、Excelを用いて各種申請書類などを作成することで、新規にWebアプリケーションを作成できる。作成したアプリケーションの利用者は、Web上からアプリケーションにアクセスしてデータの入力や閲覧ができる。 また、立替精算、顧客管理、商談管理、屋上会議など13種類のテンプレートを用意。ユーザーは必要なテ
マイクロソフトエクセル世界選手権開催！ 頂点に輝いたのは...15歳少女
マイクロソフトエクセル世界選手権開催！ 頂点に輝いたのは...15歳少女2011.08.09 11:00 福田ミホ しかも、かわいいです。 このたびマイクロソフトの主催により、エクセルの技能を競うマイクロソフトエクセル世界選手権が開催されました。そんなイベントあったんだってこともちょっと驚きですが、57ヵ国・22万8000人もの参加者を押さえて優勝したのは、なんと15歳の少女だったんです。 世界選手権の決戦はカリフォルニア州サンディエゴで開催され、そこには世界各地の予選を勝ち抜いたエクセルの猛者たちが集結しました。優勝した15歳少女のレベッカ・リックウッドさんは、Excel 2007を使ってスプレッドシートを作成する時間制テストで見事100パーセントのパーフェクトスコアを出したそうです。彼女はイギリスのソートリーという小さな町の中等学校に通っており、昼休みや放課後の時間を使ってエクセルの練
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
こんなんあったんだ……「Microsoft Office」の内蔵のスクリーンショット機能が便利／Officeから離れることなく他アプリのスクリーンショットを撮影・挿入【やじうまの杜】
TechCrunch | Startup and Technology News
【杜のAndroid研究室】 第230回：正式版となったAndroidタブレット版「Microsoft Excel」
ノーコードWebアプリ開発プラットフォーム-Forguncy（フォーガンシー）| メシウス株式会社 |
PC
掲載終了のお知らせ : 富士通
第七回 入力ミスよさらば！入力ミスを防ぐExcelシート作成のポイントまとめ
