Graphtage - JSON/HTML/CSVなどに特化した差分ツール MOONGIFT
開発に差分表示はつきものです。コードであれば通常のdiffで問題ありませんが、バイナリになると話が違います。ファイルフォーマットに合わせて最適な差分表示ツールを選ぶ必要があります。 しかしテキストの中でも最適なツールを選んだ方が良いケースは良くあります。そんな時にはGraphtageを使ってみましょう。 Graphtageの使い方 JSONの差分をHTML出力した例です。 標準出力の場合。 Graphtageが対応しているのはJSONやJSONS、XML、HTML、YAMLそしてCSVとなっています。JSONやXML、HTMLは改行をなくしても同じ内容になるので、Graphtageが活躍することでしょう。 GraphtageはPython製のオープンソース・ソフトウェア（LGPL）です。 GitHub - trailofbits/graphtage: A semantic diff uti
Loading CSV File at the Speed Limit of the NVMe Storage
I plan to write a series of articles to discuss some simple but not embarrassingly parallel algorithms. These will have practical usages and would most likely be on many-core CPUs or CUDA GPUs. Today’s is the first one to discuss a parallel algorithm implementation for CSV file parser. In the old days, when our spin disk speed maxed out at 100MiB/s, we only have two choices: either we don’t care a
Cassava Editor - あすかぜ・ねっと
CSVファイルを手軽に作成・編集する Windows 用のソフトウェアです。 テキストエディタと同じような感覚で表形式のデータを編集できます。 マクロ機能や簡易表計算機能をはじめ、編集作業に必要なさまざまな機能を備えています。 ダウンロード 正式版： Ver.2.5.4 (64 bit) (3.47 MB) ／ Ver.2.5.4 (32 bit) (2.28 MB) 開発版： Ver.2.6 β2 (64 bit) (3.05 MB) ／ Ver.2.6 β2 (32 bit) (2.31 MB) 過去のバージョン： Ver.2.5.3 (64 bit) (3.47 MB) ／ Ver.2.5.3 (32 bit) (2.28 MB) ／ Ver.2.4.5 (64 bit) (3.45 MB) ／ Ver.2.4.5 (32 bit) (2.26 MB) ／ Ver.2.3.4 (64
bash の危険な算術式 - どさにっき
■ bash の危険な算術式 _ 使ってる人がいちばん多いだろうからタイトルでは bash としてるけど、ここで取り上げることは zsh および ksh 一族(本家 ksh、pdksh、mksh)にも該当する。ash、dash などでは該当しない。 _ 以下のシェルスクリプトには脆弱性がある。わかるだろうか。 #!/bin/bash # "品目,単価,個数" の形式の CSV を読んで、"品目,合計金額" の形式で出力する csv="foo.csv" while IFS=, read item price num; do echo "$item,$((price*num))" done < "$csv" これ、細工された CSV ファイルを食わせることで、任意コードの実行ができてしまう。数ある脆弱性の中でもとくにヤバいやつだ。どこが穴なのかというと、タイトルにもあるとおり算術式なのだが、し
なぜRDBからCSV + COBOLに変更する事でコスト削減と高速化を同時に実現出来たかの考察 - ブログなんだよもん
そもそも既存はどんなロジック？ RDBなんだからWhere句使ったら？ なぜファイルにすると速くなるのか？ 並列化と分散処理による高速化の可能性 COBOL使う必要あったの？ Javaとかじゃダメだったの？ まとめ TLを見てると以下の記事が少し話題になってました。 tech.nikkeibp.co.jp tech.nikkeibp.co.jp 対象の記事は有料会員じゃないと見れないのだけど事例としては以下みたい。 リソース - ユーザー事例 - COBOL製品 ユーザー事例 : マイクロフォーカス さて、この記事の驚きポイントは「１億レコードくらいのDB処理をRDBからCOBOL + CSVに変更してUnixサーバからWindowsサーバに変える事で性能を維持しつつコストを1/5くらいにした」という事でしょう。 「せっかく7割もあったSQLを全部COBOLに変えるとか時代に逆行しすぎ！」
月数100万アクセスをDB使わず超簡単にさばく - Qiita
初Qiitaな個人開発者のひさしAppと申します @Hisashi_vc 最近「じぶんコイン」というコイン系SNSサービスを作り、月間100万～数百万アクセスを激安サーバー（1000円ちょい）でさばき中です。 じぶんコイン https://crypto-app.tokyo/qCoin/?m=hisashi_vc おまけになかなかの高負荷で、３ヶ月で数百万回送金したり、10連ガチャ回しまくったり、全ユーザーページにチャットあったり、数百人に一斉メッセージ＆送金したり、さらに内部API叩きまくってたりと、かなりのヤバさですが、ブロックチェーンどころかデータベース一切使ってません。 そんなツイートしたら予想よりビックリしてもらえたので、種明かししようと思います。ちなみに私はサーバーサイドエンジニアでも何でもないので、Hellow world覚えて３日目の中学生でもできるくら超簡単ですｗ この２つ
【ExcelとCSV】本気で理解したい初心者のためのCSV勉強会資料 - わえなび ワード＆エクセル問題集 waenavi
エクセルでCSVを保存？ 変換？ CSVファイルをエクセルで開くと壊れる？？ 仕事でCSVファイルを扱うことがあります。しかし、「CSVの意味」を本気で教えてくれる人はなかなかいません。それは、「CSV」を本質的に理解するには、その前提となる知識が必要で、仕事中にそんな面倒くさい説明をするヒマがないからです。 今回は、本当にCSVのことを知りたいのに誰も教えてくれないとお悩みの初心者の皆さんのために、CSVとは何か、を徹底的に解説します。 「リスト形式とCSV」完全マスターシリーズ（この記事は第２回です） ８個の基本パターンで完全習得「リスト形式」の教科書 本気で理解したい初心者のためのCSV勉強会資料 CSVファイルとExcelの関係を本気で理解するための確認テスト10問 初心者のためのCSV取り込み事例演習教材（勉強会資料） 初心者が「CSVで保存してアップ」を理解するのは意外と難しい
[JavaScript] Web Worker で大量テストデータ(CSV)を生成する - Qiita
この記事は、 チームスピリット Advent Calendar 2017 の22日目の記事です。 https://adventar.org/calendars/2207 (遅くなってしまいました…！すみません！) やりたいこと CSVファイルを使用してデータをインポートする機能を作ったので、実際に大量のデータをインポートするテストをしたい。 要件 あらかじめ用意したヘッダ情報をもとに、大量(10000行×200列くらい)のCSVを生成したい 自分以外の人にも使用してもらうため、面倒な環境構築なしで実行できるようにしたい → JavaScriptで実装してブラウザで実行できるようにしよう 普通に実装してみる <html> <head> <meta charset="utf-8"> <title>CSVgenerator</title> </head> <body> <p> <input ty
![[JavaScript] Web Worker で大量テストデータ(CSV)を生成する - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/86a811e58386cf290fdf8292617ce2d9879f1660/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCSmF2YVNjcmlwdCU1RCUyMFdlYiUyMFdvcmtlciUyMCVFMyU4MSVBNyVFNSVBNCVBNyVFOSU4NyU4RiVFMyU4MyU4NiVFMyU4MiVCOSVFMyU4MyU4OCVFMyU4MyU4NyVFMyU4MyVCQyVFMyU4MiVCRiUyOENTViUyOSVFMyU4MiU5MiVFNyU5NCU5RiVFNiU4OCU5MCVFMyU4MSU5OSVFMyU4MiU4QiZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9YjczZjYwNjg4Y2EwMDU2MzE5ODFmYzlhZGJhZWYzYjg%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwNDZnb2gmdHh0LWNvbG9yPSUyMzIxMjEyMSZ0eHQtZm9udD1IaXJhZ2lubyUyMFNhbnMlMjBXNiZ0eHQtc2l6ZT0zNiZ0eHQtYWxpZ249bGVmdCUyQ3RvcCZzPTE0ZDMwMDA4ZWM3Mjc4YzE4MzM3OTZiMDk2MWNiMzcx%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3D446d1e153c89ec8ec61e25b233432948)
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
VueのデータをCSV形式でダウンロードする - Qiita