csvkit 1.0.4 — csvkit 1.0.4 documentation
csvkit 2.0.0¶ About¶ csvkit is a suite of command-line tools for converting to and working with CSV, the king of tabular file formats. It is inspired by pdftk, GDAL and the original csvcut tool by Joe Germuska and Aaron Bycoffe. Important links: Documentation: https://csvkit.rtfd.org/ Repository: https://github.com/wireservice/csvkit Issues: https://github.com/wireservice/csvkit/issues Schemas: ht
csvkitの使い方まとめ - Qiita
はじめに csvファイルをデータ分析のために簡単にハンドリング・クレンジングしてくれるためのオープン・ソースのツール pythonからインストール可能 公式ページのドキュメントが揃っているので、本格的に使うならそっちをチェックしてください。 インストール pipが使えるなら、下記1行でインストール可能 $ ls /usr/local/bin/*csv* /usr/local/bin/csvclean /usr/local/bin/csvgrep /usr/local/bin/csvlook /usr/local/bin/csvsql /usr/local/bin/in2csv /usr/local/bin/csvcut /usr/local/bin/csvjoin /usr/local/bin/csvpy /usr/local/bin/csvstack /usr/local/bin/sql
csvkitでcsvとjsonを相互に変換する - メモ置き場
昨日ちょっと試したcsvkitをもう少し触ってみる csvファイルをjson形式に変換する 例えばこんなcsvファイルを $ head japan_pref_population.csv pref,people,size,population 愛知県,"7,425,952","5,165.12","1,437.71" 愛媛県,"1,414,996","5,678.33",249.19 茨城県,"2,945,824","6,095.72",483.26 岡山県,"1,936,575","7,113.23",272.25 沖縄県,"1,410,138","2,276.49",619.44 岩手県,"1,303,351","15,278.89",85.3 岐阜県,"2,064,940","10,621.17",194.42 宮崎県,"1,126,132","7,735.99",145.57 宮城
Expressで簡易的にAPIを作成する - Qiita
const faker = require("faker/locale/ja"); const fs = require("fs"); const users = []; const maxLength = 100, max = 85, min = 16; for (let i = 0; i < maxLength; i++) { const name = faker.name.lastName() + ' ' + faker.name.firstName(); users.push({ id: i + 1, name: name, age: Math.floor(Math.random() * (max + 1 - min) ) + min }) } fs.writeFile('users.json', JSON.stringify(users), () => { console.log
シェル芸で使いたい jqイディオム - Qiita
はじめに このページは JSONのデータを変換処理するコマンドラインツール jq (http://stedolan.github.io/jq/) を、シェル芸で上手く使うためのテクニックをまとめたページです。 jqのインストール方法については、Qiita や インターネット上のページ を参考にして下さい。 第22回シェル芸勉強会 大阪サテライト の LTで発表した内容 に加筆・修正を行ったものとなっております。 定番のヘルプ表示 $ jq -h jq - commandline JSON processor [version 1.5] Usage: jq [options] <jq filter> [file...] jq is a tool for processing JSON inputs, applying the given filter to its JSON text inp
jq コマンドで JSON を CSV に変換する
jq can mangle the data format that you have into the one that you want with very little effort, and the program to do… とっても優秀な jq コマンドは、ご丁寧にフィルターで加工した値をCSV形式で出力する機能を用意してくれています。 > jq -r '<CSV 形式で出力したい要素を取り出すフィルター> | @csv'最期の|@csv が重要です。 簡単な例を使って、振る舞いを確認してみます。 出力(1) サンプルデータ(sample1.json)の内容の確認> cat sample1.json [ {"key1": "value11", "key2": "value12", "key3": "value13"}, {"key1": "value21", "key2":
Google Sheets のデータを JSON 形式で取得する Web API をサクッと作る - Qiita
（データを追加する Web API は Google Sheets にデータを追加する Web API をサクッと作る をご覧ください） Google Sheets のデータをJSON 形式で取得する Web API を、10分くらいでサクッと作ります。 レスポンスタイムが長いので、あくまで試作用としてご利用ください。 シートにある全ての情報を取得する だったら、 [ { "title": "TechCrunch Japan", "feed_url": "http://jp.techcrunch.com/feed/" }, { "title": "Engadget Japanese", "feed_url": "http://japanese.engadget.com/rss.xml" } ] が取得できます。 新しいシートを作る https://docs.google.com/sprea
【GAS】WebアプリやAPIも作れちゃう！HtmlService、ContentServiceについて、できることをまとめてみた。 ～ その④ JSON API ～
HtmlService、ContentServiceまとめシリーズ その① Webアプリケーションの基本 その② FusionTablesとの連携 その③ スプレッドシートのUI その④ JSON API（今ここ！） HtmlServiceでAPI作れちゃうとか書きましたが、思いっきり訂正させてください。筆者がGASでAPIを作るときによく使うのは、「ContentService」でした。申し訳ありません。タイトルもその④から思いっきり訂正しています。 ということで、気を取り直して、GASでJSONを返すAPIを作ってみたいと思います。 基本形 今までは、URLにアクセスがあった場合に、doGet関数の処理が起動し、HTMLをレスポンスとして返すということをしていました。 ここではURLにアクセスがあった場合にJSONをレスポンスで返すということをしてみたいと思います。 具体的には以下のよ
GoogleAppsScriptで簡単なWEBAPIを作る - Qiita
前置き GoogleAppsScriptなら、簡単に無料でWEBAPIを作ることができます。 今回は余計なことは言わず、WEBAPIを作る最速の方法をお伝えします。 手順 GoogleAppsScriptのエディターを開く ソースコードを貼り付ける 公開しておわり 以下から、それぞれ説明していきます。 GoogleAppsScriptのエディターを開く よくわかない人は下記の記事を追ってください。わかった人は次の章へ飛んでください。 GooglaAppsScriptの開発環境を用意する2つの方法 ソースコードを貼り付ける 今回はJSON及びJSONPでレスポンスを返します。 function doGet(e) { //アクセスが来たら実行します if(!e.parameter.action) { //actionが指定されてない場合 return createContent(e.param
GASでJSONを返すAPIを作る - Qiita
目的/ゴール GoogleAppsScriptを利用して、SpreadSheetのデータをJSONで返すAPIを作成する 背景 Django家計簿アプリの作成にトライ中。 今はGoogleSpreadSheetで家計簿をつけているので、そのデータをDjangoでも利用したいと考えている そこでSpreadSheetから現状のデータを取り出し、JSONで返してくれるAPIを作成したい。 GoogleAppsScriptで、単にreturn [json data]でいいのかと思ったらだめだった。どうやらContentServiceを利用する必要があるらしい なんとかAPI-Callに成功したのでとりあえずメモ function doGet(e) { // listデータをjsonに変換 payload = JSON.stringify(get_kakeibo()) // payloadをret
気象庁のデータをJSON化するAPIのようなものを作った - Qiita
追記 2020-09-13 追記：作り直しました。 新しい記事をご覧ください https://qiita.com/ryo-a/items/4468ffdbf251ec31dace 以下は古い記事です。 ryo-a と申します。 普段は大学生(B2)をやりつつ、ドワンゴの教育事業本部にてアルバイトとして N予備校プログラミング教材の編集をお手伝いしたり、ElectronというフレームワークのWebサイト/ドキュメント翻訳に参加したりしております。 ちょっと前までは C# で Windows 向けアプリケーションを書いていましたが、最近はもっぱら Node.js で遊んでいます。 こんなもの作りました http://jjwd.info/ JSONized Japanese Weather Data - Developer Friendly Open Data Optimization Proj
dayjournal | Node.js #011 – CSV形式からJSON形式に変換
Node.jsでCSV形式からJSON形式に変換したい場合は下記のように記述します。 まず、npmでcsvtojsonをインストールする必要があります。 npm install csvtojson script.js var fs = require('fs'); var Converter = require("csvtojson").Converter; var converter = new Converter({}); converter.on("end_parsed", function (jsonArray) { fs.writeFile('./sample.json', JSON.stringify(jsonArray, null, ' ')); console.log("JSON形式で出力されました"); }); require("fs").createReadStream
csvtojson
CSVTOJSON csvtojson module is a comprehensive nodejs csv parser to convert csv to json or column arrays. It can be used as node.js library / command line tool / or in browser. Below are some features: Strictly follow CSV definition RF4180 Work with millions of lines of CSV data Provide comprehensive parsing parameters Provide out of box CSV parsing tool for Command Line Blazing fast -- Focus on pe
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
csv json 変換 コマンド - Google 検索
GitHub - typicode/lowdb: Simple and fast JSON database
GitHub - typicode/json-server: Get a full fake REST API with zero coding in less than 30 seconds (seriously)
GitHub - zemirco/json2csv: Convert json to csv with column titles
Myjson - A simple json storage and hosting service
Google Apps Script で Spreadsheet のセルのデータ操作についての備忘録 - Qiita
GitHub - Keyang/node-csvtojson: Blazing fast and Comprehensive CSV Parser for Node.JS / Browser / Command Line.
