ワンライナーで CSV に対して SQLite クエリを実行する - アルパカの徒然文
One-liner for running queries against CSV files with SQLite という記事で紹介されていた、ワンライナーを使って CSV ファイルに対して SQL クエリを実行する方法。 $ sqlite3 :memory: -cmd '.mode csv' -cmd '.import taxi.csv taxi' \ 'SELECT passenger_count, COUNT(*), AVG(total_amount) FROM taxi GROUP BY passenger_count' ソース元に記述されてる通り、taxi.csv を GitHub からダウンロードして試すことができる。7z で圧縮されていて解凍する必要がある。 SQLite は通常ストレージディスク（SSD とか）上に保存して利用するのが一般的だが、SQLite 側で用意さ
SQLite3のCLIとSQLを使った、シェル上でのCSVファイル簡易データ解析手法 - MyEnigma
10年戦えるデータ分析入門 SQLを武器にデータ活用時代を生き抜く (Informatics ＆IDEA) 目次 目次 はじめに 事前セットアップ データ解析レシピ 5行表示する 表示する行を指定 htmlやjson, SQLとして出力 総行数を数える GROUP BYで同じデータの数を数えたり、平均を取る 複数列でのGroup byと統計計算 シェル関数を使って、コマンドの簡易化 参考資料 MyEnigma Supporters はじめに 手元に大きめのCSVファイルがあり、 そのデータを少し解析したい場合は、 Excelを使うか、PythonのPandasで解析することが多いのですが、 myenigma.hatenablog.com myenigma.hatenablog.com ちょっとSQLを使いたいなぐらいですと、 Excelだと結構たいへんですし、 Pandasだと少し面倒に感
CLI ツール開発を支える技術 2019春 / Techniques that support building CLI tools, 2019 Spring
talked on https://golangtokyo.connpass.com/event/129067/
Go標準のflagパッケージと比べてみようサードパーティflagライブラリ - Qiita
tl;dr GoでCLIのツールを作るとき、皆さんフラグをどう実装しますか？ 標準のflagパッケージでシンプルにしますか？ それともCLIコマンドライブラリで複雑でリッチなモダンコマンドにしますか？ 今回はいくつもあるCLIコマンドライブラリから、フラグを制御するライブラリに着目しようと思います。 まず手始めに標準のflagパッケージを見た上で、各ライブラリは何を解決したいのか。どのような方法で解決しようとしているのか。 この機会にちょっと眺めて遊んでみようと思います。 Go標準flagパッケージ Go製のCLIツールを見ていくと、どうもサードパーティライブラリを使っている方が多く印象を受けます。 このコマンド、中身どうなっているかな。 と見に行くと、ほとんどのツールは標準flagパッケージではなく、サードパーティライブラリをつかっています。 Go公式ツールや、古くに作られたツールなどは
mruby-cliを使用してmrubyでコマンドラインアプリケーションを書く -- ぺけみさお
mruby-cliの概要mruby-cliが提供するのはmruby-cliというコマンドだけです。 mruby-cliは--setupオプションで、mrubyでアプリケーションを開発するためのファイル郡を生成します。 ファイル郡には、 mruby本体アプリケーションのソースコードの雛形ビルド用のRakefileやdocker-compose.yml等が含まれます。 アプリケーションのビルドはdocker-composeコマンドで、クロスプラットフォーム向けのビルド環境が整ったDockerコンテナ内で行います。 デフォルトのターゲットプラットフォームはLinux, MacOS X, Windowsで、ビルド時には全プラットフォーム向けのバイナリがそれぞれ出力されます。 ビルドにはDockerを使用するため、mruby-cliを作者の想定どおり使用するには、DockerとDocker Comp
mruby-cli で ワンバイナリなツールを作ってみた - 🐾 Nekonote.
今回も長め。 メモツールの移行を思い立ったので、今までのデータを移すべくテキトーなツールをつくって見ました。 移行ツールと言いながらまだ 単一のMarkdownとBoostnote の相互変換くらいにしか対応していませんが、、、 github.com 前回のネタに続いてせっかくなのでGolangでなく、mruby-cli で作ってみました。 今回はその過程でやったことや作ってみて思ったこととかをつれつれなるままに書いてみようと思います。 dojineko.hateblo.jp やったこと mruby-cliでひな型を作る ガシガシ実装する 開発環境向けにコンパイルして、トライ＆エラー 目的の機能が完成するまで 2 と 3 を繰り返す 出来上がったら docker でクロスコンパイル Githubにreleaseを登録しておしまい TDDとかなにそれ美味しいのみたいな感じですが、まぁそれは置
【小ネタ】CloudWatch Logsの料金が高かったのでAWS CLIを使って調査した話 | DevelopersIO
西澤です。CloudWatch Logsは非常に便利で強力なサービスですが、ログ量が多くなる場合は課金に注意が必要です。今回AWS CLIで調査する機会があったので、その際の対応について簡単にまとめておきます。 CloudWatch Logsの料金(おさらい) 2020年2月時点での東京リージョンでのCloudWatch Logsの利用料金は以下のとおりです。 バージニアリージョンの料金が記載されているとの指摘を受けまして、下記料金を東京リージョンの最新の料金情報に合わせて訂正いたしました。大変申し訳ありません。 $0.76 : 取り込み GB あたり $0.033 : GB あたりのアーカイブ/月 料金 - AWS CloudWatch | AWS エクスポート時のデータ転送料金は置いておくと、"アーカイブ"の方はS3料金と大差がありませんが、問題となるのは"取り込みGBあたり"のところ
マークダウンベースのタスクランナー saku を作った話 - Qiita
tl;dr make をタスクランナーとして使うことに疲れた (.PHONY ってもう書きたくない) yaml ベースのタスクランナーは幾つかあったがしっくり来ない (go-task / robo) そもそもタスクの記述言語をマークダウンにした方が良いのでは? マークダウンベースのタスクランナーを作った! saku! (update: Go言語バージョンも作った!) モチベーション 自分は普段、趣味も仕事もほとんど JavaScript ばかり書いているため、タスクランナーとしては npm run-script を使っています。 run-script はタスクのドキュメントが書けないとか、タスクにコメントをつけれないとか(JSON の文法の制約上)、不満点は色々ありますが、npm-run-all などの支援ツールを利用することで、必要最低限のタスク定義は十分にできるツールと個人的には思って
コマンドラインがさらに便利になるfillinコマンドを作りました！ - プログラムモグモグ
fillinというコマンドラインツールを作成しました。 コマンドの一部を変数化して、別の履歴に保存しておけるツールです。 ステージング環境と本番環境のように、同じコマンドで複数の環境を切り替えるのに便利です。 zshの本 (エッセンシャルソフトウェアガイドブック) 作者:広瀬 雄二発売日: 2009/06/17メディア: 単行本（ソフトカバー） どうして作ったの コマンド履歴って便利ですよね。 私はよくコマンド履歴からコマンドを選んで実行しています。 シェルに付属しているデフォルトの履歴を使っている方もおられるでしょうし、fzfやpecoのようなインタラクティブな絞り込みを行なっている方もいるでしょう。 私が一番困っていたのが、認証キーの扱いです。 webアプリを作っていてcurlで素早く確認するときに、認証キーやアクセストークンを打つことがあります。 アクセストークンのようなランダムな英
【AWS】CLIの初期設定について（認証情報とコマンド補完） - TASK NOTES
AWS CLIをインストールした後の設定についてです。AWS CLIを使用してAPIを利用するためには、AWSから発行されたアクセスキー（アクセスキーID、シークレットアクセスキー）の設定が必要になります。でないとAWSにアクセスできませんからね。この認証情報の設定に関しては複数のパターンがありますので以下にまとめていきたいと思います。 また、シークレットアクセスキーはアクセスキーの作成時にしか確認・ダウンロードができませんので必ずCSVファイルをダウンロードしておきましょう。もし忘れてしまった場合はアクセスキーを再度作り直す必要があります。 設定コマンド(configure)を使う 次のコマンドを使用することで自動で認証情報と設定ファイルが作成されます。 $ aws configure コマンドを実行すると以下4項目が順番に表示されるので入力してください。 AWS Access Key
JSONをインタラクティブに掘り下げるコマンド jid - Qiita
はじめに 私はCLIを利用することが多いのもあり、 jq は今やJSONを利用する上は欠かせないツールとなっています。 ただ ・ jqのクエリを書くことなれるまで少し時間がかかる ・ クエリを書くことに慣れたとしても、初見だったりして 構造を把握していないJSONに関しては非常に手間 でみたいな感じだなと思っていました。 インタラクティブに jq のクエリを書いていければいいのに、と思ってツールを探しました(CLI限定で)が、あまり良さそうなものが見つかりませんでした。 そこで、Golangで何か作ってみたいのもあったので、作ったのが jid というツールです。 リポジトリ Github : simeji/jid インストール 以下からバイナリダウンロードしてzip解凍するだけです。 https://github.com/simeji/jid/releases Macの場合はbrewで入れ
MacでApp Store管理コマンドmasをtmuxで使う際の注意
B! 10 0 0 0 masはMacでApp Storeのアプリを コマンドラインからインストールすることが出来るコマンドです。 このコマンドをターミナルマルチプレクサのtmuxの中から 実行するとそのままでは正しく動かないので注意が必要です。 mas mas in tmux reattach-to-user-namespace Homebrew-fileのアップデート mas masについて詳しくはこちら。 mas-cli: MacでApp Storeのアプリをコマンドラインからインストールする Homebrewで $ brew install mas で入れられます。 $ mas list 495705418 Volume Reset 497799835 Xcode 430173763 Degrees 409183694 Keynote 408981434 iMovie 458998
dbxcli - Dropbox製のCLIクライアント
MOONGIFTはオープンソース・ソフトウェアを紹介するブログです。2021年07月16日で更新停止しました Dropboxは便利なのですが、ついついたくさんのファイルを入れてしまってローカルPCの容量が逼迫してしまうことがあります。その度にローカルファイルを消していたらDropboxの良さが感じられなくなってしまうかも知れません。 そこで使ってみたいのがdbxcliです。Dropbox製の、CLIで使えるDropboxクライアントです。 dbxcliの使い方 dbxcliでファイルの一覧を取得するにはlsサブコマンドを使います。 $ dbxcli ls .emacs.d .emacs.el .ssh Apple Apps DevRel : duを使うと使っている容量をチェックできます。 $ dbxcli du Used: 43 GB Type: individual Allocated:
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - awslabs/awscli-aliases: Repository for AWS CLI aliases.
We want AWESOME CLI tool & development
【 find 】コマンド（応用編その2）――検索したファイルを指定したフォーマットで表示する
Heroku CLI: Completing Autocomplete
GitHub - jorgebastida/awslogs: AWS CloudWatch logs for Humans™
GitHub - holman/spark: ▁▂▃▅▂▇ in your shell.
GitHub - dropbox/dbxcli: A command line client for Dropbox built using the Go SDK
