バージョニングが有効化された 大量のAmazon S3 バケットをシェルスクリプトで一撃削除してみた（ver.2） | DevelopersIO
大量のS3バケットを手動で削除するのはめんどくさい…シェルスクリプトで一撃削除しましょう。S3のオプジェクトが1000を超える場合に使えるシェルスクリプトです。 こんにちは！AWS事業本部のおつまみです！ S3バケットを一撃で削除したいなぁと思ったことはありますか？私はあります。 そう思い昨日こちらのブログを執筆しました。 このブログのスクリプトでも問題なく動くのですが、とある方からTwitterでこちらのコメントをいただきました。 #DevelopersIO バージョニングが有効化された 大量のAmazon S3 バケットをシェルスクリプトで一撃削除してみた https://t.co/esjLT5Nq32 こんだけ呼び出してAPIのレート制限は大丈夫かな。? — Kento.Yamada (@ymd65536) April 14, 2023 そしてアドバイスをいただきスクリプトを修正した
Tips: 実行中のシェルスクリプトを書きかえるときには - Qiita
実行中のシェルスクリプトを編集すると実行している途中から動作を変えることができることはよく知られている。 例: http://d.hatena.ne.jp/sleepy_yoshi/20090917/p1 「変えることができる」というよりも現実のケースでは、実行中に意図せず内容を変えてしまうことで予想しない挙動をさせてしまうことがありうる。これを防ぐにはどうするか。 例 次のようなスクリプトを実行中に書き換えてみる
シェルスクリプトは文字通りの逐次実行 - シリコンの谷のゾンビ
知り合いに気になったことを指摘された． 「シェルスクリプトは実行中にスクリプトを変更すると，変更されたスクリプト通りに動く」というものである． んなことあるかい，スクリプトは実行時にメモリに読み込まれるんでい！と思い込んでいたので，早速調べてみた． 同時作業をするので複数端末を立ち上げるか，screenを使うか，emacsのshellモードを使う． 以下のようなスクリプトを書く． # test.sh echo "start" sleep 5 echo "1" sleep 5 echo "2" sleep 5 echo "3" sleep 5 echo "4" echo "done" 実行する． % sh test.sh startすかさず上記コードの最後の行をコメントアウト # test.sh echo "start" sleep 5 echo "1" sleep 5 echo "2" s
シェルの入出力制御あれこれ
シェルスクリプトはあまり触らないから忘れちゃうのでメモっとく。 主にパイプとかリダイレクトとかプロセス置換とか。 パイプ コマンドの出力を別のコマンドの入力にする
curl+xpath から始めるお手軽スクレイピング（２） - それマグで！
この記事は前回の続きです。 curl とxpath でお手軽スクレイピング 前回までで、xpath + curl + cookie を使いました。 xpath はとても便利なので、基本的な使い方を再掲しておきます。（以前にまとめたもののですが） xpath 内容 //* 全てのノード //a 全ての<a> ノード (//a)[1] 全ての<a> ノードを取得して、最初の１個 (//a)[2] 全ての<a> ノードを取得して、２番め（配列アクセス） (//a[1]) 親ノード中の最初の１個の<a>をすべて //a/span span ノードで、親が<a>のものをすべて //a/@href aノードのすべてのhref属性 //a/text() aノードのすべてのtext()表現 //a[@href="/index.html"] aノードのうち href属性が"/index.html"と合致する
Jenkinsのシェルの実行について - Qiita
で実行される(コンソール出力にも出てる) オプション-x：シェルスクリプト内で実際に実行されたコマンドを表示する オプション-e：0でない終了コードを返した時点でスクリプトがexitする 「シェルの実行」のシェルのオプションのカスタマイズについて 「シェルの実行」で先頭に以下のように記述しておくとオプションを付けない状態で実行出来る
シェルスクリプト内のエラーで実行を停止する「-e」と、実行コマンドを出力する「-x」オプションを使ったシェルスクリプトの開発 - このすみノート
「ソフトウェアデザイン2020年1月号」を読んでいるのですが、その中に次の一節がありました。 GitLab のCI に関する部分は.gitlab-ci.yml に書き、単独でも実行できる内容はシェルにまとめて、scriptで呼び出すのがお勧めです。 そうすると、.gitlab-ci.ymlに必要な事項だけがまとまって見やすくなるはずです。 しかし、シェルスクリプトにまとめてしまうと実行経過が見えなくなったりするので、シェルスクリプト内で実行過程を標準出力に出力するか、シェルスクリプトのshebang注C に「set -x」または 「set -xe」を付けることをお勧めします。 ソフトウェアデザイン 2020年1月号 より GitLab特集の記事ですが、CI上で実行するシェルスクリプトには、「set -x」または「set -xe」を付けようという内容です。 なぜ「set -x」または「set
curl と cron でHTTPレスポンスを監視するシェルスクリプト (結果をSlack に飛ばす) - Qiita
2018.11.30 : スクリプトが要件どおり動かない箇所があったので修正 目標 インターネットに出られるけれど、インターネットから入ってこれないサーバの死活監視を、お気軽にしたい。 知識材料 curl - How To Use 対象URLを検証 HTTP レスポンス状態コード - HTTP | MDN サーバが返送する状態コード Man page of CRONTAB スクリプトの定時実行 今回のゴール 監視対象URLに対して、下記の要件で監視できるシェルスクリプトを作成 HTTP 200 OK 以外を返した時、エラー通知する １日一回、監視していることを通知するために HTTP 200 OK を返した時も通知する (おまけ：通知先は Slack) 実践 監視シェルスクリプト 書式 check_http.sh [-f] target_url オプション -f target_url から
ShellScriptのダブルクォートとシングルクォートの違い - Qiita
Shell Script Advent Calendar 2015 3日目の記事です。 この記事では自分が最近はまったシェルスクリプトの初歩の初歩、シングルクォート(')とダブルクォート(")の違いを紹介できればと思います。 C言語とかを書いてたら、シングルクォート(')とダブルクォート(")は違うのは当たり前なわけですが、最近JavaScriptやPythonばかり書いてたので、当然(')と(")は同じものだと脳みそが思い込んでてはまってしまいました。 ShellScriptでのクォートの基本の使い方 とある"Program Files"というセンスのない名前のフォルダがあったときに、
初心者向け、「上手い」シェルスクリプトの書き方メモ - Qiita
ここ最近、沢山シェルスクリプトを書くようになりました。 元々あまりシェルスクリプトを書いたこと無かったので、色々と勉強しつつ書いてるのですが、 他のプログラミング言語とはちょっと違って独特なクセというか、発見の度におぉー！ってなることが沢山あって楽しいです。 そんなわけで、最近学んだり参考にした中で特に感動したシェルの上手い書き方をまとめてみます。 きっとまだ知らないこととかもっと上手くやる方法なんかが沢山見つかりそうなので、 もっといいやり方あるよ！って方はコメントください 何もしない : (コロン)コマンド シェルを書いていた時に非常に欲しかったコマンドがこれ！何もしない！ : というコマンド(？)を利用すると、何もせずに終了ステータス0(つまり正常終了)を返します。 これが様々な事に使える万能コマンドで、これによって面倒なエラー処理を簡潔にできたり、 入力や出力のリダイレクト元/先と
[Bash] ファイルやディレクトリの存在をチェックする方法
Bashで、ファイルやディレクトリの存在を確認する方法を紹介します。 if testによる確認方法 ファイルやディレクトリの存在を確認するには、以下の構文を使います。 if [ -e パス ]; then # 存在する場合 else # 存在しない場合 fi 「パス」の部分に、チェックしたいファイルやディレクトリのパスを指定します。 (実際は、testコマンドを実行することになります。) ファイルtest.txtと、ディレクトリtestdirを用意した状態で、サンプルcheck.shを実行してみます。 test-check-file$ ls check.sh test.txt testdir check.shの内容は以下のとおりです。 #!/bin/bash file=test.txt dir=testdir # test.txtが存在するかチェック if [ -e $file ]; th
引数を処理する | UNIX & Linux コマンド・シェルスクリプト リファレンス
引数を処理する 引数とは？ 引数 (ひきすう) とはコマンド (シェルスクリプト) 実行時に、コマンドラインから渡される値のことである。 引数は実行時にプログラム内で参照され、シェルスクリプトの実行結果 (動作) に影響を与える。引数はパラメータと呼ばれることもある。 → コマンド名に続けて引数としてコマンドに渡したい値のリストを指定する。 引数はコマンド名に続けてスペース区切りで指定する。引数として指定可能な値の数は各コマンドにより異なる。 【参考】 引数とオプション コマンド実行時に指定する値には引数とオプションがある。引数は実行に使用されるファイル名や出力されるメッセージなどを指定するのに使用される。 一方、オプションは -f などのように - (ハイフン) とアルファベット1文字で表記され、主にコマンドの振る舞い方を指定する目的で使用されるものである。 また、オプションは -a -
祝日をWebAPIから取得するシェルスクリプト - Qiita
平日・休日ログを自動的に仕分けしたい ある仕事で、土日祝日のログを自動的に休日扱いしたいという要望があった。 土日だったらすぐにわかるけど、祝日ってどうすりゃいいのよ。 月日固定の日付や振替休日はいいとして、春分の日と秋分の日は調べようがないでしょ。 (註:春分と秋分は、毎年天文観測によって二年後の月日が決められます) 休日設定ファイルでも作って毎年打ち込んでもらうしか……、と思っていたら Google先生が囁いた。 Google Calendar APIを使いなさい。 Google先生への質問状 というわけで、さらに詳しくGoogle先生に聞きつつ、ささーっと作ったのが下のシェルスクリプト。 #! /bin/sh # このURLは # Googleカレンダーの「カレンダー設定」→「日本の祝日」→「ICAL」から取得可能 # (2017/01/12現在) url='https://cale
SQL用のテストデータをシェルスクリプトで作成 | DevelopersIO
はじめに 簡単なテストをする際にはテストデータを作る事がありますが、毎回面倒だなと思っていたので、シェルスクリプトで簡単に作れないか調べてまたので備忘録として書いておきます。 環境 Mac OSX 10.10.5 Yosemite シェルスクリプト： create_tsv.sh #!bin/bash ## 開始時間を標準出力（%sで秒数。%Sとは違う） start=`gdate +%s` ## 作成する行数 ROWS=$1 ## 作成するファイルパス FILEPATH=$2 # ファイル作成 > $FILEPATH # ユニークなランダム文字列を作成 -> 配列にする array=(`cat /dev/urandom | LC_CTYPE=C tr -dc 'a-zA-Z0-9' | fold -w 16 | head -n \`expr $(expr $ROWS + 1) + 1\` |
gnuplotで日付・時刻の書かれた時系列データを二軸でグラフ描画し保存するシェルスクリプト - 或る阿呆の記
なんだかんだでgnuplot 大学時代から、ずっとgnuplotを使っています。最近はようやくPythonやJavaScriptでもグラフを描くようになり、簡単なコマンドで高機能なライブラリを使うことが出来る素晴らしさに喜び半分打ちひしがれるような気持ち半分といったところでしたが、相変わらず一番愛用しているのはgnuplotです。 gnuplotのコマンド体系はお世辞にもわかりやすいとは言えず、最初はグラフを描いたり、csvデータを読み込むんだりするだけでも一苦労です。そしてハマるのがグラフのファイル保存。これがなかなか難しく、色々なサイトを参考にするのですが、書いてあるコマンドがまた微妙に違ったりもするものですから、覚えるのに苦労した記憶があります。 しかし人間なんでも慣れるもので、奇っ怪に見えたコマンドも今はそれなりに馴染みました。馴染めば、便利なものです。たいていのUnix系システム
初めてシェルスクリプトを書くときに知っておきたいこと - Unix的なアレ
他の言語をを書き慣れてから、シェルスクリプトを書こうとするとしょうもない部分でハマったりすることがあります。「簡単な処理だからシェルスクリプトで書くか」と思っても無駄に時間がかかってしまっては仕方ないですよね。 今回は初めてシェルスクリプトを書くときに、ハマりそうな点について説明をしたいと思います。 実行権限をつける 単純にファイルを生成しても下記の用に実行しようとしても実行はできません。 # touch test # ./test sh: ./test: Permission denied # touch foo # ./foo sh: ./foo: Permission denied これはファイルに実行権限がついていないため、起きる現象です。 chmodコマンドを使って実行権限をつけてやりましょう。 # chmod +x test # ./test # chmod +x foo #
シェルやシェルスクリプトで乱数を使う2つの方法
The main aim is to document the hurdles that most of us face as UNIX/Linux/BSD sys admin in our day today life. シェルまたはシェルスクリプトで乱数を使いたいと思うことが時々ある。コマンドをまとめていくという軽い利用を越えて、プログラミング的な要素が強くなってくる場合にはそうした要求がでてくる。しかしシェルスクリプトは一般的なプログラミング言語ではないため、乱数を生成するような関数は提供されていない。 シェルやシェルスクリプトで乱数を使う方法はいくつかあるが、Bash Shell Generate Random Numbers - nixCraftにおいて紹介されている2つの方法が、ひとつは簡単な方法、もうひとつはシェルに左右されにくい互換性の高い方法として興味深い。紹介されている
手軽な設置の多種・多点の屋外Web計測システム提供 » Blog Archive » bash ファイルが規定個数以上を削除
あるディレクトリ無いのファイル数が規定を超えたら自動的に 削除する。 考え方： ls -l abc* | wc -l で行数を調べその行数が 規定を超えているか調べる。 if [ $cnt -gt $mx ]; then ls -tr | head -$(($cnt-$mx)) | xargs rm -tr 作成時間の古い順 $(($cnt-$mx))は多い行数 xargs は、その結果で次の rm コマンドを実行 実際のプログラムサンプルは以下を見る #!/bin/bash # # -- remove over preset cont files # mx : max count file # dr : directory to check # fn : file to find # mx=6 dr="tmp" fn="a*" # cd $dr cnt=`ls $fn | w
【FreeBSD】シェルスクリプトでパス文字列からファイル名／ディレクトリ名／拡張子を抽出する
対象プラットフォーム： FreeBSD 8.x （下記手順を2014/05/01にFreeBSD 8.4-RELEASEで確認済み） はじめに シェルスクリプトを書いていると、ファイル名を含むパス文字列から、ファイル名や、ディレクトリ名、拡張子の部分のみを抽出したいケースによく遭遇します。 このページでは、これらの文字列の抽出方法について説明します。 早速サンプルのシェルスクリプト ファイル名を含むパス文字列から、ファイル名や、ディレクトリ名、拡張子の部分のみを抽出するのは、かなり容易です。 早速サンプルをご紹介します。 #!/bin/sh test_path="/usr/local/etc/apache/httpd.conf" string_filename=${test_path##*/} string_filename_without_extension=${string_filen
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ディレクトリのパスの最後に/を付けてはいけない