はてなブックマーク

これは、なにをしたくて書いたもの？ Flywayのマイグレーションをどう管理するのがいいのかなと悩んだことがあって、ちょっとまとめておこうかなと。 方針？ Gitを使い、ブランチで開発 → マージする、といったフローを組んでいるチーム開発を背景にしています。 こういう感じで考えました。 マイグレーションファイルのバージョンは日付をベースにする 環境ごとにディレクトリを分ける DDL（DCLも？）とデータ（DML）でディレクトリを分ける （気になるなら）Out Of Orderを許可する ちょっとずつ書いていきます。 引用しているFlywayのドキュメントは、Flyway 10.17.2時点の情報で参照しています。 マイグレーションファイルのバージョンは日付をベースにする Flywayのドキュメントで、マイグレーションのページを見るとバージョニングされたマイグレーションファイル名の例で最初に

これは、なにをしたくて書いたもの？ 以前、ローカルで動かせるOpenAI API互換のサーバーとしてllama-cpp-pythonを使ってみました。 llama-cpp-pythonで、OpenAI API互換のサーバーを試す - CLOVER🍀 他にも同様のことができるものとして、LocalAIというものがあることを知ったのでこちらを試してみようかなと。 LocalAI LocalAIのWebサイトはこちら。 LocalAI :: LocalAI documentation GitHubリポジトリーはこちらです。 GitHub - mudler/LocalAI: :robot: The free, Open Source OpenAI alternative. Self-hosted, community-driven and local-first. Drop-in replace

これは、なにをしたくて書いたもの？ Node.jsでソースコードを書く時は基本的にTypeScriptにしたいのですが、時々ちょっとしたスクリプトを書きたい時もあったりします。 そういう時は、ちゃんとした設定などは特に用意せず、さっと書いてそのまま実行したいのですが、そういう時はどういう手段が あるのかなと思って、調べてみることにしました。 やりたいこと TypeScriptファイルを実行時に直接トランスパイル、実行したいわけですね。 選択肢としては、ts-node、esbuild-register、tsxがあるようです。 今回はそれぞれをあまり深追いせず、さらっと見ていく感じにします。求めている用途がそういう傾向なので。 ただ、実行速度は気になるので、そこは動作時に合わせて見ていきたいと思います。 ts-node ts-nodeは、Node.jsのTypeScript実行エンジン、REP

これは、なにをしたくて書いたもの？ llama-cpp-pythonを使うとOpenAI API互換のサーバーを立てられることを知ったので、ちょっと動かしてみました。 llama-cpp-python llama-cpp-pythonのGitHubリポジトリーはこちら。 GitHub - abetlen/llama-cpp-python: Python bindings for llama.cpp ドキュメントはこちらです。 llama-cpp-python llama-cpp-pythonは、llama.cppのPythonバインディングです。 GitHub - ggerganov/llama.cpp: Port of Facebook's LLaMA model in C/C++ Llamaを使ったアクセスもできるのですが、 High-level API Python Bindings

お断り このエントリーはあるブログエントリーに触発されて書いたもので、特に技術的な内容を扱ったものではありません。 ブログというものについて自分が淡々と書いているだけのものであり、なにか持論を主張したいという類のものでもありません。 触発元に対する意見表明でもありません。 以降を読む場合は、そのうえで読んでもらえればと。 きっかけ このエントリーを書くことになったきっかけは、以下のブログエントリーです。 ベテランになるほどブログを書かなくなってくる - プログラマのはしくれダイアリー これを触発されたからといって、ベテランがブログを書くというお題に対してなにか言いたいような話ではないのですが、 ここ1年くらいブログというもの自体について思うこともあったのでいい機会だなと思って書いてみることにしました。 ちなみにこのエントリーを見た時から書こうと思っていたので、随分と寝かせていたことになりま

これは、なにをしたくて書いたもの？ ArchUnitというものを試してみたいな、ということで。 ArchUnit ArchUnitは、Javaソースコードのアーキテクチャーをチェックするためのユニットテストフレームワークです。 ArchUnit is a free, simple and extensible library for checking the architecture of your Java code using any plain Java unit test framework. Unit test your Java architecture - ArchUnit ArchUnitを使うことで、パッケージやクラス、レイヤーやスライスの依存関係、循環参照などをチェックできます。 That is, ArchUnit can check dependencies betw

REST APIについて考える時に見ているのですが、いざ見ようとした時に「どれだったっけ？」となるのでメモ。 RFC 9205 Building Protocols with HTTP RFC 9205 - Building Protocols with HTTP 日本語訳） RFC 9205 - Building Protocols with HTTP (RFC 9205) 日本語訳 Standards.REST Standards.REST Zalando RESTful API and Event Guidelines Zalando RESTful API and Event Guidelines 日本語訳） Zalando RESTful API と イベントスキーマのガイドライン Google Cloud API設計ガイド API design guide  |  Cloud

これは、なにをしたくて書いたもの？ Ubuntu Linux 20.04 LTSからUbuntu Linux 22.04 LTSへ環境を移していて、pythonコマンドの扱いにちょっと困ったのでメモ。 環境 今回の環境はこちら。Ubuntu Linux 22.04 LTSです。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 22.04.2 LTS Release: 22.04 Codename: jammy $ uname -srvmpio Linux 5.15.0-60-generic #66-Ubuntu SMP Fri Jan 20 14:29:49 UTC 2023 x86_64 x86_64 x86_64 GNU/Linux 起こったこと 自分で作

これは、なにをしたくて書いたもの？ 現在認識しているaptリポジトリーや、特定のリポジトリーに含まれているパッケージを把握するにはどうしたらいいのかな？ということで、 ちょっと調べてみました。 環境 確認環境は、こちらです。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 20.04.4 LTS Release: 20.04 Codename: focal $ uname -srvmpio Linux 5.4.0-124-generic #140-Ubuntu SMP Thu Aug 4 02:23:37 UTC 2022 x86_64 x86_64 x86_64 GNU/Linux $ apt --version apt 2.0.9 (amd64) 現在認識

これは、なにをしたくて書いたもの？ 現在のシェルがSSHでリモートログインして起動したものかどうか、判定する方法はないのかな？と思って調べてみたのですが。 SSH_CONNECTIONという環境変数が設定されているかを見ればよいみたいです。 SSH_CONNECTION環境変数 sshコマンドのmanページに記載がありました。 SSH_CONNECTION環境変数には、クライアントとサーバーを識別する値が格納されます。具体的にはクライアントのIPアドレス、 ポート、サーバーのIPアドレス、ポートです。 SSH_CONNECTION Identifies the client and server ends of the connection. The variable contains four space-separated values: client IP address, clie

これは、なにをしたくて書いたもの？ Ubuntu Linux 18.04 LTSにインストールしているDocker CEがapt upgradeでアップデートされないという状態になっていたので、 これをどうやってアップデートしたらよいのだろう？と。 結論から言うと、明示的にapt installすればよいみたいです。 $ sudo apt install [対象のパッケージ] 環境 今回の環境は、こちら。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 18.04.5 LTS Release: 18.04 Codename: bionic $ uname -srvmpio Linux 4.18.0-25-generic #26~18.04.1-Ubuntu S

これは、なにをしたくて書いたもの？ Docker Desktopには、host.docker.internalというホスト側のIPアドレスを参照する仕組みがあるようです。 Networking features in Docker Desktop for Windows / Features / Use cases and workarounds / I want to connect from a container to a service on the host Docker Desktopを使っていないので全然知らなかったのですが、Docker Engine（使っているのはLinux版）でもひと手間加えると使えるようなので、 ちょっと試してみることにしました。 コンテナからホスト側のを参照できるhost.docker.internal Windows版のhost.docker.in

これは、なにをしたくて書いたもの？ Node.jsでモジュールをインストールするコマンドとしてnpm install（エイリアスnpm i、npm add）があるわけですが、 npm ciがどういうものだったかよく忘れるのでメモしておきます。 ちょっとドキュメントを眺めてみましょう。 環境 今回の環境は、こちら。 $ node --version v16.13.1 $ npm --version 8.1.2 というわけで、npm v8のドキュメントを見ていきます。 npm ci npm ciのドキュメントはこちら。 npm-ci | npm Docs npm ciは、npm installに似たコマンドです。CI環境やテスト環境での利用、依存関係のクリーンインストールを行う場合に 使用します。 特徴は、以下です。 プロジェクトはpackage-lock.jsonはnpm-shrinkwra

これは、なにをしたくて書いたもの？ JibのFAQを見ていて、こんな1文があることに気づきまして。 For Java 9+, often you may want to use JDK_JAVA_OPTIONS instead of JAVA_TOOL_OPTIONS. 環境変数JAVA_TOOL_OPTIONSは知っていて、過去にエントリーも書いたことがあるのですが。 環境変数JAVA_TOOL_OPTIONSで、Java VM引数を指定する（-XX:VMOptionsFileも加えて） - CLOVER🍀 JDK_JAVA_OPTIONSは知りませんでしたね。Java 9以降で使えるようです。 確かにJava 8ではドキュメントに書かれていませんが、 java (8) Java 9で現れます。 java (9) JDK_JAVA_OPTIONS環境変数 JDK_JAVA_OPTION

これは、なにをしたくて書いたもの？ Dockerコンテナ内で、たまに名前解決できなくて困ることがあります。 それを、Dockerイメージをビルドする時に同じようにハマったら、どうしましょうか？という話。 環境 今回の環境は、こちら。Ubuntu Linux 18.04 LTS。 $ uname -srvmpio Linux 4.18.0-25-generic #26~18.04.1-Ubuntu SMP Thu Jun 27 07:28:31 UTC 2019 x86_64 x86_64 x86_64 GNU/Linux $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 18.04.4 LTS Release: 18.04 Codename: bionic $

これは、なにをしたくて書いたもの？ Spring BatchとBean Validationを組み合わせて、Itemのバリデーションをしたり、NGになったItemをスキップできたりするというので ちょっと試してみようかなと。 Spring BatchとBean Validation Spring BatchでBean Validationが使えることはドキュメントに書かれているわけですが、ItemProcessorの用途のひとつとして登場します。 Item processing / Validating Input BeanValidatingItemProcessorというItemProcessorが提供されているので、こちらを使って実現するようですね。 BeanValidatingItemProcessor (Spring Batch 4.3.5 API) Springのバリデーション

これは、なにをしたくて書いたもの？ Terragruntを学ぶシリーズ。 今回は、Terragruntを使って環境ごとに作るTerraformの構成ファイルを減らしてみます。 Terragruntで、環境ごとの構成ファイルを減らす Terraformを使って、複数の環境を構築、管理するのにはいくつかの方法があります。 Terraform自身が提供するのは、Workspaceですね。 State: Workspaces - Terraform by HashiCorp WorkspaceはStateを切り替えることができるもので、こちらとVariablesなどで環境差異を表現することになります。 他には、割り切って環境ごとにTerraform構成ファイルを独立して管理する方法もあります。この方法だと、ファイルのコピーが増えることに なりますね。 ちょうど、今回使うTerragruntのドキュ

これは、なにをしたくて書いたもの？ 現在のJavaは、コンテナ環境下ではホスト側ではなくコンテナにリソース制限がかけられていればそちらの値を見るように なっています。 これはどこの値を見ているのかな？というのを確認してみたくなりまして。 なお、自分にはcgroupに関する知識はほぼありません。あくまで、Javaがどこの情報を見ているか？という観点で 追っています。 JDK-8146115 Javaも以前はホスト側のCPU数やメモリサイズを参照していたのですが、JDK-8146115（およびそのバックポート）が 入ってからはコンテナに割り当てられたCPU数やメモリサイズを見るようになりました。 https://bugs.openjdk.java.net/browse/JDK-8146115 Java 10以降、Java 8については8u191以降で対応しています。 デフォルトでこの機能は有効

これは、なにをしたくて書いたもの？ たまに、Ubuntu Linux／Debianを使っている時のソフトウェアのインストール前提条件としてこういう記述を見ることがあり $ sudo apt install build-essential 「開発パッケージ一式」みたいなざっくりしたイメージでずっと捉えていたのですが、1度ちゃんと見てみようかなと 思いまして。 build-essentialとはなんなのか？という話です。 環境 今回の確認環境は、こちらです。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 20.04.1 LTS Release: 20.04 Codename: focal $ uname -srvmpio Linux 5.4.0-54-gener

これは、なにをしたくて書いたもの？ こちらのエントリを書いていて、「JavaでAESを使う時のコードを全然覚えてないな」と思いまして。 MessageDigestに"SHA"とか、Cipherに"AES"とだけ指定した場合、どうなるの？ - CLOVER🍀 メモしておこうかな、と。 環境 今回の環境は、こちらです。 $ java --version openjdk 11.0.9.1 2020-11-04 OpenJDK Runtime Environment (build 11.0.9.1+1-Ubuntu-0ubuntu1.20.04) OpenJDK 64-Bit Server VM (build 11.0.9.1+1-Ubuntu-0ubuntu1.20.04, mixed mode, sharing) $ mvn --version Apache Maven 3.6.3 (cec

これは、なにをしたくて書いたもの？ AWS Lambdaを動かすのに、以前LocalStackを使ってNode.jsで作成した関数を動かしてみました。 LocalStackを使って、AWS Lambdaを試してみる - CLOVER🍀 今回は、ちょっとPythonで作成してみたいと思います。 お題 お題も前のエントリと似たようなもので、ペイロードで与えられたパラメーターを含めて、メッセージを返却する関数を作成します。 pipでインストールするパッケージも利用します。 環境 LocalStackは、Docker Composeで起動。LocalStackは、「192.168.0.3」というホストで動作しているものとします。 docker-compose.yml version: "3" services: localstack: image: localstack/localstack:0

これは、なにをしたくて書いたもの？ Linuxで、メモリの断片化に関する情報が見れるようなので、少し調べてみました。 情報は、このあたりをベースにしています。 The /proc Filesystem — The Linux Kernel documentation proc(5) - Linux manual page Ubuntu Manpage: proc - プロセスの情報を含む擬似ファイルシステム ちなみに、今回は断片化の様子を確認したという話ではなく、あくまで情報の取得方法を見ているだけです。 環境 今回の確認環境は、こちら。Ubuntu Linux 20.04 LTSです。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu 20.04.3 LTS

これは、なにをしたくて書いたもの？ socatを使って、プロキシサーバーが立てられそうだったので、試してみようかなと。 socatとは socatとは、2つのストリーム間のデータ転送を行うコマンドラインツールです。 ストリームとしては、TCP、UDP、UNIXドメインソケット、ファイル、コマンドラインツールを扱ったりできます。SSL／TLSも扱えます。 環境 今回の環境は、こちらです。Ubuntu Linux 18.04 LTS。 $ uname -srvmpio Linux 4.15.0-96-generic #97-Ubuntu SMP Wed Apr 1 03:25:46 UTC 2020 x86_64 x86_64 x86_64 GNU/Linux $ lsb_release -a No LSB modules are available. Distributor ID: Ubun

これは、なにをしたくて書いたもの？ Linuxにおけるリソース制御といえば、ulimitです。 limits.conf(5) - Linux manual page /etc/security/limits.confファイルや/etc/security/limits.dディレクトリ内に[任意の名前].confファイルを作成して nofileなどの値を設定すればOKです。 ですが、systemd制御下で動作するプロセスはこの事情が違います。前々からなんとなく知ってはいましたが、 自分で設定したことがなかったので試しておくことにしました。 環境 今回の環境は、こちら。Ubuntu Linux 20.04 LTSです。 $ lsb_release -a No LSB modules are available. Distributor ID: Ubuntu Description: Ubuntu

これは、なにをしたくて書いたもの？ LocalStackに保存したデータは、LocalStackを停止すると失われるようなので、永続化する方法はないのかな？ということで。 DATA_DIR環境変数を使えば良いみたいです。 環境 今回の環境は、こちら。 $ pip3 install localstack==0.12.17.5 $ localstack --version 0.12.17.5 LocalStackに保存するデータを永続化する LocalStackに保存するデータを永続化するには、DATA_DIRを指定してLocalStackを起動します。 Dockerで起動する場合。 $ DATA_DIR=`pwd`/data localstack start ホスト側で通常のプロセスとして起動する場合。 $ DATA_DIR=`pwd`/data localstack start --hos

これは、なにをしたくて書いたもの？ これまで、Node.jsのインストールにはずっとnodebrewを使っていました。 Node.jsを管理したくて、nodebrewをインストールする - CLOVER🍀 GitHub - hokaccha/nodebrew: Node.js version manager 開発が止まっていることはなんとなく知っていましたが、それでも特に困ることはなかったのですが。 そろそろ他のものに乗り換えておこうかな、と思いまして。 nodebrewを選んだ時にも見ていたのですが、今ならnvmなんでしょうね。 GitHub - nvm-sh/nvm: Node Version Manager - POSIX-compliant bash script to manage multiple active node.js versions というわけで、今回はnvmをイ

これは、なにをしたくて書いたもの？ Quarkusのドキュメントを見ていて、コンテナイメージを作成するExtensionができていることに気づいたので。 Quarkus - Container Images ちょっと試してみようかなと。 Quarkus Container Images extension Quarkus 1.3.0.Finalで、Jib、Docker、S2Iを使ってコンテナイメージを作成するExtensionが追加されたようです。 Quarkus - Quarkus 1.3.0.Final released - New class loader infrastructure, GraalVM 20 support and much much more ドキュメントはこちら。 Quarkus - Container Images 最初に書きましたが、Jib、Docker、S