Amazon Aurora PostgreSQL 互換エディションは、PostgreSQL メジャーバージョン 13 をサポートするようになりました。PostgreSQL 13 には、B 木インデックスエントリの重複排除、パーティションテーブルを使用するクエリのパフォーマンスの向上、データソートを高速化する増分ソート、VACUUM コマンドによるインデックスの並列処理、PostgreSQL データベース内のアクティビティをモニタリングする方法の追加、新しいセキュリティ機能などの新しい機能や拡張機能による、改善された機能とパフォーマンスが含まれています。このリリースでは、bool_plperl のサポートも追加されています。これにより、Perl プロシージャの記述が簡素化されます。 Aurora PostgreSQL 互換エディション 上の PostgreSQL 13 を使用すると、DevO

時系列データが使われる範囲は広く、医療データ、金融分析、経済予測、天気予報など、さまざまな分野で使われています。本書は時系列データを通してデータ解析手法を学んでゆくアプローチで、データのクリーニング、プロットの方法、入出力など基本的なトピックについてひととおりカバーしてから、さまざまな分野の事例を数多く取り上げ、統計的手法と機械学習手法の両方を時系列データに適用し、また人気のオープンソースツールも積極的に取り入れた手法を紹介します。プログラムにはRとPythonの両方を利用。データセットやコードはGitHubからダウンロード可能です。 はじめに 1章　時系列の概論と簡単な歴史 1.1　時系列の多様な用途の歴史 1.1.1　時系列問題としての医学 1.1.2　気象予測 1.1.3　経済成長の予測 1.1.4　天文学 1.2　時系列解析の人気に火がつく 1.3　統計的時系列解析の起源 1.4　

www.docker.com Docker Desktopがここ最近活発に開発されているというか、かなり見た目がオシャレになってきてて「ヤル気あるな〜」と思って眺めていたのですが、なるほど有料化するということなのですね。 Docker Desktop remains free for personal use, education, non-commercial open source projects, and small businesses (fewer than 250 employees AND less than $10M USD in annual revenue). Commercial use of Docker Desktop in larger enterprises (more than 250 employees OR more than $10 million

AWS Security Blog Authenticate AWS Client VPN users with AWS IAM Identity Center September 12, 2022: This blog post has been updated to reflect the new name of AWS Single Sign-On (SSO) – AWS IAM Identity Center. Read more about the name change here. AWS Client VPN is a managed client-based VPN service that enables users to use an OpenVPN-based client to securely access their resources in Amazon We

株式会社ラクーンホールディングスのエンジニア/デザイナーから技術情報をはじめ、世の中のためになることや社内のことなどを発信してます。 bashパフォーマンスMySQLInnoDBDB設計インデックス こんにちは、羽山です。 今回は MySQL のプライマリキーに UUID を採用する場合に起きるパフォーマンスの問題を仕組みから解説します。 MySQL(InnoDB) & UUID のパフォーマンスについては各所でさんざん議論・検証されていますが、論理的に解説した記事が少なかったり一部には誤解を招くようなものもあるため、しっかりと理由から理解するための情報として役立つことができればと思っています。 UUID と比較される古き良き昇順/降順のプライマリキーはというと、 MySQL の InnoDB において良いパフォーマンスを出すために縁の下の力持ちのような働きをしてくれているケースが実は少な

Amazon Web Services ブログ Amazon S3 Storage Lensを使ってストレージコストを下げる5つの方法 このブログはMark Kalus (Principal Product Manager with Amazon S3)とLee Kear(Storage Specialist Solutions Architect specializing in S3)によって執筆された内容を⽇本語化したものです。原⽂はこちらを参照して下さい。 Amazon S3のバケット数が増え、数十から数百のアカウントにまたがっている場合、増大するストレージの管理とコスト効率の改善ができるツールをお探しではないでしょうか。S3 Storage Lensは、S3コンソールに組み込まれた分析機能で、オブジェクトストレージの使用状況やアクティビティの傾向を組織全体で可視化し、コスト削減の機

CloudFrontで素早くコンテンツを更新させたい場合にTTLを短くしInvalidationを行わないキャッシュ戦略を考える CloudFrontで頻繁に更新されるコンテンツではないため長くキャッシュさせておきたいが、更新があった場合はすぐに反映させたい、というケースではTTLを短くしておきましょう。オリジンからのデータ本体の転送は更新の際にしか実施されません。 はじめに 清水です。AWSのCDNサービスであるAmazno CloudFrontを利用する場合に、頻繁に更新されるファイルではないため、なるべく長くCloudFrontにキャッシュさせオリジンへのアクセスやデータ転送の負荷などは極力少なくしたい。けれどオリジン側でファイルの更新があった場合は、なるべく早くCloudFront側でもキャッシュの反映を行いたい、といったことがあります。 このようなケースで1つ考えられる方法は、C

# !wget https://dl.fbaipublicfiles.com/fasttext/vectors-crawl/cc.ja.300.vec.gzで落とせます model = gensim.models.KeyedVectors.load_word2vec_format('cc.ja.300.vec.gz', binary=False) repat = re.compile(r'^[あ-ん\u30A1-\u30F4\u4E00-\u9FD0]+$') vocab_list = [w for w in list(model.vocab.keys())[10000:50000] if len(w) > 2 and repat.fullmatch(w) and w[-1] != 'っ' and w not in list(ww_df.word) and w not in list(sw

Amazon Web Services ブログ Amazon MemoryDB for Redis の紹介 – Redis 互換で耐久性に優れたインメモリデータベースサービス インタラクティブなアプリケーションは、リクエストを処理して迅速に対応する必要があり、この要件はアーキテクチャのすべてのコンポーネントにまで及んでいます。マイクロサービスを採用し、アーキテクチャが相互に通信する多数の小さな独立したサービスで構成されている場合、これはさらに重要です。 このため、データベースのパフォーマンスは、アプリケーションの成功に不可欠です。読み取りレイテンシーをマイクロ秒に減らすために、耐久性のあるデータベースの前にインメモリキャッシュを配置できます。キャッシュのために、多くの開発者はオープンソースのインメモリデータ構造ストアである Redis を使用しています。実際、 Stack Overflow

Amazon Relational Database Service (Amazon RDS) は、PostgreSQL パラメータグループでのブール型 DB パラメータ式のサポートを開始しました。これにより、データベース管理者はより多くのデータベース設定をより少ないパラメータグループを用いて最適化できるようになります。 Amazon RDS で、パラメータグループを使用してデータベース設定をテンプレート化します。多くのお客様は、ユースケースによく合うように、デフォルトの Amazon RDS パラメータグループを変更することを選択します。ブール型 DB パラメータ式を用いると、データベース (DB) インスタンスのプロパティに基づいて、条件付きデプロイ設定を追加できます。PostgreSQL ログ先行書き込み (WAL) の圧縮は、CPU ロードの増加と引き換えに IO ロードを減少させ

Apple M1チップを搭載するMacBook Airに1920x1200の疑似解像度を設定する手順をまとめてみました。macOS Big Surとなったこともありますが、M1チップの搭載により設定箇所などが大きく変わっているようです。 はじめに 清水です。先日、MacBook Air (M1, 2020)を購入しました。個人的に初めてのApple M1チップなMac、そしてBig Sur環境になります。セットアップをしていく中、いつも行っている13インチディスプレイの疑似解像度を1920x1200に変更する設定で、これまでと異なる点が多くあり調査や設定に時間を取られました。結果的にはいつもどおりの1920x1200の疑似解像度の設定ができたのですが、設定内容についてつまずいたポイントを中心に備忘録としてまとめておこうと思います。なお、macOS Mojaveあたりまでの手順については以下

フリーフォントが大好物な人に朗報です！ 🎉 先週、Google Fontsに日本語フォントが追加されたので、紹介します。これでさらに、たくさんの日本語フォントがGoogle Fontsで使用できます。 新しく追加された日本語のGoogle Fonts 他にもたくさんある日本語のGoogle Fonts Google FontsのライセンスはほとんどがSIL Open Font Licenseで、商用プロジェクトでも無料で利用できます。他に採用されているライセンスはAPACHE LICENSE, VERSION 2.0です。 フリーフォントが大好物な人には、下記もお勧めです！ 2021年用、日本語のフリーフォント523種類のまとめ -商用サイトだけでなく紙や同人誌などの利用も明記 新しく追加された日本語のGoogle Fonts まずは、先週Google Fontsに新しく追加された日本語

Amazon Web Services ブログ 初めてのPerformance Insights入門 テクニカルソリューションアーキテクトの笹川です。 本記事ではRDS MySQL使用時のPerformance Insightsの使い方についてご紹介させて頂きます。 Performance Insightsを聞いたことがあるけれど何ができるのか分からない、実際にどのように活用すれば良いのかイメージができないという方もいらっしゃるのではないでしょうか。今回は初めてのPerformance Insights入門と題してサンプルのクエリを実行しながらPerformance Insightsの使い方をご紹介していきます。 Performance InsightsとPerformance Schema Performance InsightsではDBの負荷状況がMySQLにログインすることなくAWS

AWSのCDNサービスであるAmazon CloudFrontのコンソール（マネジメントコンソール画面）が日本語での表記に対応しました。これまで永らく日本語対応されてこなかったこともあり、個人的に衝撃的なアップデートです。 はじめに 清水です。AWSのCDNサービスであるAmazon CloudFrontのコンソール（AWSマネジメントコンソール画面）が日本語対応しました。まずは実際の画面キャプチャをご覧ください！ 日本語の「ディストリビューション」表記、なんだか新鮮ですね！こちらの更新を私が確認したのは2021/08/26（日本時間）の午前中、前日までは左下の言語選択で日本語を選んでいても英語表記だったため、この2021/08/26のタイミングでアップデートされたかと推測しています。（Twitterで検索してみても、日本時間2021/08/26の午前中のツイートが確認できます。）これまで

Visionalグループのビジョナル・インキュベーション株式会社（所在地：東京都渋谷区/代表取締役社長：村田 聡）が運営する脆弱性管理クラウド「yamory（ヤモリー）」（https://yamory.io/）は、ITシステムのOS（オペレーティングシステム）とミドルウェア・開発言語の脆弱性を自動で検知し管理・対策ができる機能、およびオープンソースのライセンス情報を可視化しライセンス違反を検知する機能を、2021年8月26日（木）に提供開始します。 yamoryは、ITシステムに潜む脆弱性を自動で検知し、管理・対策ができるクラウドサービスです。これまでは、アプリケーション内で利用されているライブラリ・フレームワークにおける脆弱性を対象としてきました。新機能により、ITシステムの脆弱性とオープンソースのライセンス違反を一元管理できる国内初（※1）のサービスとなります。脆弱性の管理・対策をする

より詳細なオプションについてはこちらを参照してください。 コマンドを実行すると、作成された秘密鍵を含んだ証明書がローカルコンピュータの証明書ストアに格納されます。 証明書が格納されたことを確認するにはスタートボタンを右クリックし、「ファイル名を指定して実行」で「certlm.msc」と入力し、個人の証明書ストアを表示します。 サブジェクト代替名に複数のAD1とAD2のDNS名が設定されていることが確認できます。 作成した自己証明書を信頼してあげないと、実際にSSL通信を行うことができないので、信頼されたルート証明機関に格納します。 先ほど格納した秘密鍵付き証明書から、証明書のみを以下コマンドでエクスポートします。 Export-Certificate -Cert $cert -FilePath example.com.cer エクスポートした証明書を以下コマンドを実行し、信頼されたルート証

# Ubuntu 20.04 の bash での実行結果 # シェルから [ が何として見えているか $ type [ [ is a shell builtin # PATH から見つかる全ての [ コマンドを出力する # 補足 zsh では which がシェルビルトインコマンドで、シェルビルトイン版の [ も出力される $ which -a [ /usr/bin/[ /bin/[ $ type [[ [[ is a shell keyword # zsh では [[ をパターンとして認識してしまうのでダブルクォートが必要 $ type "[[" [[ is a reserved word ちなみに [ の外部コマンド版が /usr/bin/ と /bin/ の両方にあるのは Ubuntu 20.04 では /bin が /usr/bin へのシンボリックリンクになっているからです。Ub