第167回 M1搭載MacのDockerでMySQLを動かしてみる | gihyo.jp
2020年11月に発表されたMacBook Airから搭載されているM1チップというCPUがあります。こちらは従来のMacに搭載されていたCPUがx86/64の命令セットとは異なり、ARMアーキテクチャを採用しているという違いがあります。発売から1年以上たち、インテル製のCPUを搭載したMacがラインナップから無くなったので、次もしMacを購入するとなるとM1チップ搭載のMacを購入することになります。 今回は、その際に問題が起こりがちなDockerでの開発環境の構築について、紹介していきたいと思います。 DockerでMySQLを動かしてみる まずは、dockerコマンドでMySQLを指定して動かしてみようと思います。 % docker run -p 3307:3306 -e MYSQL_ROOT_PASSWORD=my-secret-pw -d mysql:latest Unable
[Laravel] FULLTEXTインデックスを使った全文検索 – 端くれプログラマの備忘録
LaravelでFULLTEXTインデックスを使った検索を行うためのメモ。ざっくり。 マイグレーション テーブルに検索対象ワードを格納するフィールド(keywords)を定義して、FULLTEXTインデックスを振る。 class CreateArticlesTable extends Migration { public function up() { Schema::create('articles', function (Blueprint $table) { $table->increments('id'); .... $table->string('keywords'); //検索対象ワードを格納するフィールド $table->timestamp('published_at'); } DB::statement('ALTER TABLE articles ADD FULLTEXT(
Bulk insertでも20時間以上かかっていたMySQLへのインサート処理を1時間以内にする - エムスリーテックブログ
この記事はエムスリー Advent Calendar 2022の30日目の記事です。 前日は id:kijuky による チームメンバーのGoogleカレンダーの休暇予定一覧をスプレッドシート+GASで作った でした。 AI・機械学習チームの北川(@kitagry)です。 今回はMySQLへのインサートを20倍以上高速化した話について書きます。 仕事をちゃんとしてるか見張る猫 TL; DR はじめに 今回のテーブル バイナリログを無効化する 追試 LOAD DATA INFILE 追試 テーブルの正規化 インデックスを一時的に剥がす まとめ We are hiring!! TL; DR バイナリログをオフにする LOAD DATA INFILEを使う インデックスを一時的に消す はじめに AI・機械学習チームではサイトトップからアプリに至るまで多くの推薦システムがあります。 そこでは推薦ロ
PostGISユーザがMySQL 8の空間拡張機能を少し触ってみた
はじめに https://www.slideshare.net/yoyamasaki/mysql-57gis-80822317 を見て「どうもMySQLの空間拡張の機能が随分良くなった」ようだと知りました。また、https://www.slideshare.net/NorvaldRyeng/mysql-80-gis-are-you-ready で、もう少し踏み込んだ説明もありました。 これはちょっと触ってみなければいけないと思った次第です。 使用したもの 基本的に MySQL 8.0.3-rc Windows x64用 zip版を使いました。インストール方法は http://www.uetyi.com/server-const/entry-1650.html を見ました。 ST_Transform()の記述では、MySQL 8,0.20 Windows x64用 zip版も使用しています(
GoogleMapを使ったプロダクト作成のためにSRID、緯度経度、GeoHash、GeometryをMySQL8.0で理解する - orug8m’s blog
概要＆目的 MySQL8.0のGeo関数を使うと、レコード同士の距離計算、Polygonの中にPointが含まれているかなどもSQLで計算できるということで調べてみました。 地図をWebアプリに乗せるときのSRIDはどれか、 GeoHash、 Geometry型とはなにか、 GoogleMapの仕様の理解が進むと幸いです。 後半では実際にSQLを叩いて、GeoHash、POINT型両方でレコード間の距離を測ってみています。 動作確認したバージョン MySQL 8.0.20 Ruby on Rails 6.0.3.2 事始め GoogleMapにピンを置くプロダクトを作っていました。 （イメージ：浅草寺から200メートル以内にある観光スポットのピンを立てる、等） やりたいこと MySQLに地点の情報を保存して、FEからRoRなどAPI経由で地点を取得したい。 SRIDという概念を知りたい、活
【MySQL】Geometry型(平面空間データ型)を使ってみた
このテーブルのように浮動小数点を扱える型でも緯度経度は管理でき、Geometry型を使って位置情報を管理する必要はない。 しかし、システムの要件によってはGeometry型の方がよい場合もあるため、使用用途を紹介しようかと思います。 メリット・デメリット ※使ってみての感想 メリット 地点間の距離を求めることができる これに尽きると思います。ただ距離を求めるだけではなく、「求めた距離内の〇〇を抽出」「自分の位置から最短の距離にある〇〇を探す」など応用が可能である。 デメリット 他の型と違って特殊な使い方になる 他の型のように単純なINSERTやSELECTは使用できないので、MySQL上で実行できる形式にSQLを作成する必要がある。 MySQL上で直接実行する場合は問題ないかもしれないが実際に運用するシステムでそんなことをするはずはない。 何らかの言語やフレームワークを使用して画面等を生成
MySQL InnoDB の全文検索機能をサクッと試してみました
こんにちは、GMOアドマーケティングのK.Mです。 最近は久しぶりにMySQLを使ってます。 そういえばMySQLといえば、バージョン5.7からInnoDBの全文検索機能に日本語パーサーが搭載されとても使いやすくなったと聞いていたので、本日はそれを試してみたいと思います。 以前はサービスで本格的な全文検索をやりたいと思ったら、Elasticsearchなど専用の全文検索エンジンを立てたりとミドルウェア構成が一段リッチになるような印象もありましたが、もう少しお手軽に、既存RDBMSからSELECTしてくるくらいのイメージでスモールスタートしたいようなケースも結構ありそうです。 そういったときに検討できる一つの選択肢になるんじゃないかと思っています。 既存テーブルを検索してみます MySQL5.7から日本語パーサーとしてN-gramとMeCabが使えます。特にN-gramの場合、デフォルトで有
Data Models
Data Models: A Comprehensive Guide to Structuring Information for Optimal Insights and Decision-Making In the realm of data management, the use of effective data models plays a pivotal role in organizing and representing information in a structured and meaningful way. Data models serve as the blueprint for databases, facilitating efficient data storage, retrieval, and analysis. This article delves
MySQLでロックを特定し、強制終了する
MySQLでロックが発生しているスレッドを特定（＋強制終了）する方法です。 よく忘れるのでまとめてみました。 間違っているところはマサカリお待ちしています。 ロック状態の確認方法 1.件数だけ mysql> SELECT trx_rows_locked FROM information_schema.INNODB_TRX; +-----------------+ | trx_rows_locked | +-----------------+ | 1 | +-----------------+ 1 row in set (0.00 sec) mysql> SHOW ENGINE INNODB STATUS\G ... ------------ TRANSACTIONS ------------ Trx id counter 709 Purge done for trx's n:o < 708
MySQL オンラインDDL(ロックなしによるサービス無停止でDDLを流す方法) パターン集 - Qiita
職場でオンラインDDLのパターンをより勉強したほうがよいと感じたのでインプットしたことをQiitaにアウトプットしてみた。 以下のリポジトリで実践も合わせて行った。 記事の中で出てくるコードなどはこちらで参照することが可能。 https://github.com/d0riven/learning_online_ddl_pattern 今回はMySQLというDBMSに限定してパターンを紹介しているが、他のDBMSでも使えるパターンはいくつかあるはずなのでPostgreSQLやOracleを利用している人が読んでもためになるとは思う。 想定読者 MySQLを普段から触っている人 可用性の高さを求められるサービスを運用・開発している人 古くからあるシステムのリファクタリングのためにデータベースの足回りから手をつけていきたい人 オンラインDDLのやり方を知らない人・知っていても色々なパターンがある
MySQL8.0でSequel Proを使えるようにする - Qiita
問題 Sequel ProがMySQL8.0ではクラッシュして接続できない 解決策 Issueを見ると、一旦アンインストールしてnightlyバージョン入れてねってことでアンインストールしてHomebrewでインストール。
LINEのMySQL運用について 修正版
Dapr × Kubernetes ではじめるポータブルなマイクロサービス（CloudNative Days Tokyo 2020講演資料）
【Docker】MySQL8.0系を使う時に発生する問題について - websandbag ブログ
新しいプロジェクトでは、過去に同じような構成をDockerで作っていればDockerfileを流用しています。 さて、 今回は、最新のMySQLイメージを使う際に発生する問題について記載していきます。 イントロダクション この記事で得られること MySQLの古いバージョンから、8.0系に移行した際に生じる問題についてわかる。 久しぶりにMySQLのイメージを使ったらエラーが起きた時の対処方法がわかる 環境 ツール 種類 バージョン Docker 18.03.1 ライブラリ 種類 バージョン laravel 5.5 状況 Laravelでアプリケーションを作っています。 Dockerで使うイメージは、ApacheとMySQLそれぞれの最新イメージを使用しています。 MySQLのDockerfileは下記です。 FROM mysql COPY ./docker-entrypoint-initd
Hemebrewで入れたMySQLのmy.cnfを設定 - ほげほげ（仮）
忘れるのでメモ my.cnfが読み込まれる場所を調べる $ mysql --help | grep my.cnf /etc/my.cnf /etc/mysql/my.cnf /usr/local/etc/my.cnf ~/.my.cnf読み込まれれる順番は左から あんまり環境を汚すのは好きじゃないので /usr/local/etc/my.cnf に置きます Homebrewで入れたMySQLのmy-xxx.cnfの場所 $ find /usr/local/Cellar/mysql -name "my*.cnf" /usr/local/Cellar/mysql/5.5.27/mysql-test/suite/federated/my.cnf /usr/local/Cellar/mysql/5.5.27/mysql-test/suite/rpl/my.cnf /usr/local/Cellar
phpからMySQL 8.0へPDOで接続時「SQLSTATE[HY000] [2054] The server requested authentication method unknown to the client」
phpからMySQL 8.0へPDOで接続時「SQLSTATE[HY000] [2054] The server requested authentication method unknown to the client」 Ubuntu 18.04にnginx + phpの動作環境を作成したり、 MySQL 8.0をインストールしたりしてみました。 Ubuntu18.04 Server + nginx + php-fpmの動作環境を構築する MySQL 8.0をUbuntu Server 18.04へインストール MySQL 8.0 外部(他の端末)から接続する 今回は、この環境を利用してphp 7.2からMySQL 8.0に接続してみようと思います。 接続ライブラリのインストールと確認用のサンプル phpからmysqlへ接続するためのライブラリをインストールします。 接続確認用にこんなサ
![phpからMySQL 8.0へPDOで接続時「SQLSTATE[HY000] [2054] The server requested authentication method unknown to the client」](https://cdn-ak-scissors.b.st-hatena.com/image/square/0a742a30435fe62cfbd1bf1374615e02a2f9e3be/height=288;version=1;width=512/https%3A%2F%2Fstatic.fc2.com%2Fimage%2Fnoimage.gif)
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【位置情報】MySQLのgeometry型を使って緯度経度の2点間距離をkmで計算・算出する方法【ST_GEOMFROMTEXT】
MySQLユーザ作成 [memo] - Qiita![MySQLユーザ作成 [memo] - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/b2d42903d9e65f6f4b8e1a537d37a2fca95059f1/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-412672c5f0600ab9a64263b751f1bc81.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTk3MiZoPTM3OCZ0eHQ9TXlTUUwlRTMlODMlQTYlRTMlODMlQkMlRTMlODIlQjYlRTQlQkQlOUMlRTYlODglOTAlMjAlNUJtZW1vJTVEJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9NTYmcz04NTc4MjA1ZDIxMDk5MTcxYjMxZThmZmNhN2EzNjczMA%26mark-x%3D142%26mark-y%3D57%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZoPTc2Jnc9NzcwJnR4dD0lNDB0YXJvc2hpbiZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTM2JnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9NjMyYmM1NmU1ZTM5ZGNjNDFiMzlkZmYyOWMyYjFlYTA%26blend-x%3D142%26blend-y%3D436%26blend-mode%3Dnormal%26txt64%3DaW4g5qCq5byP5Lya56S-44OV44Or44K544OU44O844OJ%26txt-width%3D770%26txt-clip%3Dend%252Cellipsis%26txt-color%3D%2523212121%26txt-font%3DHiragino%2520Sans%2520W6%26txt-size%3D36%26txt-x%3D156%26txt-y%3D536%26s%3D68dd76dd686c803a0473ee01ed062067)
MySQL スロークエリ改善 初心者向け - Qiita
Account Suspended
120億レコードの金融資産データを扱うマネーフォワードのMySQL活用のこれまでとこれから // Speaker Deck
