MySQL on oinume journal

Problems when updating MySQL from 5.7 to 8.0

Tue, 24 Sep 2019 08:45:00 +0900

Introduction

I updated MySQL from 5.7 to 8.0. There were some problems when updating. This is just a memo how to solve the problems.

InnoDB deprecated file format parameters

These parameters are deprecated in 8.0.

innodb_file_format
innodb_file_format_check
innodb_file_format_max
innodb_large_prefix

ref: MySQL :: WL#7704: InnoDB: Remove deprecated file format parameters in 8.0

Query cache parameters are deprecated

These parammeters are deprecated in 8.0.

query_cache_limit
query_cache_size

ref: https://mysqlserverteam.com/mysql-8-0-retiring-support-for-the-query-cache/

innodb_support_xa

innodb_support_xa is deprecated as well.

mysqldumpで特定のレコードだけエクスポートする

Thu, 08 Dec 2016 09:00:00 +0900

忙しい人向けまとめ

mysqldumpの--whereオプションを使うと特定のレコードだけmysqldumpできる
--whereにはLIMIT句も指定できる
--whereオプションで大量のデータから一部だけをmysqldumpすることが可能

本文

mysqldump、データだけエクスポートしたりCREATE TABLEだけエクスポートできたり細かいところまで気が利いているなぁと思うツール。今日知ったのは --whereでdumpするレコードを限定できるよ、ということ。さらに、--whereにはLIMITも指定できるので、「特定の条件にマッチするレコード100件だけ」みたいなエクスポートもできる。

HerokuでMySQL 5.7系を使う方法

Thu, 15 Sep 2016 19:00:00 +0900

JawsDBというaddonを使うともれなく5.7系のMySQLが使える。2016年9月現在だと5.7.11。

elements.heroku.com

HerokuのデフォルトのデータベースはそもそもPostgreSQLで、MySQLを使いたい場合はこのJawsDBもしくはClearDBの2者択一なんだけど、ClearDBの方は5.5系しか使えない。安定してる5.5を取るか、最新版の5.7のどっちがいいかは悩ましいところだけど...

MySQL Casual Talks vol.9でしゃべってきた

Sat, 23 Jan 2016 23:10:22 +0900

表題の通りでMySQL Casualで「カジュアルに本番データを開発環境に入れる」というタイトルで発表してきました。

カジュアルに本番データを開発環境に入れる #mysqlcasual from Kazuhiro Oinuma

Amazon RDS for Aurora 東京ローンチ記念セミナー

Thu, 12 Nov 2015 12:00:00 +0900

Auroraの検討を導入していることもあり、11/10のAmazon RDS for Aurora 東京ローンチ記念セミナーに行ってきたのでそのメモ書きと感想。

Debanjan Saha, GM, Amazon Aurora

Auroraチームの人。AuroraはAWS史上最速で成長しているサービスと言っていた。

MySQLでbulk insert + on duplicate key updateしたい

Mon, 09 Nov 2015 09:00:00 +0900

MySQLでINSERT INTO hoge VALUES (...), (...), (...)のbulk insertでon duplicate key update(すでにレコードがあったらUPDATEで上書きする)って併用できるのかな？っていうのが気になったので調べてみたらできるみたい。VALUES関数というその目的のためだけに存在するような関数を使う。

Get auto increment values from MySQL information schema

Wed, 21 Oct 2015 09:00:00 +0900

Information schema is metadata about MySQL. We can obtain useful information from it. For example, I get current auto increment values by following SQL.

SELECT
  t.table_name, t.auto_increment
FROM
  information_schema.tables AS t
WHERE
  t.table_schema = 'your_db'
ORDER BY t.table_name;

+-------------------------------------+----------------+
| table_name                          | auto_increment |
+-------------------------------------+----------------+
| blog_categories                     |              4 |
| blog_posts                          |              4 |
| blog_post_categories                |              4 |
| blog_post_comments                  |              1 |
| images                              |              7 |
+-------------------------------------+----------------+

INFORMATION_SCHEMA database has much more useful tables like COLUMNS, GLOBAL_VARIABLES and so on. It's good to use it when you want to know much about MySQL.

Duplicating a MySQL table schema and data

Fri, 04 Sep 2015 20:31:19 +0900

Duplicate foo table into foo_20150904

/* Create a new table from foo's schema */
> CREATE TABLE foo_20150904 LIKE foo;

/* Insert whole data into a new table */
> INSERT INTO foo_20150904 SELECT * FROM foo;

RDS(MySQL)のバイナリログはすぐ消えるから注意

Fri, 29 May 2015 20:49:26 +0900

これ知らないとハマるかもしれないのでメモ。

MySQL Database Log Files - Amazon Relational Database Service docs.aws.amazon.com

に"Amazon RDS normally purges a binary log as soon as possible"とある通り、RDSではバイナリログはすぐ消えてしまう。もし自前でスレーブを立てたりするためにバイナリログをある程度とっておきたい場合は、

MySQL 5.6で本当にオンラインでDDLが実行できるか検証してみた

Mon, 16 Jun 2014 19:15:00 +0900

MySQL 5.6での機能強化点（その1） - パフォーマンスと使い勝手を大きく向上 | Think ITに書いてあるようにMySQL 5.6からオンラインでDDLを実行してもレコードのINSERT, UPDATEはできるようになったとあるので、これが本当なのか検証してみた。MySQLにおいてレコード数の多いテーブルに対するALTER TABLE文の発行は以前から問題視されていて、pt-online-schema-changeみたいなものを駆使するのが常套手段だった。

MySQLでデータベースをコピーする

Thu, 21 Feb 2013 12:02:19 +0900

mysql -u -p -e 'create database destination'

mysqldump -u -p source | mysql -uabc -pxyz destination

mysql -u -p -e 'drop database source'

良い子は source と destination 逆にしたりしないようにね。

[tmkm-amazon]4774142948[/tmkm-amazon]

MySQLでbulk insertの途中でエラーになった場合の挙動

Mon, 17 Dec 2012 10:12:25 +0900

MySQLで

insert into ... values (1, 'x'), (2, 'y');

のようにbulk insertした時に、途中でエラーになった場合にどういう挙動をするかを調べてみた。普通に考えれば「全てのレコードがinsertされてない」になるはずだと思ったんだけど一応。試したMySQLのバージョンは5.5.28。

MySQL 5.5をMac OSXにインストールする

Sat, 21 Jul 2012 13:07:49 +0900

公式のバイナリを落としてインストールするのが一番楽かなーと思っている。自動起動もできるし。

MySQL :: Download MySQL Community ServerからMac OS X ver. 10.6 (x86, 64-bit), DMG Archiveをダウンロード。DMGを開いて mysql-5.5.25a-osx10.6-x86_64.pkg をクリックしてインストール。/usr/local/mysql にインストールされる。

MySQLをインストールした後に設定する項目(5.5編)

Sat, 21 Jul 2012 12:07:55 +0900

[permalink id=174]このエントリ[/permalink]のMySQL 5.5版。大体本家のドキュメントのこことかにちゃんと説明項目が書いてあるので、詳しくはそっちを読むのがいいかと。

user = mysql

pid-file = /var/run/mysql/mysqld.pid

socket = /var/run/mysql/mysqld.sock

port = 3306

basedir = /usr

datadir = /var/lib/mysql

tmpdir = /tmp

rlwrapを使ってmysqlコマンドのプロンプトに色をつける

Sat, 10 Dec 2011 23:12:43 +0900

どうもこんにちは。北海道に旅行中でこの記事は札幌のホテルから書いている oinume です。MySQL Casual Advent Calendarも11日目になりました。「MySQL Casualが全然カジュアルじゃない！」という意見をよく耳にするので、今日はウルトラカジュアルなエントリーを書こうと思います。

ブログのMySQLを5.1から5.5にバージョンアップ

Fri, 03 Jun 2011 16:06:39 +0900

5.5ってどうなんだろう？と思ったので試しにこのブログのMySQLを5.1 -> 5.5にしてみた。

tar.gz のバイナリを取ってきて /usr/local/mysql-5.5.13-linux-2.6-i686 に展開して /usr/local/mysql にsymlink (バージョンアップに失敗したときにすぐに戻せるように)。あとはstop start して起動するだけ。

MuninでMySQLプラグインのグラフが描画されない時の解決方法

Tue, 09 Mar 2010 14:03:58 +0900

先日設定したサーバでMuninをインストールして監視していたのですが、どうもMySQL関連のプラグイン(mysql_bytes, mysql_queries, mysql_threadsなど)でグラフが描画されず、どうしたものかと思ってぐぐってみたところ、このエントリを見つけました。まさにビンゴで /etc/munin/plugin-conf.d/munin-node に以下の行を足してmunin-nodeをrestartしたところ、うまくグラフが描画されるようになりました。

MySQL 5.1の最新のソースからdebを作成する

Sun, 03 Jan 2010 09:01:08 +0900

以前[permalink id=331]MySQL 5.1の最新版のdebパッケージを作成する方法[/permalink]というエントリを書いたのですが、Ubuntuの最新の開発版パッケージではなく、MySQLが出している最新のMySQLのソースをビルドしてdebパッケージを作成する方法を見つけたのでメモしておきます。ちなみにMySQL以外にもperlとかのパッケージもこの方法で最新にすることが出来ると思います。

MySQLのdrop tableでは複数のテーブルを一気に削除できる

Wed, 23 Dec 2009 16:12:31 +0900

タイトル通りなんですが、今までは複数のテーブルを削除する時は

> drop table hoge;

> drop table fuga;

なんてやってましたが、

> drop table hoge fuga;

って書けるんですね。豆知識。

[tmkm-amazon]4774142948[/tmkm-amazon]

hbstudy#5に参加してきました

Sat, 14 Nov 2009 16:11:33 +0900

インフラエンジニアじゃないけどインフラエンジニア勉強会 hbstudy#5に参加してきました。もともとこのイベントには参加したいなぁと思っていて、参加登録したらいいタイミングで松信さんが講演することにw 貴重なMySQLのチューニングの話が生で聞けてとてもよかったよかった。

MySQL 5.1の最新版のdebパッケージを作成する方法

Sat, 29 Aug 2009 23:08:23 +0900

Ubuntu 9.04にはMySQL 5.1のパッケージが用意されているのですが、バージョンが5.1.31であり最新ではないので(現時点で最新は5.1.37)、最新版のdebパッケージを作成する方法を紹介します。debを作成するといっても、開発中のUbuntuに入っているmysql-server-5.1のソースを持ってきてビルドするだけなので、比較的お手軽にできます。

mysqldumpでバックアップをする時につけるオプション

Sat, 18 Apr 2009 03:04:17 +0900

MySQLのデータベースをバックアップする際にmysqldumpを使用しますが、個人的に「これはつけたらよさそう」と思っているオプションを紹介します。

MySQLをインストールした後に設定する項目

Wed, 14 Jan 2009 16:01:35 +0900

MySQL 5.5用の設定は[permalink id=471]こちら[/permalink]

自分がMySQLをインストールしたあとに行う設定を備忘録がてら書いてみます。サーバのスペックによって若干変動するところもありますが、チューニングする項目というのは大体こんなもんでしょう。

MySQLでテーブルのコピーを簡単に作る方法

Sat, 22 Nov 2008 22:11:18 +0900

hogeテーブルをhoge_20081123というテーブルにコピーする方法。

/* hogeテーブルのスキーマをコピーしてテーブル作成 */

CREATE TABLE hoge_20081123 LIKE hoge; /* hogeテーブルのデータをINSERT */ INSERT INTO hoge_20081123 SELECT * FROM hoge;