HEXA BLOG
ヘキサブログ
プログラム
INSERTはなるべくまとめて
暑いですね。
毎年夏がやってくる度「日本暑い~」とぐったりしてるタイラです。
さて、前回に引き続きデータベースに関するお話で、
複数のレコードを挿入する際”一度にまとめて”挿入するとどれほど高速化されるのか
というお話です。
データベースを触りたての頃は
レコード(データ)を何件も挿入する際は1回1回クエリ(要求)を投げていた
なんて事があったかもしれませんが、
1つのクエリでまとめる事で大幅に高速化出来るのでそれを紹介したいと思います。
ちなみに、レコードを1つのクエリでまとめて挿入する事を バルクINSERT といいます。
テーブル構成は前回利用した構成を利用します。
CREATE TABLE IF NOT EXISTS `sample` ( `id` int(11) NOT NULL AUTO_INCREMENT, `data` varchar(128) NOT NULL, `created_at` datetime NOT NULL, `updated_at` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP, PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8; +------------+--------------+------+-----+-------------------+----------------+ | Field | Type | Null | Key | Default | Extra | +------------+--------------+------+-----+-------------------+----------------+ | id | int(11) | NO | PRI | NULL | auto_increment | | data | varchar(128) | NO | | NULL | | | created_at | datetime | NO | | NULL | | | updated_at | timestamp | NO | | CURRENT_TIMESTAMP | | +------------+--------------+------+-----+-------------------+----------------+
まずは比較の為の1件INSERTするクエリ
10件必要な場合は以下のクエリを10回実行します。
INSERT INTO `sample` (`data`, `created_at`) VALUES ('サンプル', NOW());
次に10件をバルクINSERTするクエリ
カンマ(,)区切りで書いていく事で1回のクエリで
まとめて10件、100件、1000件とまとめてINSERT出来ます。
※100件1000件といったクエリは長いので割愛しますね
INSERT INTO `sample` (`data`, `created_at`) VALUES ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW()), ('サンプル', NOW());
それぞれのクエリを手元のサーバでテストしてみたところ
時間は以下の通りになりました。
+-------+----------+----------+ | N | 1件xN回 | N件x1回 | +-------+----------+----------+ | 2 | 0.03sec | 0.01sec | | 10 | 0.08sec | 0.02sec | | 100 | 0.64sec | 0.05sec | | 1000 | 6.21sec | 0.06sec | | 10000 | 64.88sec | 0.56sec | +-------+----------+----------+
10件ですら60ms程度の差が出ています。
万単位のレコードになると100倍以上の差に。。。
複数件INSERTする際には一度にまとめて行う方が効率的…と言いますか
まとめないという選択肢はないですよね
INSERTクエリを投げる際には気をつけてください。
それでは
CATEGORY
- about ヘキサ (166)
- 部活動 (6)
- CG (18)
- プロジェクトマネジメント (1)
- 研修 (5)
- 美学 (1)
- いいモノづくり道 (230)
- 採用 -お役立ち情報も- (149)
- プログラム (188)
- デザイン (99)
- ゲーム (274)
- 日記 (1,104)
- 書籍紹介 (113)
- その他 (875)
- 就活アドバイス (20)
- ラーメン (3)
- ライフハック (25)
- イベント紹介 (10)
- 料理 (23)
- TIPS (7)
- 怖い話 (3)
- サウンド (5)
- 子育て (1)
- 筋トレ (1)
- 商品紹介 (21)
- アプリ紹介 (31)
- ソフトウェア紹介 (33)
- ガジェット紹介 (12)
- サイト紹介 (10)
- 研究・開発 (34)
- 回路図 (4)
- アナログゲーム (40)
- 交流会 (21)
- 報告会 (3)
- インフラ (25)
- グリとブラン (6)
- カメラ (9)
- クラフト (27)
- 部活 (14)
- 画伯 (15)
- カレー (6)
- 音楽(洋楽) (6)
- 映画・舞台鑑賞 (43)
- 飼育 (5)
- いぬ (8)
- ねこ (19)
ARCHIVE
- 2024年
- 2023年
- 2022年
- 2021年
- 2020年
- 2019年
- 2018年
- 2017年
- 2016年
- 2015年
- 2014年
- 2013年
- 2012年
- 2011年
- 2010年
- 2009年
- 2008年
- 2007年