MySQL/MariaDBでテキストファイルをデータベースへ読み込む2つの主要な方法と、それぞれのメリット・デメリット

2024-05-22

MySQLおよびMariaDBでテキストファイルからデータベースへデータを読み込む方法

方法1：LOAD DATA LOCAL INFILE構文を使用する

概要:

この方法は、クライアントマシンにあるテキストファイルを直接データベースへ読み込むものです。最もシンプルで効率的な方法の一つですが、クライアントマシンに直接アクセスできる環境でのみ利用可能です。

手順:

テーブルを作成する: データを格納するテーブルを事前に作成しておきます。テーブルの構造は、テキストファイルのデータ形式と一致する必要があります。
LOAD DATA LOCAL INFILE構文を使用する: 以下の構文を用いて、テキストファイルをデータベースへ読み込みます。

LOAD DATA LOCAL INFILE '<ファイルパス>'
INTO TABLE <テーブル名>
FIELDS TERMINATED BY '<区切り文字>'
LINES TERMINATED BY '<改行文字>'
(field1, field2, field3, ...);

例:

LOAD DATA LOCAL INFILE '/home/user/data.csv'
INTO TABLE customers
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
(id, name, email, phone);

上記の例では、/home/user/data.csvにあるCSVファイルを customers テーブルへ読み込みます。CSVファイルのフィールドはカンマ (,) で区切られ、行は改行文字 (\n) で区切られています。また、各フィールドはテーブルの対応する列にマッピングされます。

補足:

<ファイルパス> は、読み込むテキストファイルへの絶対パスを指定します。
<区切り文字> は、CSVファイルのフィールドを区切る文字を指定します。
フィールドリストは、テーブルの列名と一致する順番で指定する必要があります。
データ型は、暗黙的に推測されますが、必要に応じて明示的に指定することもできます。

方法2：MySQL WorkbenchまたはMariaDB GUIツールを使用する

この方法は、GUIツールを用いてテキストファイルをデータベースへ読み込むものです。視覚的に操作できるため、初心者でも使いやすいという利点があります。

データベースと読み込むテーブルを選択する。
「インポート」または「データロード」機能を選択する。
テキストファイルを選択し、区切り文字と改行文字を指定する。
オプションで、データ型やマッピング設定を調整する。
インポートを実行する。

使用するGUIツールによって、メニューや機能名称が異なる場合があります。
詳細については、各ツールのドキュメントを参照してください。

以下の表を参考に、状況に応じて適切な方法を選択してください。

状況	方法	メリット	デメリット
クライアントマシンに直接アクセスできる	LOAD DATA LOCAL INFILE構文	シンプルで効率的	セキュリティ面でリスクがある
GUI操作に慣れている	MySQL Workbench/MariaDB GUIツール	視覚的に操作しやすい	やや複雑な操作が必要
データ型やマッピング設定を詳細に調整したい	MySQL Workbench/MariaDB GUIツール	詳細な設定が可能	LOAD DATA LOCAL INFILE構文よりも複雑

大容量のテキストファイルを扱う場合は、メモリ使用量に注意する必要があります。
データの整合性を保つために、インポート前に必ずバックアップを取っておくことをお勧めします。

方法1：LOAD DATA LOCAL INFILE構文を使用する

-- テーブル作成
CREATE TABLE customers (
  id INT PRIMARY KEY AUTO_INCREMENT,
  name VARCHAR(255) NOT NULL,
  email VARCHAR(255) NOT NULL,
  phone VARCHAR(255) NOT NULL
);

-- データ読み込み
LOAD DATA LOCAL INFILE '/home/user/data.csv'
INTO TABLE customers
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
(id, name, email, phone);