php实现向mysql批量插入数据

现在有这样一个表,我们想往这个表里面插入大量数据该如何实现呢?

  1. CREATE TABLE IF NOT EXISTS `user_info` (
  2. `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增主键',
  3. `name` varchar(255) NOT NULL default '' COMMENT '姓名',
  4. `age` int(11) NOT NULL default '0' COMMENT '年龄',
  5. PRIMARY KEY (`id`)
  6. ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='用户信息表';

批量插入

方法一、使用for循环插入

在往mysql插入少量数据的时候,我们一般用for循环

  1. $arr = [
  2. [
  3. 'name' => 'testname1',
  4. 'age' => 18,
  5. ],
  6. [
  7. 'name' => 'testname2',
  8. 'age' => 19,
  9. ],
  10. [
  11. 'name' => 'testname3',
  12. 'age' => 18,
  13. ],
  14. ];
  15. $servername = "localhost";
  16. $port = 3306;
  17. $username = "username";
  18. $password = "password";
  19. $dbname = "mytestdb";
  20. // 创建连接
  21. $conn = new mysqli($servername, $username, $password, $dbname, $port);
  22. // 检测连接
  23. if ($conn->connect_error) {
  24. die("connect failed: " . $conn->connect_error);
  25. }
  26. $costBegin = microtime(true);
  27. foreach($arr as $item) {
  28. $sql = sprintf("INSERT INTO user_info (name, age) VALUES ( '%s', %d);", $item['name'], (int)$item['age']);
  29. if ($conn->query($sql) === TRUE) {
  30. echo "insert success";
  31. } else {
  32. echo "Error: " . $sql . "<br>" . $conn->error;
  33. }
  34. }
  35. $costEnd = microtime(true);
  36. $cost = round($costEnd - $costBegin, 3);
  37. var_dump($cost);
  38. $conn->close();

假如说要批量插入大量数据,如果还用for循环的办法插入是没有问题的,只是时间会比较长。对比一下插入少量数据与插入大量数据,使用上面的for循环插入耗费的时间:条数时间(单位:秒)

php实现向mysql批量插入数据

方法二、使用insert语句合并插入

mysql里面是可以使用insert语句进行合并插入的,比如

INSERT INTO user_info (name, age) VALUES ('name1', 18), ('name2', 19);表示一次插入两条数据:

  1. $arr = [
  2. [
  3. 'name' => 'testname1',
  4. 'age' => 18,
  5. ],
  6. [
  7. 'name' => 'testname2',
  8. 'age' => 19,
  9. ],
  10. [
  11. 'name' => 'testname3',
  12. 'age' => 18,
  13. ],
  14. // 此处省略
  15. ……
  16. ……
  17. ];
  18. $servername = "localhost";
  19. $port = 3306;
  20. $username = "username";
  21. $password = "password";
  22. $dbname = "mytestdb";
  23. // 创建连接
  24. $conn = new mysqli($servername, $username, $password, $dbname, $port);
  25. // 检测连接
  26. if ($conn->connect_error) {
  27. die("connect failed: " . $conn->connect_error);
  28. }
  29. $costBegin = microtime(true);
  30. if (!emptyempty($arr)) {
  31. $sql = sprintf("INSERT INTO user_info (name, age) VALUES ");
  32. foreach($arr as $item) {
  33. $itemStr = '( ';
  34. $itemStr .= sprintf("'%s', %d", $item['name'], (int)$item['age']);
  35. $itemStr .= '),';
  36. $sql .= $itemStr;
  37. }
  38. // 去除最后一个逗号,并且加上结束分号
  39. $sql = rtrim($sql, ',');
  40. $sql .= ';';
  41. if ($conn->query($sql) === TRUE) {
  42. } else {
  43. echo "Error: " . $sql . "<br>" . $conn->error;
  44. }
  45. }
  46. $costEnd = microtime(true);
  47. $cost = round($costEnd - $costBegin, 3);
  48. var_dump($cost);
  49. $conn->close();

下面看一下少量数据与大量数据的时间对比。从总体时间上,可以看出insert合并插入比刚才for循环插入节约了很多时间,效果很明显条数时间(单位:秒)

php实现向mysql批量插入数据

如果你觉得数组太大,想要减少sql错误的风险,也可以使用array_chunk将数组切成指定大小的块,然后对每个块进行insert合并插入。