好吧,所以我始终会导入到数据库中的100k-1m线条。我使用的代码如下:
$lines = new SplFileObject('/home/file.txt');
while(!$lines->eof()) {
$lines->next(); //Skipping first line
$row = explode(',',$lines);
for($i = 0; $i<4; $i++){
if(!isset($row[$i])){
$row[$i] = null;
}
}
$y = (float) $row[1];
$z = (float) $row[2];
$load_query = "INSERT IGNORE INTO new (datetime_gmt,field2,field3)
VALUES ('".$row[0]."','".$y."','".$z."');";
if(!$mysqli->query($load_query)){
die("CANNOT EXECUTE".$mysqli->error."n");
}
}
$lines = null;
但是,waaayyy花了太久。有什么更快的方法,还是我坚持使用这种方法?
ps。我不想使用MySQL的"插入数据插入"。
作为书面,您正在为每行运行一个插入语句。如果您以INSERT INTO table (foo, bar) VALUES (1, 2), (3, 4), (5, 6);
的格式编译单个多插入语句,该语句最终执行一次。尽管可以将其清理更多。
$lines = new SplFileObject('/home/file.txt');
$load_query = "INSERT IGNORE INTO new (datetime_gmt,field2,field3)
VALUES ";
while(!$lines->eof()) {
$lines->next(); //Skipping first line
$row = explode(',',$lines);
for($i = 0; $i<4; $i++){
if(!isset($row[$i])){
$row[$i] = null;
}
}
$y = (float) $row[1];
$z = (float) $row[2];
$load_query .= "('".$row[0]."','".$y."','".$z."'),";
}
if(!$mysqli->query(rtrim($load_query, ','))) {
die("CANNOT EXECUTE".$mysqli->error."n");
}
$lines = null;
还要确保数据得到信任。如果文件可以来自外部用户,则直接附加到查询字符串会创建SQL注入向量。