使用mysql和php合并和存储多个csv文件的最佳方法

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了使用mysql和php合并和存储多个csv文件的最佳方法，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1333字，纯文字阅读大概需要2分钟。

内容图文

我正在与一家公司合作,每天为我提供一个包含约25.000行的CSV文件.
一天的CSV与前一天的CSV之间的区别在于,在最新的CSV中,删除了一些行(许多少于总数),而添加了其他行.因此,这两个文件共有大约24900行.

我必须存储时间中的所有行..因此,每天我都必须使用当前CSV更新数据库中的表.

我想想：

<?php
   $fh = fopen($actual_csv, 'r');
   $contents = fread($fh, filesize($actual_csv));
   fclose($fh);
   $fileLines = explode("\n", $contents);
   for ($i = 1; $i < count($fileLines) - 1; $i++) {
    $fieldList = explode(';', $fileLines[$i]);
        //$fieldList[0] is my unique id
        if(mysql_num_rows(mysql_query("SELECT * FROM table_where_i_store_all WHERE id='$fieldList[0]'"))<=0){
           mysql_query("INSERT INTO table_where_i_store_all (column names..) VALUES ('$fieldList[0],........')"); // there are many column so i don't write it..
        }
   }
?>

我认为这不是非常强大和快速.有什么更好的办法吗？谢谢！！！

解决方法:

ALTER TABLE table_where_i_store_all ADD UNIQUE(id);

$fileLines = explode("\n", $contents);
$linemax = count( $fileLines )-1;

if( $linemax < 1 ) // empty file?
  return;

$SQL = "INSERT IGNORE INTO table_where_i_store_all (column_names) VALUES ";

for ($i = 1; $i < $linemax; $i++) {
   $fieldList = explode(';', $fileLines[$i]);
   //$fieldList[0] is my unique id

   $SQL .= "('$fieldList[0],........'),";        
}
$SQL = substr( $SQL, 0, strlen($SQL)-1);  // remove extra comma from end
$res = mysql_query($SQL);

内容总结

以上是互联网集市为您收集整理的使用mysql和php合并和存储多个csv文件的最佳方法全部内容，希望文章能够帮你解决使用mysql和php合并和存储多个csv文件的最佳方法所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端