如何使用PHP和PDO将CSV文件导入MySQL数据库

如何使用PHP和PDO将CSV文件导入MySQL数据库

本文详细介绍了如何使用PHP和PDO将CSV文件导入MySQL数据库。教程涵盖了从数据库连接、文件上传处理、CSV数据读取(包括自定义分隔符)、到使用PDO预处理语句进行数据插入的完整流程。特别强调了预处理语句中参数占位符的正确使用,并提供了完整的代码示例及错误处理和最佳实践建议,旨在帮助开发者构建稳定高效的CSV数据导入功能。

1. 引言

在web应用开发中,将外部数据(如csv格式)导入到数据库是一个常见的需求。php结合pdo(php data objects)为与mysql数据库交互提供了强大且安全的方式。本教程将引导您完成一个完整的csv文件导入mysql数据库的流程,并指出常见的错误及如何避免它们。

2. 前置准备

在开始之前,请确保您已具备以下环境和基础知识:

Web服务器环境: 如Apache或Nginx,并安装了PHP。MySQL数据库: 确保MySQL服务正在运行。PHP基础: 了解PHP语法、文件操作及表单处理。PDO基础: 了解PDO的基本概念,如连接数据库、预处理语句等。

数据库表结构示例:为了演示,我们假设有一个名为 users 的数据库表,包含以下字段:

CREATE TABLE `users` (    `id` INT AUTO_INCREMENT PRIMARY KEY,    `szam` VARCHAR(255) NOT NULL,    `forras_szam` VARCHAR(255) NOT NULL);

CSV文件格式示例:假设您的CSV文件数据以分号(;)分隔,例如:

BGYR002217;FK-066BGYR002218;FK-140

3. PHP脚本实现

整个导入过程可以分为几个主要步骤:数据库连接、文件上传处理、读取CSV数据并插入数据库。

3.1 数据库连接

首先,我们需要使用PDO建立与MySQL数据库的连接。为了提高安全性,建议将数据库凭据保存在配置文件中,但这里为了演示方便直接写入代码。

 PDO::ERRMODE_EXCEPTION, // 启用异常模式            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC, // 默认关联数组获取结果            PDO::ATTR_EMULATE_PREPARES => false // 禁用模拟预处理,使用原生预处理        ]    );} catch (Exception $ex) {    // 捕获数据库连接异常    exit("数据库连接失败: " . $ex->getMessage());}?>

注意事项:

立即学习“PHP免费学习笔记(深入)”;

PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION:这是非常重要的设置,它会使PDO在遇到错误时抛出异常,方便我们进行错误捕获和处理。PDO::ATTR_EMULATE_PREPARES => false:禁用模拟预处理,确保使用数据库服务器的原生预处理功能,提高安全性和性能。utf8mb4:推荐使用 utf8mb4 字符集,以支持更广泛的Unicode字符,包括表情符号等。

3.2 处理文件上传

CSV文件通常通过HTML表单上传到服务器。PHP通过 $_FILES 全局变量来处理上传的文件。

首先,您需要一个HTML表单来上传CSV文件:

        CSV文件导入                                

在 import.php 中,我们需要检查文件是否成功上传:

// ... (数据库连接代码) ...if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {    exit("文件上传失败或未选择文件.");}$csvFilePath = $_FILES["upcsv"]["tmp_name"];$fh = fopen($csvFilePath, "r");if ($fh === false) {    exit("无法打开上传的CSV文件.");}

3.3 读取CSV数据并插入数据库

这是核心部分,我们将逐行读取CSV文件,并使用PDO预处理语句将数据插入到数据库中。

关键点:CSV分隔符fgetcsv() 函数默认使用逗号(,)作为分隔符。如果您的CSV文件使用其他分隔符(如本例中的分号 ;),您必须将其作为第二个参数(或第三个参数,如果指定了长度)传递给 fgetcsv()。

关键点:PDO预处理语句占位符在PDO预处理语句中,参数占位符是问号 ? 或命名占位符 :name。原始代码中使用了 VALUES (?;?),这是不正确的语法。正确的占位符应该是 VALUES (?,?)。

// ... (数据库连接和文件处理代码) ...$rowCount = 0;$errorCount = 0;// 开始事务,确保数据一致性,如果导入过程中出现错误,可以回滚$pdo->beginTransaction();try {    // 准备SQL插入语句    // 注意:VALUES (?,?) 是正确的占位符语法    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");    // 循环读取CSV文件中的每一行    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'    while (($row = fgetcsv($fh, 0, ';')) !== false) {        // 检查行数据是否符合预期,避免 Undefined array key 错误        if (count($row) < 2) {            echo "警告: 跳过无效行 (数据不足): " . implode(';', $row) . "
"; $errorCount++; continue; } try { // 执行预处理语句,绑定CSV行中的数据 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . implode(';', $row) . "): " . $ex->getMessage() . "
"; $errorCount++; // 可以选择在这里中断导入或继续 } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; }} catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
";} finally { // 确保文件句柄被关闭 fclose($fh);}echo "DONE.";?>

4. 完整代码示例

将上述所有部分组合起来,形成一个完整的 import.php 文件:

 PDO::ERRMODE_EXCEPTION,            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC,            PDO::ATTR_EMULATE_PREPARES => false        ]    );} catch (Exception $ex) {    exit("数据库连接失败: " . $ex->getMessage());}// 2. 处理文件上传if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {    exit("文件上传失败或未选择文件.");}$csvFilePath = $_FILES["upcsv"]["tmp_name"];$fh = fopen($csvFilePath, "r");if ($fh === false) {    exit("无法打开上传的CSV文件.");}// 3. 读取CSV数据并插入数据库$rowCount = 0;$errorCount = 0;// 开始事务$pdo->beginTransaction();try {    // 准备SQL插入语句,使用正确的占位符 '?'    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");    // 循环读取CSV文件中的每一行    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'    while (($row = fgetcsv($fh, 0, ';')) !== false) {        // 简单的数据完整性检查        if (count($row) < 2) {            echo "警告: 跳过无效行 (数据不足): " . htmlspecialchars(implode(';', $row)) . "
"; $errorCount++; continue; } try { // 执行预处理语句 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . htmlspecialchars(implode(';', $row)) . "): " . $ex->getMessage() . "
"; $errorCount++; } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; }} catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
";} finally { // 确保文件句柄被关闭 if ($fh) { fclose($fh); }}echo "DONE.";?>

5. 注意事项与最佳实践

错误处理: 使用 try-catch 块捕获所有可能的异常,包括数据库连接、文件操作和SQL执行错误。事务: 对于批量数据导入,强烈建议使用事务(beginTransaction(), commit(), rollBack())。这样可以确保数据的一致性,如果导入过程中发生任何错误,可以回滚所有已执行的操作,避免部分数据导入成功而导致的数据不完整。CSV分隔符: 务必根据您的CSV文件实际使用的分隔符,正确设置 fgetcsv() 的第三个参数。数据验证: 在 $stmt->execute() 之前,对从CSV读取的数据进行严格的验证(如数据类型、长度、格式等),以防止无效数据插入数据库或SQL注入风险。安全性:永远不要直接将用户输入拼接到SQL查询中。使用PDO预处理语句是防止SQL注入的最佳实践。限制上传文件的大小和类型,防止恶意文件上传。上传的文件应存储在Web服务器不可直接访问的目录中,处理完成后及时删除。性能优化:对于非常大的CSV文件,可以考虑分批次导入(例如,每1000行提交一次事务),以减少内存消耗和提高效率。如果数据量巨大,LOAD DATA INFILE 是MySQL原生提供的一种更高效的导入方式,但它需要文件在数据库服务器上可访问。用户反馈: 在导入完成后,向用户提供清晰的反馈,说明导入结果、成功行数、失败行数及原因。

6. 总结

通过本文的详细教程,您应该已经掌握了如何使用PHP和PDO安全高效地将CSV文件导入MySQL数据库。核心要点在于正确使用PDO预处理语句的占位符 ?,以及根据CSV文件的实际分隔符配置 fgetcsv() 函数。遵循上述最佳实践,可以帮助您构建一个健壮、安全且高效的数据导入功能。

以上就是如何使用PHP和PDO将CSV文件导入MySQL数据库的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1264582.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月10日 08:36:33
下一篇 2025年12月10日 08:38:03

相关推荐

  • 使用 element-ui Table 组件合并单元格时,最后一行高度异常该如何解决?

    element-ui table 组件合并单元格导致最后一行高度异常的解决之道 在 element-ui 的表格组件中,利用 objectspanmethod 用于合并单元格。但是,在合并过程中,用户遇到了最后一行高度异常的问题,导致其高度远高于其他行。 问题分析 根据用户提供的代码示例,在合并第 …

    2025年12月24日
    000
  • Element-UI Table 合并单元格导致最后一行高度异常如何解决?

    element-ui table 合并单元格导致最后一行高度异常的解决方法 使用 element-ui 的 table 组件时,对某些列进行合并单元格可能会在最后一行引起异常高度问题。例如,在合并最后一列的情况下,最后一行的文本可能会超出边界。 出现这种情况的原因是: 在对合并行进行样式设置时,使用…

    2025年12月24日
    200
  • Element UI 表格合并单元格最后一行高度异常如何解决?

    element ui 表格合并单元格最后一行高度异常问题 element ui 表格使用 rowspan 属性合并单元格时,最后一行的高度可能出现比其他行高的异常情况。 原因: element ui 表格合并单元格时,需要通过 objectspanmethod 方法指定合并单元格的起始行和结束行,而…

    2025年12月24日
    000
  • Element-UI Table 合并单元格时,最后一行高度异常的原因是什么?

    element-ui table 合并单元格时最后一行高度异常 在使用 element-ui 中的 table 组件时,若对最后一列进行合并单元格操作,可能会遇到最后一行高度异常的情况,表现为高度比其他行高出许多。 出现此异常的原因在于合并单元格的代码配置中起始行数写错。具体来说,在使用 objec…

    2025年12月24日
    000
  • 如何使用 Ant Design 实现自定义的 UI 设计?

    如何使用 Ant Design 呈现特定的 UI 设计? 一位开发者提出: 我希望使用 Ant Design 实现如下图所示的 UI。作为一个前端新手,我不知从何下手。我尝试使用 a-statistic,但没有任何效果。 为此,提出了一种解决方案: 可以使用一个图表库,例如 echarts.apac…

    2025年12月24日
    000
  • Antdv 如何实现类似 Echarts 图表的效果?

    如何使用 antdv 实现图示效果? 一位前端新手咨询如何使用 antdv 实现如图所示的图示: antdv 怎么实现如图所示?前端小白不知道怎么下手,尝试用了 a-statistic,但没有任何东西出来,也不知道为什么。 针对此问题,回答者提供了解决方案: 可以使用图表库 echarts 实现类似…

    2025年12月24日
    300
  • 如何使用 antdv 创建图表?

    使用 antdv 绘制如所示图表的解决方案 一位初学前端开发的开发者遇到了困难,试图使用 antdv 创建一个特定图表,却遇到了障碍。 问题: 如何使用 antdv 实现如图所示的图表?尝试了 a-statistic 组件,但没有任何效果。 解答: 虽然 a-statistic 组件不能用于创建此类…

    2025年12月24日
    200
  • 如何在 Ant Design Vue 中使用 ECharts 创建一个类似于给定图像的圆形图表?

    如何在 ant design vue 中实现圆形图表? 问题中想要实现类似于给定图像的圆形图表。这位新手尝试了 a-statistic 组件但没有任何效果。 为了实现这样的图表,可以使用 [apache echarts](https://echarts.apache.org/) 库或其他第三方图表库…

    好文分享 2025年12月24日
    100
  • echarts地图中点击图例后颜色变化的原因和修改方法是什么?

    图例颜色变化解析:echarts地图的可视化配置 在使用echarts地图时,点击图例会触发地图颜色的改变。然而,选项中并没有明确的配置项来指定此颜色。那么,这个颜色是如何产生的,又如何对其进行修改呢? 颜色来源:可视化映射 echarts中有一个名为可视化映射(visualmap)的对象,它负责将…

    2025年12月24日
    000
  • 网络进化!

    Web 应用程序从静态网站到动态网页的演变是由对更具交互性、用户友好性和功能丰富的 Web 体验的需求推动的。以下是这种范式转变的概述: 1. 静态网站(1990 年代) 定义:静态网站由用 HTML 编写的固定内容组成。每个页面都是预先构建并存储在服务器上,并且向每个用户传递相同的内容。技术:HT…

    2025年12月24日
    000
  • 为什么多年的经验让我选择全栈而不是平均栈

    在全栈和平均栈开发方面工作了 6 年多,我可以告诉您,虽然这两种方法都是流行且有效的方法,但它们满足不同的需求,并且有自己的优点和缺点。这两个堆栈都可以帮助您创建 Web 应用程序,但它们的实现方式却截然不同。如果您在两者之间难以选择,我希望我在两者之间的经验能给您一些有用的见解。 在这篇文章中,我…

    2025年12月24日
    000
  • ⏰ 你的声音很重要 – CSS 调查现已开放!

    嘿? 本周五,Sprintfolio 将举办Designer + Dev Mixer。我正计划参加并且对此感到非常兴奋! 这将是与设计师和开发人员建立联系、交流见解并促进集体成长的绝佳机会。 我强烈推荐加入 – 完全免费!谁有兴趣? – 注册 享受 ? – Ada…

    2025年12月24日
    000
  • css网页设计模板怎么用

    通过以下步骤使用 CSS 网页设计模板:选择模板并下载到本地计算机。了解模板结构,包括 index.html(内容)和 style.css(样式)。编辑 index.html 中的内容,替换占位符。在 style.css 中自定义样式,修改字体、颜色和布局。添加自定义功能,如 JavaScript …

    2025年12月24日
    000
  • nginx的css不起作用怎么办

    nginx的css不起作用是因为误删文件导致的,其解决办法就是打开相应的文件并添加代码“include /etc/nginx/mime.types;”,然后重启Nginx守护即可。 本文操作环境:windows7系统、css3版,DELL G3电脑。 nginx的css不起作用是什么原因? 最近部署…

    2025年12月24日 好文分享
    000
  • apache不加载css文件怎么办

    apache不加载css文件的解决办法:1、删除中文字符,使用unicode代替;2、将css文件另存为utf-8格式;3、检查css路径,打开浏览器看是否报404错误;4、使用chmod 777 css文件,给文件添加读取权限。 本教程操作环境:Windows7系统、HTML5&&…

    2025年12月24日
    000
  • CSS如何实现任意角度的扇形(代码示例)

    本篇文章给大家带来的内容是关于CSS如何实现任意角度的扇形(代码示例),有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助。 扇形制作原理,底部一个纯色原形,里面2个相同颜色的半圆,可以是白色,内部半圆按一定角度变化,就可以产生出扇形效果 扇形绘制 .shanxing{ position:…

    2025年12月24日
    000
  • html表格标题如何写_编写HTML表格标题的正确标签【正确】

    HTML表格标题必须使用语义化的标签,置于内且在等元素之前;禁用–等非语义标签替代;可通过CSS的caption-side和text-align调整位置与对齐。 如果您在编写HTML表格时发现标题显示不正确或未被识别,则可能是由于使用了错误的标签或未遵循标准语义结构。以下是编写HTML表格标题的正确…

    2025年12月23日
    000
  • html如何设置新版本_为HTML页面设置版本更新提示【提示】

    可通过meta标签检测、Service Worker监听、Last-Modified头比对、manifest.json校验四种方式提示HTML页面新版本更新。 如果您希望用户在访问HTML页面时获知存在新版本并提示更新,可以通过客户端缓存控制与版本标识机制触发提示行为。以下是实现该功能的多种方法: …

    2025年12月23日
    000
  • html5怎样插入可预览文档_html5文档预览功能实现与控件选择【步骤】

    HTML5文档预览有五种方式:一、用iframe嵌入Google Docs等在线服务;二、用embed/object标签加载同源PDF;三、集成PDF.js实现自定义渲染;四、用FileReader配合Office Online Viewer预览Office文件;五、后端转HTML再前端加载。 如果…

    2025年12月23日
    300
  • php如何html_在PHP代码中输出HTML内容【输出】

    必须确保PHP正确解析并输出原始HTML字符串而非转义文本;可通过echo/print直接输出、heredoc语法处理多行含变量HTML,或用PHP结束标签切换至纯HTML模式。 如果您在PHP脚本中需要将HTML代码作为响应内容发送给浏览器,则必须确保PHP正确解析并输出原始HTML字符串,而非将…

    2025年12月23日
    000

发表回复

登录后才能评论
关注微信