Deprecated: imwpcache\f884414bce24ee67f\f73723ec7b1919fa5::__construct(): Implicitly marking parameter $YECBGYFECGEAFWHA as nullable is deprecated, the explicit nullable type must be used instead in /www/wwwroot/www.chuangxiangniao.com/wp-content/plugins/imwpcache-dist/build/f884414bce24ee67ff73723ec7b1919fa5.php on line 2

Deprecated: imwpcache\f884414bce24ee67f\f73723ec7b1919fa5::__construct(): Implicitly marking parameter $BBWFDDBHHYHDXXAB as nullable is deprecated, the explicit nullable type must be used instead in /www/wwwroot/www.chuangxiangniao.com/wp-content/plugins/imwpcache-dist/build/f884414bce24ee67ff73723ec7b1919fa5.php on line 2
如何使用PHP和PDO将CSV文件导入MySQL数据库_创想鸟

如何使用PHP和PDO将CSV文件导入MySQL数据库

如何使用PHP和PDO将CSV文件导入MySQL数据库

本文详细介绍了如何使用PHP和PDO将CSV文件导入MySQL数据库。教程涵盖了从数据库连接、文件上传处理、CSV数据读取(包括自定义分隔符)、到使用PDO预处理语句进行数据插入的完整流程。特别强调了预处理语句中参数占位符的正确使用,并提供了完整的代码示例及错误处理和最佳实践建议,旨在帮助开发者构建稳定高效的CSV数据导入功能。

1. 引言

在web应用开发中,将外部数据(如csv格式)导入到数据库是一个常见的需求。php结合pdo(php data objects)为与mysql数据库交互提供了强大且安全的方式。本教程将引导您完成一个完整的csv文件导入mysql数据库的流程,并指出常见的错误及如何避免它们。

2. 前置准备

在开始之前,请确保您已具备以下环境和基础知识:

Web服务器环境: 如Apache或Nginx,并安装了PHP。MySQL数据库: 确保MySQL服务正在运行。PHP基础: 了解PHP语法、文件操作及表单处理。PDO基础: 了解PDO的基本概念,如连接数据库、预处理语句等。

数据库表结构示例:为了演示,我们假设有一个名为 users 的数据库表,包含以下字段:

CREATE TABLE `users` (    `id` INT AUTO_INCREMENT PRIMARY KEY,    `szam` VARCHAR(255) NOT NULL,    `forras_szam` VARCHAR(255) NOT NULL);

CSV文件格式示例:假设您的CSV文件数据以分号(;)分隔,例如:

BGYR002217;FK-066BGYR002218;FK-140

3. PHP脚本实现

整个导入过程可以分为几个主要步骤:数据库连接、文件上传处理、读取CSV数据并插入数据库。

3.1 数据库连接

首先,我们需要使用PDO建立与MySQL数据库的连接。为了提高安全性,建议将数据库凭据保存在配置文件中,但这里为了演示方便直接写入代码。

 PDO::ERRMODE_EXCEPTION, // 启用异常模式            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC, // 默认关联数组获取结果            PDO::ATTR_EMULATE_PREPARES => false // 禁用模拟预处理,使用原生预处理        ]    );} catch (Exception $ex) {    // 捕获数据库连接异常    exit("数据库连接失败: " . $ex->getMessage());}?>

注意事项:

立即学习“PHP免费学习笔记(深入)”;

PDO::ATTR_ERRMODE => PDO::ERRMODE_EXCEPTION:这是非常重要的设置,它会使PDO在遇到错误时抛出异常,方便我们进行错误捕获和处理。PDO::ATTR_EMULATE_PREPARES => false:禁用模拟预处理,确保使用数据库服务器的原生预处理功能,提高安全性和性能。utf8mb4:推荐使用 utf8mb4 字符集,以支持更广泛的Unicode字符,包括表情符号等。

3.2 处理文件上传

CSV文件通常通过HTML表单上传到服务器。PHP通过 $_FILES 全局变量来处理上传的文件。

首先,您需要一个HTML表单来上传CSV文件:

        CSV文件导入                                

在 import.php 中,我们需要检查文件是否成功上传:

// ... (数据库连接代码) ...if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {    exit("文件上传失败或未选择文件.");}$csvFilePath = $_FILES["upcsv"]["tmp_name"];$fh = fopen($csvFilePath, "r");if ($fh === false) {    exit("无法打开上传的CSV文件.");}

3.3 读取CSV数据并插入数据库

这是核心部分,我们将逐行读取CSV文件,并使用PDO预处理语句将数据插入到数据库中。

关键点:CSV分隔符fgetcsv() 函数默认使用逗号(,)作为分隔符。如果您的CSV文件使用其他分隔符(如本例中的分号 ;),您必须将其作为第二个参数(或第三个参数,如果指定了长度)传递给 fgetcsv()。

关键点:PDO预处理语句占位符在PDO预处理语句中,参数占位符是问号 ? 或命名占位符 :name。原始代码中使用了 VALUES (?;?),这是不正确的语法。正确的占位符应该是 VALUES (?,?)。

// ... (数据库连接和文件处理代码) ...$rowCount = 0;$errorCount = 0;// 开始事务,确保数据一致性,如果导入过程中出现错误,可以回滚$pdo->beginTransaction();try {    // 准备SQL插入语句    // 注意:VALUES (?,?) 是正确的占位符语法    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");    // 循环读取CSV文件中的每一行    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'    while (($row = fgetcsv($fh, 0, ';')) !== false) {        // 检查行数据是否符合预期,避免 Undefined array key 错误        if (count($row) < 2) {            echo "警告: 跳过无效行 (数据不足): " . implode(';', $row) . "
"; $errorCount++; continue; } try { // 执行预处理语句,绑定CSV行中的数据 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . implode(';', $row) . "): " . $ex->getMessage() . "
"; $errorCount++; // 可以选择在这里中断导入或继续 } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; }} catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
";} finally { // 确保文件句柄被关闭 fclose($fh);}echo "DONE.";?>

4. 完整代码示例

将上述所有部分组合起来,形成一个完整的 import.php 文件:

 PDO::ERRMODE_EXCEPTION,            PDO::ATTR_DEFAULT_FETCH_MODE => PDO::FETCH_ASSOC,            PDO::ATTR_EMULATE_PREPARES => false        ]    );} catch (Exception $ex) {    exit("数据库连接失败: " . $ex->getMessage());}// 2. 处理文件上传if (!isset($_FILES["upcsv"]) || $_FILES["upcsv"]["error"] !== UPLOAD_ERR_OK) {    exit("文件上传失败或未选择文件.");}$csvFilePath = $_FILES["upcsv"]["tmp_name"];$fh = fopen($csvFilePath, "r");if ($fh === false) {    exit("无法打开上传的CSV文件.");}// 3. 读取CSV数据并插入数据库$rowCount = 0;$errorCount = 0;// 开始事务$pdo->beginTransaction();try {    // 准备SQL插入语句,使用正确的占位符 '?'    $stmt = $pdo->prepare("INSERT INTO users (szam, forras_szam) VALUES (?,?)");    // 循环读取CSV文件中的每一行    // fgetcsv的第三个参数是分隔符,这里指定为分号 ';'    while (($row = fgetcsv($fh, 0, ';')) !== false) {        // 简单的数据完整性检查        if (count($row) < 2) {            echo "警告: 跳过无效行 (数据不足): " . htmlspecialchars(implode(';', $row)) . "
"; $errorCount++; continue; } try { // 执行预处理语句 $stmt->execute([$row[0], $row[1]]); $rowCount++; } catch (Exception $ex) { // 捕获每行插入时的数据库错误 echo "插入数据失败 (行: " . htmlspecialchars(implode(';', $row)) . "): " . $ex->getMessage() . "
"; $errorCount++; } } // 提交事务 $pdo->commit(); echo "数据导入完成。
"; echo "成功导入 " . $rowCount . " 行。
"; if ($errorCount > 0) { echo "有 " . $errorCount . " 行导入失败或被跳过。
"; }} catch (Exception $ex) { // 捕获整个导入过程中的异常,并回滚事务 $pdo->rollBack(); echo "导入过程中发生致命错误: " . $ex->getMessage() . "
"; echo "所有更改已回滚。
";} finally { // 确保文件句柄被关闭 if ($fh) { fclose($fh); }}echo "DONE.";?>

5. 注意事项与最佳实践

错误处理: 使用 try-catch 块捕获所有可能的异常,包括数据库连接、文件操作和SQL执行错误。事务: 对于批量数据导入,强烈建议使用事务(beginTransaction(), commit(), rollBack())。这样可以确保数据的一致性,如果导入过程中发生任何错误,可以回滚所有已执行的操作,避免部分数据导入成功而导致的数据不完整。CSV分隔符: 务必根据您的CSV文件实际使用的分隔符,正确设置 fgetcsv() 的第三个参数。数据验证: 在 $stmt->execute() 之前,对从CSV读取的数据进行严格的验证(如数据类型、长度、格式等),以防止无效数据插入数据库或SQL注入风险。安全性:永远不要直接将用户输入拼接到SQL查询中。使用PDO预处理语句是防止SQL注入的最佳实践。限制上传文件的大小和类型,防止恶意文件上传。上传的文件应存储在Web服务器不可直接访问的目录中,处理完成后及时删除。性能优化:对于非常大的CSV文件,可以考虑分批次导入(例如,每1000行提交一次事务),以减少内存消耗和提高效率。如果数据量巨大,LOAD DATA INFILE 是MySQL原生提供的一种更高效的导入方式,但它需要文件在数据库服务器上可访问。用户反馈: 在导入完成后,向用户提供清晰的反馈,说明导入结果、成功行数、失败行数及原因。

6. 总结

通过本文的详细教程,您应该已经掌握了如何使用PHP和PDO安全高效地将CSV文件导入MySQL数据库。核心要点在于正确使用PDO预处理语句的占位符 ?,以及根据CSV文件的实际分隔符配置 fgetcsv() 函数。遵循上述最佳实践,可以帮助您构建一个健壮、安全且高效的数据导入功能。

以上就是如何使用PHP和PDO将CSV文件导入MySQL数据库的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1264582.html

赞 (0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
将CSV文件导入MySQL数据库:使用PHP PDO的完整指南
上一篇 2025年12月10日 08:36:33
深入理解Laravel Eloquent复杂查询:关联模型与多条件搜索优化
下一篇 2025年12月10日 08:38:03

相关推荐

  • avg计算平均值在mysql中如何使用

    AVG()是MySQL中计算列平均值的聚合函数,忽略NULL值。基本语法为SELECT AVG(列名) FROM 表名;可结合WHERE筛选条件,如SELECT AVG(score) FROM students WHERE subject = ‘math’ AND score…

    2026年9月21日
    000
  • Flyway配置中安全使用环境变量的实践指南

    flyway配置中直接暴露数据库连接参数存在安全隐患。本文详细阐述了如何通过命令行参数和api调用两种主要方式,将环境变量安全地集成到flyway配置流程中。通过外部化管理敏感信息,可以有效提升数据库迁移配置的安全性、灵活性和可维护性,避免将凭证硬编码到配置文件中。 在数据库迁移实践中,将敏感的数据…

    2026年9月21日
    100
  • MySQL缓存机制对性能提升的作用_MySQL缓存配置及调优方案

    MySQL缓存机制对性能提升的作用_MySQL缓存配置及调优方案MySQL缓存机制对性能提升的作用_MySQL缓存配置及调优方案MySQL缓存机制对性能提升的作用_MySQL缓存配置及调优方案MySQL缓存机制对性能提升的作用_MySQL缓存配置及调优方案

    mysql的缓存机制主要包括innodb缓冲池、查询缓存和操作系统文件系统缓存等,其中innodb缓冲池是性能优化的核心。1. innodb缓冲池缓存表数据和索引页,减少磁盘i/o,提升读写效率;2. 查询缓存因失效频繁及锁竞争问题,在高并发场景下易成瓶颈,已在mysql 8.0中移除;3. 操作系…

    2026年9月21日 • 用户投稿
    100
  • MySQL全文搜索如何与外部引擎结合_提升搜索体验?

    MySQL全文搜索如何与外部引擎结合_提升搜索体验?MySQL全文搜索如何与外部引擎结合_提升搜索体验?MySQL全文搜索如何与外部引擎结合_提升搜索体验?MySQL全文搜索如何与外部引擎结合_提升搜索体验?

    mysql 的全文搜索在中文分词和复杂查询上存在局限,常结合外部引擎提升性能。1. 使用 elasticsearch,通过 logstash 或 canal 同步数据,安装中文分词插件并利用布尔查询等优化搜索。2. 利用 sphinx,从 mysql 直接构建索引,通过 sql-like 接口和中文…

    2026年9月21日 • 用户投稿
    100
  • 如何在Java中配置与数据库连接环境

    答案:Java中配置数据库连接需引入JDBC驱动,如MySQL在Maven中添加对应依赖;通过DriverManager或连接池(如HikariCP)获取Connection,使用try-with-resources管理资源;建议将连接参数存入properties文件,并处理常见问题如驱动加载、权限…

    2026年9月21日
    000
  • PHP错误日志怎么查看_PHP错误日志定位与查看方法

    要查看PHP错误日志,首先确定php.ini中error_log路径,若未设置则检查Web服务器(如Apache/Nginx)错误日志;确保log_errors=On、error_reporting合理配置,并通过tail、grep等工具分析日志,结合框架日志和系统日志(如syslog)全面定位问题…

    2026年9月21日
    200
  • MySQL的binlog格式有哪些类型_它们有什么区别和影响?

    MySQL的binlog格式有哪些类型_它们有什么区别和影响?MySQL的binlog格式有哪些类型_它们有什么区别和影响?MySQL的binlog格式有哪些类型_它们有什么区别和影响?MySQL的binlog格式有哪些类型_它们有什么区别和影响?

    mysql的binlog有三种格式:statement-based(sbl)、row-based(rbl)和mixed-based(mbl),它们分别记录sql语句、行变更和智能混合方式。1. sbl记录执行的sql,优点是日志小、可读性强,但存在不确定性导致主从不一致;2. rbl记录每行的具体变…

    2026年9月21日 • 用户投稿
    300
  • MySQL性能模式监控资源_MySQL瓶颈定位精确工具

    MySQL性能模式监控资源_MySQL瓶颈定位精确工具MySQL性能模式监控资源_MySQL瓶颈定位精确工具MySQL性能模式监控资源_MySQL瓶颈定位精确工具MySQL性能模式监控资源_MySQL瓶颈定位精确工具

    mysql性能模式通过事件记录精准定位瓶颈,核心步骤包括:1.启用并配置performance schema,选择性开启消费者和仪器;2.监控等待事件、sql语句、阶段、i/o、内存及锁等关键指标;3.分析events_waits_summary_global_by_event_name等表识别资源…

    2026年9月21日 • 用户投稿
    000
  • PHP PDO lastInsertId() 返回 0 的原因与解决方案

    在使用 PHP PDO 的 lastInsertId() 方法时,如果意外返回 0,通常是因为在执行 INSERT 语句后,又创建了一个新的数据库连接实例来调用 lastInsertId()。lastInsertId() 依赖于在同一数据库会话中获取最后插入的自增 ID。本文将深入解析此问题,并提供…

    2026年9月21日
    500
  • 如何使用mysql设计客户信息管理项目

    答案:设计客户信息管理系统需先明确功能需求,再合理规划数据库结构。1. 根据客户需求划分模块,包括客户基本信息、分类、状态、跟进记录等;2. 创建核心表如customers、company_info、follow_ups和users,确保字段完整且符合业务逻辑;3. 在关键字段上建立索引以提升查询效…

    2026年9月21日
    400
  • Linux查看系统日志的常用命令

    答案是查看Linux日志需综合使用journalctl、dmesg、tail、grep等工具。journalctl用于systemd系统集中查询服务及内核日志,支持时间、优先级、字段等多维度过滤;dmesg专注内核启动与硬件问题;tail -f实时监控日志动态;cat、grep、less结合正则和管…

    用户投稿 2026年9月21日
    000
  • mysql如何实现后台管理系统

    答案:基于MySQL的%ignore_a_1%需设计用户、权限、日志等表结构,通过后端语言实现安全的CRUD接口与JWT认证,前端展示数据并控制权限,确保系统安全稳定。 实现一个基于 MySQL 的后台管理系统,核心是构建一个安全、稳定、可扩展的系统架构,将数据库作为数据存储层,配合后端语言和前端界…

    2026年9月21日
    000
  • 压力测试(Benchmark)Swoole服务的工具与方法

    进行swoole服务的压力测试是为了确保服务在高负载下稳定运行。1. 选择工具:apache jmeter、wrk、locust。2. 使用方法:jmeter通过脚本配置,wrk通过命令行,locust通过python脚本。3. 注意事项:环境隔离、数据监控、脚本设计。4. 优化点:内存泄漏、连接池…

    2026年9月21日
    000
  • mysql常用存储引擎有哪些

    InnoDB是现代MySQL应用的首选存储引擎,因其支持事务(ACID)、行级锁、外键约束、崩溃恢复和MVCC,适用于高并发、数据完整性要求高的OLTP场景;MyISAM虽读取快但仅支持表级锁且无事务和外键,适用于读多写少的简单场景,已逐渐被淘汰;Memory引擎将数据存于内存,速度快但易失,适合临…

    2026年9月21日
    000
  • MySQL数据库日志审计与合规性实现_保护敏感数据与满足法规需求

    MySQL数据库日志审计与合规性实现_保护敏感数据与满足法规需求MySQL数据库日志审计与合规性实现_保护敏感数据与满足法规需求MySQL数据库日志审计与合规性实现_保护敏感数据与满足法规需求MySQL数据库日志审计与合规性实现_保护敏感数据与满足法规需求

    mysql日志审计是合规性的基石,因为它提供了数据库操作的完整证据链,记录用户身份、操作类型和时间戳等关键信息,满足gdpr、hipaa等法规要求,并支持事后追溯与事前震慑。1. mysql自身提供错误日志、通用查询日志、慢查询日志和二进制日志,其中通用查询日志记录所有sql语句,二进制日志用于数据…

    2026年9月21日 • 用户投稿
    100
  • MySQL执行计划中的Extra字段代表什么_怎么看优化空间?

    MySQL执行计划中的Extra字段代表什么_怎么看优化空间?MySQL执行计划中的Extra字段代表什么_怎么看优化空间?MySQL执行计划中的Extra字段代表什么_怎么看优化空间?MySQL执行计划中的Extra字段代表什么_怎么看优化空间?

    在 mysql 查询优化中,执行计划的 extra 字段用于说明查询执行时的额外操作,常见的值包括:1. using filesort 表示需要额外排序,应尽量通过建立索引避免;2. using temporary 表示使用了临时表,常见于 group by 或复杂 join,需优化减少其使用;3.…

    2026年9月21日 • 用户投稿
    100
  • PHP简易路由框架构建:从URL解析到动态控制器加载的实践指南

    本文旨在指导读者构建一个基础的PHP路由系统,实现URL路径到控制器方法的高效映射。内容涵盖URL解析、控制器动态加载、方法调用以及关键的错误处理机制,特别强调如何避免常见的“未定义变量”错误和文件包含路径问题,确保路由系统稳定且易于维护。 一、路由系统核心原理 构建一个简单的php路由系统,其核心…

    2026年9月21日
    200
  • MySQL数据分库分表如何设计_避免性能瓶颈的方法?

    MySQL数据分库分表如何设计_避免性能瓶颈的方法?MySQL数据分库分表如何设计_避免性能瓶颈的方法?MySQL数据分库分表如何设计_避免性能瓶颈的方法?MySQL数据分库分表如何设计_避免性能瓶颈的方法?

    分库分表设计需注意分片键选择、分片数量控制、避免跨库查询及完善运维体系。一,优先选择高频查询字段作为分片键,如用户id,避免使用时间戳以防写热点;二,初期合理分片(如4~8库,每库4~8表),预留扩容空间并根据数据总量反推分片数;三,尽量避免跨库查询,可通过冗余数据、异步汇总或强制路由优化;四,配套…

    2026年9月21日 • 用户投稿
    100
  • MySQL用户权限体系配置思路_Sublime中编辑多用户分权管理脚本

    MySQL用户权限体系配置思路_Sublime中编辑多用户分权管理脚本MySQL用户权限体系配置思路_Sublime中编辑多用户分权管理脚本MySQL用户权限体系配置思路_Sublime中编辑多用户分权管理脚本MySQL用户权限体系配置思路_Sublime中编辑多用户分权管理脚本

    最小权限原则是mysql用户权限配置的核心,确保每个用户仅拥有必要权限以提升安全性与可维护性。1.明确需求:根据用户角色分配如只读、增删改查或结构修改权限;2.创建用户并编写sql脚本进行权限管理,替代手动输入命令,提高效率与一致性;3.使用sublime text等编辑器提升脚本编写效率,利用语法…

    2026年9月21日 • 用户投稿
    100
  • Linux目录结构学习常见问题汇总

    Linux目录结构学习常见问题汇总Linux目录结构学习常见问题汇总Linux目录结构学习常见问题汇总Linux目录结构学习常见问题汇总

    Linux只有一个根目录,所有设备挂载于此,形成统一树状结构。根目录下各路径分工明确:/bin和/sbin分别存放用户与管理员命令;/etc集中配置文件;/home为用户家目录;/var存储日志等动态数据;/tmp用于临时文件;/usr存放系统程序,/usr/local供手动安装软件;/dev包含设…

    2026年9月21日 • 用户投稿
    200

发表回复

登录后才能评论
关注微信