详解node如何将Excel导入数据库

 更新时间:2024年11月05日 08:34:57   作者:JYeontu  
这篇文章主要为大家详细介绍了node如何通过脚本实现将Excel导入mysql数据库里,文中的示例代码讲解详细,感兴趣的小伙伴可以了解一下

说在前面

最近搞了一个网站用来记录自己日常的一些东西,之前的数据都是用Excel表格记录的,现在需要将之前记录的Excel数据导入到mysql数据库里,于是就想着用node写一个简单的脚本来处理,所以就有了这一篇文章。

比如现在我们有这样一份Excel数据:

我们需要将这些数据插入到名为t_user的表中去。

1、导入模块

首先,代码导入了xlsxfs模块。xlsx模块用于操作 Excel 文件,fs模块用于文件系统操作。

const xlsx = require("xlsx");
const fs = require("fs");

2、读取 Excel 文件

使用xlsx.readFile方法读取指定路径(./static/test.xlsx)的 Excel 文件,并将结果存储在workBook变量中。

const workBook = xlsx.readFile("./static/test.xlsx");

3、获取指定工作表并转换为 JSON

  • workBook中获取Sheet1的工作表,并存储在sheet变量中。
  • 使用xlsx.utils.sheet_to_json方法将工作表转换为 JSON 格式,并存储在sheetJson变量中。
  • 最后,使用fs.writeFileSync方法将sheetJson以格式化的 JSON 字符串形式写入到./file/sheetJson.text文件中。
const name = "Sheet1";
let sheet = workBook.Sheets[name];
const sheetJson = xlsx.utils.sheet_to_json(sheet);
fs.writeFileSync("./file/sheetJson.text", JSON.stringify(sheetJson, null, 2));

获取到的json数据如下:

4、生成 SQL 插入语句

有了整理好的 JSON 数据后,我们就可以开始为将这些数据插入到数据库中做准备了。

  • 首先创建一个空数组sqlList,用于存储生成的 SQL 插入语句。
  • 遍历sheetJson中的每个对象(代表 Excel 工作表中的一行数据,就是一条完整的信息记录。)。
  • 对于每个对象,使用for...in循环遍历其属性,构建 SQL 插入语句的列名部分(keyStr)和值部分(valStr)。将字符串值用单引号括起来。
  • 最后,将构建好的 SQL 插入语句(INSERT INTO t_user (${keyStr}) VALUES (${valStr});)添加到sqlList数组中。
let sqlList = [];
sheetJson.forEach((item) => {
 let keyStr = "",
   valStr = "";
 for (const key in item) {
   if (keyStr) keyStr += ",";
   keyStr += key;
   if (valStr) valStr += ",";
   valStr += `'${item[key]}'`;
 }
 sqlList.push(`INSERT INTO t_user (${keyStr}) VALUES (${valStr});`);
});

这里的t_user是需要插入数据的表名,可以根据实际情况进行调整。

5、写入 SQL 语句到文件

使用fs.writeFileSync方法将sqlList数组中的所有 SQL 插入语句以换行符连接后写入到./file/excel2Sql.text文件中。

fs.writeFileSync("./file/excel2Sql.text", sqlList.join("\n"));

生成的sql插入语句如下:

6、插入数据库

我们有一个t_user表,现在表里是空的

执行生成的插入语句,将脚本生成的sql插入语句复制到控制台,执行插入语句

成功执行插入语句,我们就成功地将excel表中的数据都导入到数据库中去了

7、完整代码

const xlsx = require("xlsx");
const fs = require("fs");
const workBook = xlsx.readFile("./static/test.xlsx");

const name = "Sheet1";
let sheet = workBook.Sheets[name];
const sheetJson = xlsx.utils.sheet_to_json(sheet);
fs.writeFileSync("./file/sheetJson.text", JSON.stringify(sheetJson, null, 2));
let sqlList = [];
sheetJson.forEach((item) => {
  let keyStr = "",
    valStr = "";
  for (const key in item) {
    if (keyStr) keyStr += ",";
    keyStr += key;
    if (valStr) valStr += ",";
    valStr += `'${item[key]}'`;
  }
  sqlList.push(`INSERT INTO t_user (${keyStr}) VALUES (${valStr});`);
});
fs.writeFileSync("./file/excel2Sql.text", sqlList.join("\n"));

这是一个将Excel数据转为sql插入语句的简单脚本,大家可以根据自己的需求进行微调后使用,也可以在node中直接连接数据库,省去手动执行的步骤,不过我觉得手动插入也不麻烦,就直接生成插入语句然后手动执行语句来插入了

以上就是详解node如何将Excel导入数据库的详细内容,更多关于node Excel导入数据库的资料请关注脚本之家其它相关文章!

相关文章

  • Node绑定全局TraceID的实现方法

    Node绑定全局TraceID的实现方法

    这篇文章主要介绍了Node 绑定全局 TraceID的实现方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2019-11-11
  • 详解Node.js中的模块化方法

    详解Node.js中的模块化方法

    这篇文章主要为大家介绍了Node.js的模块化,具有一定的参考价值,感兴趣的小伙伴们可以参考一下,希望能够给你带来帮助
    2022-01-01
  • 详解node如何将Excel导入数据库

    详解node如何将Excel导入数据库

    这篇文章主要为大家详细介绍了node如何通过脚本实现将Excel导入mysql数据库里,文中的示例代码讲解详细,感兴趣的小伙伴可以了解一下
    2024-11-11
  • npm包发布和删除的超详细教程

    npm包发布和删除的超详细教程

    npm是JavaScript的包管理器,也是世界上最大的软件注册中心,下面这篇文章主要给大家介绍了关于npm包发布和删除的超详细教程,文中通过实例代码介绍的非常详细,需要的朋友可以参考下
    2023-02-02
  • 如何将Node.js中的回调转换为Promise

    如何将Node.js中的回调转换为Promise

    这篇文章主要给大家介绍了关于如何将Node.js中的回调转换为Promise的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2020-11-11
  • Nodejs进阶:核心模块net入门学习与实例讲解

    Nodejs进阶:核心模块net入门学习与实例讲解

    本篇文章主要是介绍了Nodejs之NET模块,net模块是同样是nodejs的核心模块,具有一定的参考价值,感兴趣的小伙伴们可以参考一下。
    2016-11-11
  • 详解Node.js中的Async和Await函数

    详解Node.js中的Async和Await函数

    这篇文章主要介绍了Node.js中的Async和Await函数的相关知识,非常不错,具有参考借鉴价值,需要的朋友可以参考下
    2018-02-02
  • 一文详解npm如何更新项目最新依赖包

    一文详解npm如何更新项目最新依赖包

    npm包的更新速度很快,为了将项目或者全局依赖更新到最新版本,下面这篇文章主要给大家介绍了关于npm如何更新项目最新依赖包的相关资料,文中通过实例代码介绍的非常详细,需要的朋友可以参考下
    2023-01-01
  • 解析Node.js异常处理中domain模块的使用方法

    解析Node.js异常处理中domain模块的使用方法

    这篇文章主要介绍了Node.js异常处理中domain模块的使用方法,文中最后提到了内存泄漏的相关问题,值得注意,需要的朋友可以参考下
    2016-02-02
  • 如何正确使用Nodejs 的 c++ module 链接到 OpenSSL

    如何正确使用Nodejs 的 c++ module 链接到 OpenSSL

    这篇文章主要介绍了如何正确使用Nodejs 的 c++ module 链接到 OpenSSL,需要的朋友可以参考下
    2014-08-08

最新评论