ExcelToDatabase：批量导入Excel到数据库的自动化工具
支持8种主流数据库
简介
ExcelToDatabase 是一个可以批量导入excel（xls/xlsx/xlsm/csv/txt）到数据库（mysql/oracle/sql server/postgresql/access/hive/sqlite/达梦）的自动化工具。自动化是其最大的特点，因为它可以根据excel自动生成表信息与数据库建立联系，最终将数据导入到数据库表。批量是它另一个特点，因为可以做到自动化，所以你可以一次性导入成千上万张表而不是一个一个导。定时导入导出，实时刷新，实现Excel数据与数据库表数据的无缝连接。
工具特色：
自动：工具可以根据excel自动生成表名、列名、列类型及其长度，最终创建表并导入数据，或者根据生成的表信息与数据库表自动匹配并追加或者更新数据 批量： 通常你只能用其他工具一个一个手动导入excel到数据库，但是现在，你可以一次性导入成千上万张表 简单： 只需要提供excel文件位置和目标数据库连接信息，工具就能开始工作直到excel全部被导入 快捷：全部导入100张每张1万行x20列x1MB的excel用时1分46秒， 导入一个100万行x50列x300MB的大型excel仅需3分24秒， 导入一个1000万行x30列x4GB的巨型csv仅需10分35秒， 导入一个10个sheet共1000万行x50列x2GB的巨型excel仅需31分25秒 （普通笔记本mysql测试） 智能：你是否手动导入时经常遇到错误？不要担心！工具可以轻松避免或者自动纠正。 定时: 可以使用内置定时任务功能或搭配其他定时任务程序，实现定时导入 实时: 利用定时任务，可实现当excel数据更新时，实时同步更新至数据库 安全：工具无任何互联网连接程序，完全支持本地离线或局域网工作，且已通过360安全检测并上架联想应用商店，保障数据安全
支持环境
- 操作系统：Windows
- Excel：xls/xlsx/xlsm/csv/txt
- 数据库：MySQL/Oracle/SQL Server/PostgreSQL/Access/Hive/SQLite/达梦
程序下载
使用方法：
1、点击ExcelToDatabase.exe启动程序2、选择excel并填入数据库连接信息（必填）3、选择选项（可选）4、点击开始
API：
工具提供可供其他应用程序调用的API能力，用于无图形化界面的后台导入（禁止用于同质程序套壳）。
例如：ExcelToDatabase.exe MySQL 默认.yml
命令：ExcelToDatabase.exe
参数1：MySQL--数据库类型
参数2：默认.yml--保存好的配置文件名称系列教程：
一：数据源选择与数据库连接 二：一键导入excel到数据库 三：多个excel文件批量导入到数据库 四：合并多个excel文件数据 五：定时导入excel到数据库 六：实时同步刷新excel数据到数据库 七：导入复杂表头的excel到数据库
性能测试
菜单
配置： 可打开，保存，另存，删除和导入界面配置
数据源： 文件: 选择文件作为数据源，单个或者多个被选中的文件将被 文件夹: 选择文件夹作为数据源，文件夹下所有excel都将被导入
数据库： 切换至其他数据库
定时任务： 可新增、编辑、删除、导入定时任务 设置方法可参考：定时导入excel到数据库
选项介绍:
Excel：
选择需要被导入的excel目录或者文件。 选择文件（默认）：选择一个或多个excel文件，被选中的文件将被导入 选择文件夹（通过菜单栏-数据源-文件夹切换）：选择一个文件夹，该文件夹下所有excel将被导入
数据库连接:
填入目标数据库的连接信息， 服务器：本地或远程目标数据库服务器地址 端口： 用户名： 密码： 数据库： 模式（sql server，postgresql和达梦）： 数据库文件：access和splite数据库请选择目标数据库文件
点击开始工具将首先连接数据库，如打印：数据库已连接，开始导入，则表示数据库连接成功，否则数据库未连接成功。 请准确填写数据库连接信息，可参考其他数据库工具（navicate，sql management studio，pl/sql等）连接方式并确认数据库能正常连接。
详细连接方法请参考数据源选择与数据库连接
Excel选项：
遍历子目录
遍历所选目录及其子目录下所有excel文件，仅数据源选择文件夹时有效仅导入最近更新的文件
记录上次成功导入excel的时间，下次导入时只导入该时间后有更新或新增的excel
（重新选择数据源后且文件夹变更后失效）加速读取大型Excel
打开excel后台程序以加速读取大数据量excel文件
（仅适用于已安装excel的windows，且文件格式为xlsx/xls的文件，
该选项会锁定excel并占用较多电脑资源，建议仅在文件较大时开启）CSV/TXT文件编码：
默认为AI识别，表示工具自动探测，如果能确定所有CSV/TXT文件编码，
可以指定（可选择和输入）以提高效率。AI识别有一定失败几率，
如果失败报编码格式相关问题，请另存为utf8编码格式文件或另存为xlsx再重新导入列分隔符：
指定csv文件的列分隔符，默认为逗号,行分隔符：
指定csv文件的行分隔符，仅支持单个字符串，默认为\nExcel密码：
输入加密excel的密码指定要导入的Sheet名称：
例如：Sheet1
多个sheet以逗号,分隔，不填默认全部导入指定要忽略的sheet名称起始符：
例如填写：@，那么名称以@开始的sheet都将被忽略，不填默认全部导入指定要导入列的名称：
填列名（col1）或标签（A:E（不支持csv格式和开启选项加速读取大型Excel）），多列以逗号（,）分隔，不填默认导入所有列表头所在行数：
指定将第几行作为列名，第一行从1开始，不填默认为1。
支持多级表头，例：1-3
可以填0，表示数据从第一行开始，列名以A,B,C。。。命名，
如果同时指定了要导入的目标表名（MySQL选项），工具将以顺序与表列进行匹配导入。数据开始行数：
数据开始行数，不填默认为 表头所在行数+1要导入的行数：
指定要导入的行数，默认为所有行跳过结尾行数：
跳过文件末尾行数，不填默认为0去除单元格值首尾空格：
去除单元格值首尾空格，即执行trim函数删除空行
删除单元格全为空白的行将空白单元格替换为NULL
将空白单元格替换为NULL将空白单元格替换为表列定义的默认值
将空白单元格替换为表列定义的默认值将数字类型列的空白单元格替换为0
将数字类型列的空白单元格替换为0将这些值单元格值替换为NULL：
对于常见的excel错误单元格或者某特定的值，以逗号分隔填入，
这些单元格值将被替换为null。比如：#NA,null,0，不填默认不替换将这些字符替换为空字符
多个值以逗号分割，例如：---, ,(，不填默认不替换将数据按这些列去重
多列以逗号分割，例如：col1,col2，整行去重填*，不填默认不去重使用上一行数据补全这些列的空白单元格
使用上一行数据补全所填列的空白单元格，多列以逗号分割，例如：col1,col2字段匹配
指定字段匹配规则:
按名称：根据excel表头名称匹配数据库表字段
按顺序：根据excel表头顺序匹配数据库表字段
自定义：根据自定义文件与数据库表及字段进行匹配，模板位于工具目录下的files目录的“字段匹配自定义模板.xlsx”数据库选项：
表若存在先删除：
导入前若数据库表已存在，执行drop table操作
注：谨慎操作，该项导入失败不可回滚表若存在先清空：
导入前删除表数据，执行delete from table操作（不是tuncate，支持事务的数据库导入失败可回滚）表若不存在先新建：
导入前若数据库表不存在，执行create table操作，表头将作为字段注释添加分区字段/设置分区值：
添加分区字段，并将数据导入到设置的分区值，仅hive清空分区：
导入前按设置的分区值清空分区将所有Excel数据导入到指定表：
将所有excel数据都导入到输入的目标表将这些数据导入到同一张表：
sheet名相同：将sheet名相同的数据导入同一张表，且以sheet名作为表名
excel名相同：将excel文件名相同的数据导入同一张表
excel名相似：将excel文件名相似的数据导入同一张表使用Sheet名作为表名
勾选以使用sheet名作为表名，默认使用excel文件名作为表名，多个sheet的excel使用文件名+下划线+sheet名作为表名将表名和列名中的符号都替换为下划线_
将表名和列名中的符号（冒号引号等）都替换为下划线_，
若excel名字存在特殊符号，勾选此项以避免导入失败转换表名和列名中文为拼音首字母
将表名和列名中的中文转换为拼音首字母使用正则表达式提取表名
从excel文件名中使用正则表达式提取表名，不填默认为原excel文件名为创建的表名添加前缀/后缀：
为创建的表名指定前缀/后缀以示区分创建表时添加自增主键列
创建表时在数据库表中添加一列，该列将存储数自动增长的数字，并作为该表的主键将Excel文件名（可正则提取）存到列
将exce文件名存到填写的列，可以对excel文件名应用正则表达式提取后再作为列值将导入时间存到列
将导入时间存到所填写的列使用nvarchar作为数据类型
使用nvarchar作为数据类型，默认为varchar，仅sql server当表列长度不够时，允许增加列长度：
当数据库表中列长度不够时，动态增加列长度将导入时间存到列
将导入时间存到目标列，不存在则新建当Excel存在多余的列时：
不处理：不做任何操作
忽略多余列：只导入匹配上的列数据
在表中增加新列：在库表中增加新列，执行alter table add column 操作当Excel与表数据重复时：
当库表存在主键或者唯一索引，并且出现数据重复时：
不处理：不做任何操作
忽略：忽略重复数据，执行insert ignore into 操作
更新：更新库表数据，根据唯一键更新库表数据按这些列替换表数据：
多列以逗号分割，例如：col1,col2，不填默认不更新设置最大并发连接数
建立多个连接并行插入，以提高大数据量插入效率（
该选项将在插入前commit，提交所有操作，若插入失败将不可回滚，
建议仅在文件较大或较多时开启）写入方式
快速写入: 快，适用于中小型文件和sql server数据库，若内存不足或报未知错误，请使用其他引擎
load写入: 快，适用于大型文件且数据库为mysql/hive，其中hive需要在其他选项填写服务器登录信息
bcp写入: 快，适用于大型文件和sql server，需要电脑已安装bcp工具（CMD命令行输入：bcp）
sqlldr写入: 快，适用于大型文件和oracle，需要电脑已安装好与数据库适配的sqlldr工具（CMD命令行输入：sqlldr）
并行写入: 较快，默认开启5个连接并行写入，适用于大型文件
常规写入: 教慢，适用于中小型文件和其他方式均不可行时使用其他：
服务器用户名/服务器密码/WinSCP初始化登录
hive数据库写入方式选择load写入时，需填写服务器登录信息，首次使用需点击WinSCP初始化登录按钮，使用winscp登录服务器并保存session。导入前清空日志文件
导入前清空该配置下的日志文件记录导入完成弹出提示框
导入完成弹出提示框ODBC驱动程序
sql server需安装odbc驱动程序开始前/结束后运行SQL
全部导入开始前或结束后运行SQL文件里的SQL结束后运行查询语句，并将结果导出到
结束后运行查询语句，并将查询结果导出到excel，支持xlsx和csv，无则新建，有则覆盖