在DBeaver中通过DuckDB来分析本地CSV文件

你是否面对几个G的csv文件束手无策?你是否想使用SQL查询多个csv文件的数据?你是否使用excel打开csv文件时,对于数字格式的显示无能为力?来吧,使用DuckDB和DBeaver可以让你想使用数据库一样来分析本地的csv数据。

  • 打开 DBeaver ;
  • 新建数据库连接,选择DuckDB;

在这里插入图片描述

  • 在路径中输入 :memory: ,创建一个内存类型的 DuckDB 数据库;

在这里插入图片描述

  • 点击测试连接,安装响应的驱动;

在这里插入图片描述

  • 安装成功后,即可连接到DuckDB数据库,点击确定;
  • DuckDB不需要新建数据库,直接将本地的CSV文件导入指定的表就可以,以本地CSV文件新建表的语句,如下所示:
CREATE TABLE table1 AS FROM read_csv('E:\xxxxxxxxx.csv', all_varchar=true);

all_varchar=true 是指以字符串的形式读取所有数据,避免某些数据被识别为数字后以科学计数法展示

  • 执行
show tables;

就可以查看导入的表,使用正常的sql语句来查询数据了。

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐