TGViewer
开发者工具箱|编程·开发工具·资源 开发者工具箱|编程·开发工具·资源 @devtoolboxhub · 780 subscribers
Post #1649 4
DuckDB:直接在 CSV 上跑 SQL,无需导入

DuckDB 让你把 CSV 当作表直接查询。只需一行安装命令 python -m pip install duckdb,随后在 SQL 的 FROM 子句中写文件名(或使用 * 匹配文件夹),即可得到完整结果。它会自动推断列类型,支持日期、整数、文本、浮点等,返回的结果表会在列名下显示类型,方便检查。

- 一次性查询:SELECT Country, COUNT(*) AS invoices, ROUND(SUM(Total),2) AS revenue FROM 'invoices.csv' GROUP BY Country ORDER BY revenue DESC LIMIT 5
- 批量文件:SELECT COUNT(*) FROM 'months/*.csv' 直接把同结构文件合并查询。
- 与 pandas 互通:.df() 返回 DataFrame,或直接 SELECT * FROM my_dataframe。

DuckDB 适合一次性分析大文件或文件夹,SQLite 仍是持久数据库的首选。


github.com/michaelnocito/duckdb-demo

#开发者 #工具 #DuckDB #CSV #Python #pandas #SQL #数据分析
@DevToolboxHub
More from @devtoolboxhub
  1. Sep 26, 2026五仓库架构踩坑:Gitlink 与双 CI Flude 团队复盘了多仓库架构的实践代价。项目从第一分钟起就选择拆分成独立仓库,Pipeline、engine、design-docs…
  2. Sep 26, 2026Xeno Core:TypeScript 后端架构框架 Node.js 复杂系统的架构选型往往决定代码的长期命运。开发者常在两条路之间纠结:要么依赖重度使用实验性装饰器和反射(如…
  3. Sep 25, 2026用 SLO 给 AI Agent 的行为定个预算 Grafana Labs 提出把可靠性工程里的错误预算(error budget)思路用到 AI Agent 上。延迟、token…
  4. Sep 25, 2026Xcode 27.2 改用 JSON 项目格式 Xcode 27.2 用基于 JSON 的 project.xcproj 取代了沿用多年的 project.pbxproj。新建项目…
  5. Sep 25, 2026PostgreSQL 的 max_prepared_transactions 该不该开 prepared transaction 是脱离会话独立存在的两阶段提交事务。执行 PREP…
  6. Sep 24, 2026RPI 实战:用 Claude Code 子代理拆分研发流程 一个约十几个产品的小团队(helpdesk、MES、邮件托管、高校 AI 助手)在 monorepo 里日常使用 Cl…
Threads Profile ViewerView any public Threads profile without an account.Open ThreadLook →Writing with AI? Make it sound human.Metric37 rewrites AI drafts so they read naturally. Free AI detector, 1,500 words free.Try Metric37 →