漫话开发者 - UWL.ME 精选全球AI前沿科技和开源产品
2026-08-27 talkingdev

DuckDB与数据分析“物理学”的变革:AWS收购DuckLabs背后的技术信号

近年来,以DuckDB为代表的嵌入式分析引擎正在改变数据处理的基本范式。过去,大规模数据分析往往依赖由多台机器组成的分布式系统,以应对数据量和计算复杂度的挑战。然而,随着单机硬件性能的显著提升,尤其是内存容...

Read More
2026-05-01 talkingdev

DuckDB 实现全文搜索:轻量级数据库的新突破

DuckDB,作为一款高性能的嵌入式数据库,近年来在数据分析领域备受关注。近日,一篇技术博客详细介绍了如何在 DuckDB 中实现全文搜索功能。该文章不仅提供了详细的技术实现步骤,还探讨了该功能对轻量级数据库应用场...

Read More
2025-11-14 talkingdev

数据湖性能对决:Polars、DuckDB、Daft与Spark处理650GB Delta Lake基准测试

近日,数据工程领域开展了一项重要的性能基准测试,针对当前主流的四大数据处理框架——Polars、DuckDB、Daft和Spark,在亚马逊S3存储的650GB Delta Lake数据集上进行了全面对比。测试聚焦于现代数据架构中的关键性能...

Read More
2025-11-05 talkingdev

开源|Snowflake Labs发布pg_lake:让PostgreSQL变身数据湖仓系统

Snowflake Labs近日推出开源项目pg_lake,通过将Apache Iceberg数据表格式与数据湖文件直接集成到PostgreSQL中,实现了传统关系型数据库向湖仓一体架构的演进。该项目允许用户在PostgreSQL环境中直接创建和修改Icebe...

Read More
2025-11-01 talkingdev

浏览器内查询TB级数据:DuckDB-WASM重新定义图书馆与数字人文的数据发现

哈佛大学图书馆创新实验室近期提出了一种突破性的数据发现方案,通过DuckDB-WASM技术实现在浏览器中直接处理TB级数据。这项技术将传统需要服务器集群支撑的大数据分析能力下沉到前端,用户无需安装任何软件即可在网...

Read More
2025-10-08 talkingdev

开源|Arc时序数据仓库:原生部署每秒处理189万条记录,DuckDB+Parquet+MinIO强强联合

Basekick Labs团队在GitHub开源的高性能时序数据仓库Arc引发技术社区关注。该项目基于DuckDB列式存储引擎、Parquet文件格式和MinIO对象存储构建,在原生部署环境下实现了每秒189万条记录的写入性能,为物联网、金融...

Read More
2025-05-04 talkingdev

DuckDB:过去十年最具影响力的地理空间软件

DuckDB作为一种嵌入式数据库系统,近年来在数据处理领域崭露头角。最新分析指出,它可能是过去十年中最重要的地理空间软件。其成功之处在于将地理空间处理能力集成到通用数据工具中,大大降低了地理空间数据的处理门...

Read More
2025-04-25 talkingdev

DuckDB UI推出实时SQL查询功能:输入即得结果

数据库技术领域迎来创新突破,DuckDB最新发布的UI界面实现了'Instant SQL'功能,允许用户在输入SQL查询语句的同时实时获取结果反馈。这项技术通过优化查询解析器和执行引擎的协同工作,将传统批处理模式转变为交互式...

Read More
  1. Next Page