Databricks Delta Lake

Delta Lake 是一个经过优化的存储层，为 Databricks 上湖仓架构中的表提供基础。Delta Lake 是开源软件，它通过基于文件的事务日志对 Parquet 数据文件进行扩展，以支持 ACID 事务和可扩展的元数据处理。Delta Lake 与 Apache Spark API 完全兼容，并为与 Structured Streaming 的紧密集成而设计，让你可以轻松使用同一份数据同时执行批处理和流式操作，并提供大规模的增量处理能力。