Databricks Delta Lake

Delta Lake 是优化存储层，为 Databricks 中的湖屋（lakehouse）中的表提供基础。Delta Lake 是开源软件，通过基于文件的交易日志扩展 Parquet 数据文件，实现 ACID 事务和可扩展的元数据管理。Delta Lake 完全兼容 Apache Spark API，并专为与 Structured Streaming 紧密集成而开发，使您能够轻松使用同一份数据进行批处理和流处理操作，并在大规模下提供增量处理能力。