Dremio
詳細情報
- 開発者
- Tomer Shiran、Jacques Nadeau
- 公開年
- 2015年
- 種類
- クエリエンジン/レイクハウス
Apache Arrowの生みの親たちが作った、Arrowベースのレイクハウス向けクエリエンジン。データレイク上のファイルに直接SQLを投げる。
2015年にMapR出身のTomer ShiranとJacques Nadeauが創業した。Dremioは、独立したウェアハウスを置かず、データレイク上のオープンなテーブル形式(現在はApache Iceberg)に対して直接SQLを実行する。また、異なるツール間で再シリアライズなしに列指向データを共有できるインメモリ形式Apache Arrowの推進役でもあった。「Reflections」は部分的な結果をマテリアライズしてクエリを高速化する。位置づけはStarburstと同じで、Snowflakeのクローズドなウェアハウスに対するオープンなレイクハウスである。争点は、安価なオブジェクトストレージの上のクエリ層を誰が握るかだ。