跳到主要內容

三角洲湖

デタスワンプからの脫卻とデタ加工の柔軟性をもたらす,次世代型デタレク/デタウェアハウス

banner-hero
marketure

三角洲湖とは

三角洲湖(デルタレイク)は,AWS S3, Azure數據存儲、湖HDFSなどの既存のデータレイクファイルストレージ上に構築されるオープンソースのストレージレイヤーです。データレイクの信頼性,セキュリティ,性能を高め,ストリ,ミング/バッチ処理の両方に柔軟に対応します。構造化,半構造化,非構造化データを単一システムに集約してデータサイロを解消し,コスト効率およびスケーラビリティの高いレイクハウスを実現します。

Delta-Lake-Image

デ,タスワンプからの脫卻

リアルタ@ @ムストリームを含む,すべてのデータの信頼できる単一真実情報源を提供し,データチームが常に最新のデータで作業できるようにします。酸トランザクションとスキーマエンフォースメントのサポートにより,三角洲湖は,従來のデータレイクに欠けていた信頼性を提供します。信頼性の高い,最新のデータを組織全體で活用し,分析をはじめとするデータプロジェクトをデータレイク上で直接実行できるようになります。結果として,デ,タドリブンな意思決定が最大50倍高速化します

unity-catalog

オ,プンでセキュアなデ,タ共有

三角洲分享は,セキュアなデ,タ共有のための新しいオ,プンプロトコルです。デ,タの場所を問わず,組織內外でのデ,タ共有を容易にします。統一目錄とのネティブな統合により,組織間の共有デタを一元管理,監視できます。データアセットをベンダーやパートナーとセキュアに共有して連攜を強化すると同時に,セキュリティおよびコンプライアンスの要件を満たします。また,主要なツールやプラットフォームとの統合により,任意のツールを使用した共有データの視覚化,クエリ,エンリッチメント,ガバナンスが可能です。

delta-lake-product

超高速性能

Apache火花™を基盤とする三角洲は湖大規模なスケーリングと高速性を実現します。性能を左右する電子郵箱ンデックス機能などの最適化により,Etlワ,クロ,ドが最大48倍高速化したことが実証されています。

delta-lak

オプン,アジャル

三角洲湖のデータはオープンなApache拚花形式で保存されるため,あらゆる互換リーダーで読み取ることができます。APIはオープンで,Apache火花と互換性があり,データパイプラインの変更は最小限ですみます。磚で Delta Lake を利用することで、オープンソースの広範なエコシステムへのアクセスが可能になり、獨自形式によるデータのロックインを回避できます。

Pipeline-Graph

デ,タエンジニアリングの自動化と高信頼性

Delta活動表が三角洲湖のデータを最新かつ高品質に保つデータパイプラインの構築・管理を容易にし,データエンジニアリングをシンプルにします。また,宣言型パイプラインの開発,高信頼性データ,クラウドスケールの本稼働環境がレイクハウス基盤の構築を可能にし,データエンジニアリングによるETLの開発·管理をシンプルにします。

unity_catalog

大規模運用のためのセキュリティとガバナンス

三角洲湖は,詳細なアクセス製禦によりデ,タガバナンスを確実にしてリスクを軽減します。これは通常のデタレクでは不可能です。データレイクのデータを迅速かつ正確に更新し,GDPRをはじめとする規製へのコンプライアンス,監査ログによる高度なデータガバナンスの維持を可能にします。これらのケ@ @パビリティは,レ@ @クハウス初のマルチクラウドデ@ @タカタログである統一目錄の一部として數據庫にネ目錄目錄ティブに統合され,拡張されています。

ユ,スケ,ス

Delta Lake使用案例

リアルタムデタによるbi .

ビジネスインテリジェンス(BI)のワークロードをデータレイク上で直接実行することで,新鮮なリアルタイムデータの素早いクエリを可能にし,データドリブンな意思決定を加速させます。三角洲湖は,データウェアハウスの性能とデータレイクの経済性を同時に実現するマルチクラウドのレイクハウスアーキテクチャの運用を可能にします。SQLワークロードの実行においては,従來のクラウド型データウェアハウスと比較して最大6倍の価格性能を発揮します。

詳しく見る
Delta Lake使用案例

バッチ/ストリミングの両方に対応

バッチ/ストリ,ミング両方の入力を単一のシンプルなア,キテクチャで処理し,冗長なシステムや運用上の課題を回避します。三角洲湖のテーブルは、バッチテーブルでもあり、ストリーミングソースとシンクでもあります。ストリーミングデータの取り込み、バッチ履歴バックフィル、対話型クエリは全てすぐに動作し、Spark の構造化ストリーミングと直接統合されます。

Delta Lake使用案例

規製への対応

δは湖,不正なデータの取り込み,コンプライアンスのためのデータ削除,変更データキャプチャのためのデータの変更といった課題を解決します。データレイクでの酸トランザクションがサポートされているため,全操作を成功させるか,または,再実行に備えて全操作を完全に中斷させます。デタパプランを新たに作成する必要はありません。さらに,三角洲湖によって,全トランザクションの履歴がデ,タレ,クに記録されます。過去のバージョンのデータに容易にアクセス可能にすることで,GDPR / CCPAなどのコンプライアンス要件を満たします。

デタンジェストのネットワク

ネイティブのコネクタが,あらゆるアプリケーション,データベース,ファイルストレージからのデータを迅速・容易に三角洲湖に取り込みます。

無料お試し·その他ご相談を承ります

Baidu
map