Databend オープンソース週刊第 136 号

Databendは、最新のクラウドデータウェアハウスです。大規模な分析ニーズをサポートするために、柔軟性と効率性を考慮して設計されています。無料でオープンソース。今すぐクラウドサービスを体験してください: https://app.databend.cn。

データベンドの内容

今週は Databend の新しい開発を探索し、あなたの心にもっと近い Databend に出会ってください。

Databend のタスクと通知を理解する

Databend は、完全なタスクと通知メカニズムをサポートするようになりました。

タスクは、プランまたは DAG ベースのタスクグラフに従って、指定された SQL ステートメントを実行します。通知の統合により、外部メッセージングサービスに通知を送信できます。

CREATE TASK IF NOT EXISTS mytask
 WAREHOUSE = 'mywh'
 SCHEDULE = 30 SECOND
 ERROR_INTEGRATION = 'myerror'
AS
BEGIN
    BEGIN;
    INSERT INTO mytable(ts) VALUES(CURRENT_TIMESTAMP);
    DELETE FROM mytable WHERE ts < DATEADD(MINUTE, -5, CURRENT_TIMESTAMP());
    COMMIT;
END;

上の例では、mytaskという名前のタスクを定義しています。これはmywhコンピューティングクラスター上で 30 秒ごとに実行されます。このタスクは、INSERT ステートメントと DELETE ステートメントを含む複数ステートメントのトランザクションを実行します。タスクが失敗すると、myerrorと呼ばれるエラー統合がトリガーされます。

タスクおよび通知関連のメカニズムは、Databend Cloud ですぐに使用できます。詳細については、Databend チームに問い合わせるか、以下のリソースを参照してください。

コードコーナー

Databend とその周囲のエコシステムのコードスニペットまたはプロジェクトを調べてみましょう。

Databend と Snowflake: データ取り込みベンチマーク

最近、Databend と Snowflake は、パフォーマンスやコストなどの側面をカバーするデータ取り込みベンチマークテストを実施しました。これには、主に次の 4 つの基本テストが含まれていました。

TPC-H SF100 データセットの読み込み、約 6 億行の大規模データ向け。
ClickBench は、約 1 億行の大きな幅のテーブルデータを対象としたデータセットの読み込みをヒットします。
1 秒の鮮度: 1 秒の鮮度制限の下でプラットフォームのデータ取り込み機能を比較します。
5 秒の鮮度: 5 秒の鮮度制限の下でプラットフォームのデータ取り込み機能を比較します。

データセット読み込みの比較

データの鮮度の比較

興味のある方は、Databend Cloud の低コストで高性能のデータ取り込みについて学ぶために、次のドキュメントを読んでください。

ドキュメント | Databend と Snowflake: データ取り込みベンチマーク

ハイライト

ここではいくつかの注目すべきイベントを紹介します。興味のあるものが見つかるかもしれません。

CROSS JOIN はオーバーフローをサポートします。
集約ハッシュテーブルはオーバーフローをサポートします。
逆索引のリフレッシュをサポートします。
より多くのデータ分析ツールをサポートするには、時刻と日付に関連する関数の関数エイリアスを追加します。

次は何だろう

私たちは常に最先端のテクノロジーと革新的なアイデアを受け入れており、コミュニティに参加して Databend に活力を注入することを歓迎します。

TOP K 構文のサポート

データベンドプランはSELECT TOP、結果セットの上位 K 項目を選択するために使用されるステートメントをサポートしています。

次のSELECT TOPステートメントは、順序付けされた結果セットの最初の 4 つの項目を選択するために使用されます。

select TOP 4 c1 from testable ORDER BY c1;

次のSELECT ... LIMITステートメントと同等です。

select c1 from testable order by c1 limit 4;

これは、Rust と Databend に興味のある学生が参加できるように設計された、最初の号 (初心者向けの号) として最適です。

問題 #14972 |機能: トップ K 構文のサポート

このトピックに興味がある場合は、問題のいくつかを解決してみたり、ディスカッションや PR レビューに参加したりできます。あるいは、https://link.databend.rs/im-feeling-luckyをクリックして、ランダムな質問を選択することもできます。頑張ってください。

新しい貢献者

あなたのおかげで、Databend はコミュニティで新しい人々と出会うことができます。

@suimenno3002 は、ヒストグラム集計関数#14839のサポートを実装しました。

変更履歴

最新の開発状況を把握するには、Databend の毎日のビルドの変更ログを確認してください。

アドレス: https://github.com/datafuselabs/databend/releases

貢献者

今週も素晴らしい仕事をしてくださった寄稿者の皆様に心より感謝いたします。

私達と接続

Databend は、リアルタイム分析も実行できる、オブジェクトストレージに基づくオープンソースの柔軟で低コストの新しいデータウェアハウスです。新世代のオープンソースデータクラウドを構築するために、クラウドネイティブデータウェアハウスソリューションを一緒に検討していただけることを楽しみにしています。