サービスデータ処理をログに記録:ルールシナリオの概要

無料振付:シナリオ1を使用します

シンプルなPythonのスタイルの設定ファイルによって編成、あなたは一般的にデータ処理要件と自由度の80%に到達するためにコードを記述する必要はありません。
画像

以下の構成を含んで提供される機能内蔵、およびスケーラビリティを含みます。

  • 割り当てフィールド
  • 抽出フィールド
  • 通用操作
  • 代入変換
  • シリアルコンバータ
  • 部門イベント
  • 予約済みのイベント
  • ドロップイベント
  • 予約フィールド
  • 廃棄場
  • 自動抽出KV
  • 名前を変更するフィールド
  • 出力(コピー)イベント

シナリオ2を使用してください:組み込みの変換モジュールを使用します

サービスデータ処理機能を提供ログイン完全内蔵の処理モジュール、特に正規表現、KVのため、JSON、検索およびその他のサポート柔軟かつ完全な。全体的な組み込みの変換モジュールは、従来のデータ処理を完全にサポートして変換し、あなたは、総変換ニーズの80%をカバーすることができます。

  • 列の値(静的/コピー/ UDF):計算サポート様々な機能
  • 通常の抽出カラム:通常のフルサポート、動的抽出フィールド名などを含みます
  • CSV形式の抽出物が:標準のCSVをサポート
  • 辞書マッピング:ダイレクト・フィールドのマッピング
  • 外部OSSマルチカラムマッピング:データ強化は、広い外部OSSの関連付けからCSVをマッチング、増分リフレッシュをサポートしています。
  • 外部データベースのマッピングマルチカラム:関連する外部データベースからデータ強化、ダイナミックリフレッシュ、広いマッチングをサポートしています。
  • 外部Logstore多列マッピング:関連する外部logstoreからデータ強化は、増分リフレッシュ、部分一致をサポートしています。
  • 自動KV:自動抽出KVは、また、サポートカスタム区切り文字オートエスケープシーンを
  • JSONは自動的に拡張:サポート、JSONコンテンツを自動展開する配列など、カスタム・プロセスのサポートが開始されました。
  • JSON-JMESフィルタ:JMESは、プロセスを選択した後、動的計算をサポートしています。
  • (JSON配列や文字列に基づいて)スプリットイベント:文字列のイベントベースのアレイの分割またはJSONの配列
  • 行(JSONに基づいて、文字列またはアレイ)の組み合わせ、複数:文字列またはJSONの配列に基づいてマルチフィールドマージアレイ

シナリオ3を使用してください:組み込みの表現機能を使用します

現在、外部プラグインはまだ開くに書き込むサービスログが、内蔵提供機能の150種類、を含むメインストリームデータ処理ニーズをカバーします。

  • 基本的な操作機能:フィールド値、制御、比較、判定コンテナ、マルチフィールドオペレーション
  • 伝達関数:基本的な型変換、デジタル変換
  • 算術関数:計算多値比較演算、数学的計算、および他の数学的パラメータに基づいて
  • 文字列関数:マルチフィールド操作、符号化/復号化、ソート、フラッシュバック、あるいは、従来の構造では、判断、セグメンテーション、フォーマット、および他の文字セットが決定される見つけます
  • 日付時刻関数:取得の日付時刻スマート変換、取得日時属性、日付と時刻、取得のUnix時刻取得日時文字列、変更日、変更日と時刻、日付と時刻の比較
  • 正規表現関数:フィールド抽出、判断力を合わせる、あるいは、分類をカット
  • JSONとXML機能:抽出フィルタリング
  • その他の高階関数:Syslogの機能など

使用シナリオ4:拡張またはUDF

基礎となるPythonのエンジンは現在、理論的には、任意のPythonライブラリは、ログデータ処理サービスを入力するには少しパッケージ、現在のカスタムUDF機能、まだ開いていないことができ、使用されるが、外部の顧客は基本的に完成組み込み関数150+(とカウント)を使用して、作品のほとんどは、需要を満たすことができない、チケットを高め、タイムリーなサポートを得ることができます。

さらに参照して

ようこそスキャンコードは、直接タイムリーとアリクラウドエンジニアにリアルタイムの更新をサポートする公式のネイルグループ(11775223)に参加するには:
画像

おすすめ

転載: yq.aliyun.com/articles/704937