データ処理サービスログ:ジョブ診断ガイド

著者:唐カイ

データ処理診断ダイアル

サービス処理機能の動作状態をダッシュ​​ボード経由で見ることができるログ、入り口が「支配インサイト」ボタン処理一覧ページは以下のとおりです。

画像

ダッシュボードにジャンプすると、ジョブ名に基づいて、それぞれであるためには、インスタンスID、他のタスクのためのソースLogStoreステータス画面変更ボタンをクリックします。図は、現行インスタンスID(90c9d47714dbb807d47c13b819d3e7df)操作をデフォルトでは、例えば、以下を参照してください。

画像

注意:プレビュージョブステータスデータは、このレポートに含まれていません。

概要インデックス

画像

  • 読み出しログの総数:ログの総数に対するソースから読み出さLogStore各シャード
  • ログの総配信:ログと正常対象のログ片の総数をLogStoreに送達するためにソースからLogStore各シャードを読ん
  • 失敗したログの総数:ログソースから読み取られ、合計の処理中に物品に発生する失敗回数をログLogStore各シャード
  • 丸太の配達は占め:首尾よくターゲットLogStoreソースLogStoreに配信ログ片の数は、ログの数に比例を読みます

処理速度指数

画像

4つの指標を含む、データ処理ログの数、ウィンドウ内の毎分の統計:

  • 受け入れ:記事番号はソースログLogStoreから読み取ります
  • ドロップ:廃棄されたコードの予想数を読んで、ソースからのログを押しLogStore
  • 配信:ソースLogStoreから読み込まれ、正常に配信LogStore対象のログ個数
  • 失敗:LogStore各シャードがログにソースから読み出され、失敗したログの数は、処理中に発生しました

消費者の遅延率指数

画像

ソースLogStore各シャード指標を読み込むための統計処理タスク内の分窓あたり:

  • 消費者の遅延:現在の時間 - シャードは最近、時間のログを完了した(サービス時間、時間到着レベルのサーバーのログを書き込むログ)
  • 消費率:ログの数を読んでいる分窓あたりシャード

:リアルタイムに対処する(最新)ログコンシューマー遅延は1秒程度、一般的であり、処理時間は、履歴ログ・データであれば、ミッション開始遅延の消費段階が高くなると、このデータ処理を続けていくことが、消費が進行し続け追いつき、最終的には低レイテンシーのレベルを達成します。

インジケータアクティブシャード

画像

直近の期間に発生した秒あたりに処理されるログの行数シャードグレードは、(受け入れ、ドロップ、配信、失敗)を表示します。

異常詳細

画像

あなたは、フィールドを理由問題は、コードエラーにつながる可能性が見ることができます。また、深い内部-ETLログLogStore(自由に使用する)の現在のプロジェクトに行くことができます:

画像

キーワードERRORまたはWARNINGによって完全なコード実行エラーログを表示します。

問題が解決しない場合は、この部分的な情報連絡ログサービスのサポートを提供することができます。

さらに参照して

ようこそスキャンコードは、直接タイムリーとアリクラウドエンジニアにリアルタイムの更新をサポートする公式のネイルグループ(11775223)に参加するには:
画像

おすすめ

転載: yq.aliyun.com/articles/704939