Apache Linkis バージョン 1.5.0 がリリースされました。バージョン 1.5.0 への貢献と努力に対し、コミュニティ メンバー全員に非常に感謝しています。
このバージョンはメジャー バージョンであり、コミュニティが長い間待ち望んでいた多くの機能が追加されています。たとえば、登録センターは Nacos の切り替え、Hbase、Nabula、repl などの新しいエンジン、新しい SPARK エンジンをサポートしています。プラグインは Yarn Cluster モードをサポートし、SPARK および Flink エンジン プラグインは Jar タスクやその他の機能の k8s 送信をサポートし、複数の既知の問題が修正されました。
詳細については、Apache Linkis 1.5.0 の正式バージョン情報を確認してください。
https://linkis.apache.org/zh-CN/download/release-notes-1.5.0
Apache Linkis 1.5.0 バージョンの紹介
● 登録センターは Eureka から Nacos への切り替えをサポートします
● Hbase エンジン プラグインが追加され、すべての Hbase-shell 構文をサポートし、複数のバージョンと互換性があります。
● Nebula エンジン プラグインを追加しました
● Java および Scala コード スニペットの実行をサポートするための Repl インタープリタ エンジン プラグインを追加しました。
● k8s で Spark EC をサポートし、jar および Pyspark タスクを送信する
● k8s で Flink EC をサポートし、jar タスクを送信する
● Spark エンジン プラグインは、糸クラスター実行モードをサポートします。
● Linkis JDBC ドライバーは複数のエンジンとバージョンの選択をサポートします
● 基本データ管理に構成項目管理が追加され、管理者が各エンジンプラグインの構成項目を管理できるようになります。
● 管理コンソールに運用保守ツールが追加され、管理者によるユーザー構成の調整やテンプレート管理をサポートするユーザー構成管理が追加されました。
● [実験的] エントランスはタスクの引き継ぎをサポートし、エントランスをステートレスにします。
略語：
● COMMON：リンクコモン
●ENTRANCE：リンキスエントランス
● EC: EngineConn
● ECM: EngineConnManager
● ECP: EngineConnPlugin
● DMS: データ ソース マネージャー サービス
● MDS: メタデータ マネージャー サービス
● LM: リンクマネージャー
● PS: Linkis 公共サービス
● PE: リンク公開拡張
● RPC: Linkis 共通 RPC
● CG: Linkis コンピューティング ガバナンス
● 導入: Linkis 導入
● WEB: リンクされたウェブ
● ゲートウェイ: Linkis ゲートウェイ
● EP: エンジンプラグイン
新機能
● [EC] LINKIS-5008 登録センターが Nacos をサポート
● [ゲートウェイ] LINKIS-4992 ゲートウェイはアクセス制御構成をサポートします
● [EC-REPL] LINKIS-4937 scala および Java コードの実行をサポートするための Repl インタープリター エンジン プラグインを追加しました。
● [EC-NEBULA] LINKIS-4903 は 星雲エンジン プラグインを追加します
● [EC-HBASE] LINKIS-48 91は Hbase エンジン プラグインを追加します
● [EC-SPARK] LINKIS-4850 SPARK エンジン プラグインが On Yarn Cluster 操作をサポート
● [EC-SPARK] LINKIS-4867 SPARK エンジン プラグインは、k8s での Jar タスクの送信をサポートします
● [EC-SPARK] LINKIS-4906 SPARK エンジン プラグインは、k8s での pyspark ジョブの送信をサポートします
● [JDBC-DRIVER] LINKIS-4930 JDBCDriver は複数のエンジン バージョンをサポートします
● [EC-FLINK] LINKIS-4753 Flink エンジン プラグインが 1.16.2 にアップグレードされ、複数のバージョンと互換性があります。
● [ENTRANCE] LINKIS-4282 実験的: エントランス サービスは HA をサポートします
● [MONITOR] LINKIS-4905 実験的: Linkis Monitor サービスを追加します。
● [WEB] LINKIS-4940 実験的: 管理コンソール フロントエンドの新しいアーキテクチャのアップグレード
機能強化
● [ECM] LINKIS-4990 は、 管理ステーションによる EC ログ ファイルのダウンロードをサポートします。
● [EC] LINKIS-4982 EC インジケーターを強化し、ロック アイドルおよびその他の時間インジケーターを追加します。
● [WEB] LINKIS-4954 管理コンソールにユーザー構成管理ページを追加
● [EC-SPARK] LINKIS-4961 Pyspark はデフォルト クラスのインポートをさらに追加します
● [EC-PYTHON] LINKIS-4835 Python エンジン プラグインにより、印刷とエラー メッセージの印刷が最適化されます。
● [EC-SPARK] LINKIS-4896 SPARK Once タスクは EngineConnRuntimeMode タグ構成をサポートします
● [LM] LINKIS-4914 LM リソースの並べ替えと選択ルールが大規模なものから小規模なものまで最適化されます。
● [WEB] LINKIS-4935 管理コンソールは、spark.conf パラメータと複数の SPARK ネイティブ パラメータの構成をサポートします。
● [EC] LINKIS-4714 EC はデバッグ ポート範囲の指定をサポートします
● [EC-FLINK] LINKIS-5023 Flink エンジン プラグインは、ユーザー定義の log4j 構成の読み取りをサポートします
● [PES] LINKIS-4838 ファイルの読み取りおよび書き込みインターフェイスは、より多くのパラメータと操作をサポートします
● [LM] LINKIS-4850 LM は K8s リソースの管理をサポートします
● [PE] LINKIS-4847 モジュール数を最適化し、パブリック データ ソース モジュールを結合する
● [PE] LINKIS-4853 は モジュールの数を最適化し、パブリック クライアント モジュールを pes-client モジュールにマージします。
● [PE] LINKIS-4854 公共サービスの複数のモジュールを結合するためにモジュールの数を最適化します。
● [PE] LINKIS-4934 データ ソース サービスは、結合と個別の展開をサポートします。
● [EC-FLINK] LINKIS-5025 Flink エンジン プラグインはデフォルト設定のロードをサポートします
● [EC-JDBC] LINKIS-5007 JDBC エンジン プラグインは、複数のタスク間のタスク連結をサポートします。
リペア機能
● [EC-Flink]LINKIS-5041 対話型Flink SQL印刷ステータス取得エラーログの問題を修正
● [MDS]LINKIS-4998 ES データ ソースは 6.X および 7.X と互換性があります。
● [EC-SPARK]LINKIS-4996 SPARK エンジン プラグイン Scala タスクは、タスク ログへのエラー情報の出力をサポートします。
● [ENTRANCE]LINKIS-4967 SQL 解析コメント内のセミコロンによって引き起こされる解析エラーを修正
● [EC]LINKIS-4920 結果セットの null が文字列 NULL として返される問題を修正しました。
● [CLI]LINKIS-4919 クライアントは同時 NPE 問題を修正します
● [CG]LINKIS-4915 LM の ECM 選択ロジックにおける誤った選択負荷が高い問題を修正しました。
● [LM]LINKIS-4860 linkis-httpclient post インターフェイスの中国語文字化けの問題を修正
● [LM]LINKIS-4771 Linkis-Cli のジョブ送信は 1 回モードで行う必要があります
● [LM]LINKIS-4731 Kill EC スクリプトは ECM プロセスをスキップする必要があります
詳しい案内
● このバージョンの概要: https://linkis.apache.org/zh-CN/download/release-notes-1.5.0
● インストールと展開の詳細については、ガイドを参照してください: https://linkis.apache.org/zh-CN/docs/latest/deployment/deploy-quick
● 公式ダウンロードリンク: https://linkis.apache.org/zh-CN/download/main
コミュニティ貢献者
Apache Linkis 1.5.0 のリリースは、Linkis コミュニティのコントリビュータと切り離すことができません。以下のコントリビュータ (順不同) を含む、すべてのコミュニティ コントリビュータに感謝します。
