ゲンウェンチャレンジに参加して9日目です。イベントの詳細については、ゲンウェンチャレンジをご覧ください。
DataOpsは、その名前が示すように、DevOpsの概念から派生しており、完全に自動化された統合されたデータ収集および分析機能を1つのバスケットに提供します。昔、同社はControlHub版を購入するつもりだったので連絡を取りましたが、残念ながら担当者から「現在、中国には販売チャネルがない」との連絡がありました。そして今、オンラインのベータ版が到着しました~~~、この大きなプラットフォームの利点を見るために私に従ってください？
1.今後の4.0バージョン
StreamSets 4.0のヘルプをオンラインでずっと前に見ましたが、ダウンロードバージョンにはそれがないため、人々は非常に興味をそそられます。StreamSetsが抑制している大きなトリックは何ですか？
はい、経験を通して、私は秘密を発見しました。このバージョンは、独自のクラウドネイティブジョイントを開き、次の強力な機能を提供します。
- 仕事の管理
- ジョブ管理のスケジューリング
- 負荷、動的スケーリング
- 関数フラグメントのサポート
- クラウドプラットフォーム
- 分散コンピューティングパワー
- 優れた監視とユーザー管理
2.入場体験
StreamSetsは第3四半期の体験イベントを開始しましたが、これはまれな機会です。試してみたい友達は試してみたいと思うかもしれません。
2.1登録
入り口を登録します。ログインするにははしごが必要です。入力後、ガイドに従って5分以内に作成してください。
2.2展開スクリプトを作成する
2.3展開スクリプトをコピーする
次のような形：
curl -s https://dev.hub.streamsets.com/streamsets-engine-install.sh | bash -s -- --deployment-id="1b72d612-b533-48f0-966b-927b488231a7:cd534f44-cf0f-11eb-a0cd-b3e334979695" --deployment-token="eyJ0eXAiOiJKV1QiLCJhbGciOiJub25lIn0.eyJzIjoiMTBjNGFmMTdlNWIwYzUwOGM4MGZhZmY3MjI4NjAzZDZmZDIwNGY4MmMwYzliYWY2MjQ5MDZmZjdiZWM0NmMyNWI1YjA4N2Q0MGM1Mjc3Y2E4YmQ0NGQ2MThmNTI3MDI1ZGE3ZTFlMGI0NTg2OTZkNzU2M2U3MGJiZjQ5NGE0MzIiLCJ2IjoxLCJpc3MiOiJkZXYiLCJqdGkiOiI5YmFiMDk1MS1mM2JhLTQxYTYtYjk0NC00ZTE4NzVlZDEwZTciLCJvIjoiY2Q1MzRmNDQtY2YwZi0xMWViLWEwY2QtYjNlMzM0OTc5Njk1In0." --sch-url="https://dev.hub.streamsets.com"
复制代码私のスクリプトをコピーすると、コンピューティングパワーエンジンが追加されます。私に連絡して、体験できるアカウントを開くことができます。もちろん、自分で作成したスクリプトをコピーしたので、直接体験することができます。
2.4コンピューティングパワーエンジンを増やす
最初にクラウドホストが必要です~~~次にjavasdkをインストールしてから、上記のスクリプトを実行します。
# 1.安装javasdk
yum -y install java-1.8.0-openjdk*
# 2. 复制你的部署脚本
复制代码コンピューティングパワープラットフォームには1G以上のメモリが必要であるため、メモリが十分であることを確認してください。Yを最後まで押します。StreamSet 4.0がデプロイされ、クラウドプラットフォームに接続されました。
2.5コンピューティングエンジンを確認する
コントロールハブプラットフォームの[セットアップ]-[エンジン]をクリックすると、計算能力が追加されたコンピューターを開くことができるはずです。
3パイプラインを体験する
ビルドパイプラインをクリックします。1つ開くと、次の図が表示されます。各コンポーネントのアイコンの外観が新しくなり、カラーマッチングが非常に快適になります。
3.1買収パイプラインを構築しましょう
コンポーネントをドラッグアンドドロップして配置すると、パイプラインが数分で構築されます。
3.2バージョン管理
クラウドプラットフォームはチェックイン機能を提供し、バージョンの問題は非常によく解決されています。
3.3プレビューの実行
小さな目のアイコンをクリックします。データプレビューは次のとおりです。
4経験の断片（機能）
以前のSDCプラットフォームでは関数を作成できなかったため、コードを再利用できませんでした。このスニペットはどうですか？
4.1新しいセグメントを作成する
次のように、単純なhttpリクエストフラグメントを作成します。はい、フラグメントはソースとターゲットを必要としません。ソースとターゲットは関数のパラメーターと戻り値です。
4.2次のフラグメントのデバッグ
ソースがないため、デバッグにはテストソースを選択する必要があります。
4.3バージョン管理
フラグメントに関しては、バージョン管理もあります。
4.4フラグメントの引用
新しいパイプラインを作成するには、作成したばかりのフラグメント関数を参照します。こんにちは！
5つの仕事
新しく追加されたジョブは、以前の単純実行パイプラインのアップグレードバージョンです。監視情報が完成しました。
5.1ジョブを作成する
5.2スケジューリングジョブを作成する
スケジューリングジョブでは、パイプラインを定期的に開始できないことをまだ心配していますか？
6データと計算能力の監視
7ユーザー管理
単純なユーザー管理に別れを告げます。ここでは、一般的に使用されるユーザー、グループ、監査、API認証キーなどを紹介します。
8まとめ
あなたたちは唖然としますか？
強力な統合プラットフォームは、私たちが頭の中で考えていることです。
運転中ははしごが不要で、操作がとてもスムーズです。現在ベータ期間であり、後で請求される可能性があります。高すぎないことを願っています。
気に入ったら、クリックしてフォローしてお気に入りに追加してください。あなたのクリックが私の原動力です！