SceneCalib: 自動運転におけるカメラと LiDAR の自動ターゲットレス キャリブレーション

作成者 | オートパイロット列エディター | オートパイロット列

「自動運転ハート」公開アカウントに注目するには下のカードをクリックしてください

ADAS ジャンボ乾物、手に入れられます

クリックしてエントリー→自動運転の心臓部「マルチセンサー融合」技術交流会

482943c003e9cee5a16ed6e78855e4c1.png

  • 論文リンク: https://arxiv.org/ftp/arxiv/papers/2304/2304.05530.pdf

45cf52a984f305af6eda6a14354b692d.jpeg

まとめ

477e03df0ce78ba2c53344247a6ad6f1.png

この文書では、SceneCalib: 自動運転におけるカメラと LiDAR の自動ターゲットレス キャリブレーションについて説明します。多くの 3D 認識タスクでは、カメラとライダーの正確なキャリブレーションがセンサー データ フュージョンの基礎となります。この論文では、複数のカメラと LIDAR センサーを含むシステムにおける外部パラメータと内部パラメータを同時に自己校正するための新しい方法である SceneCalib を提案します。既存の方法では、多くの場合、特別に設計された校正目標と手動操作が必要であるか、校正パラメータのサブセットを解決しようとするだけです。当社は、カメラ画像と LIDAR 点群間の明示的な対応を必要としない完全自動アプローチを使用してこれらの問題に対処し、多くの屋外環境に対して堅牢にしています。さらに、システム全体が明示的なカメラ間の制約を使用して共同校正され、カメラ間およびカメラから LiDAR の外部機能の一貫性が保証されます。

21b4ff262c1793269212d994103088ec.jpeg

主な貢献

da352365b15733c12a61b1529d544fc9.png

この論文の貢献は次のように要約されます。

1) この論文は、マルチカメラおよび単一 LIDAR システムのすべての外部パラメータとカメラ内部パラメータを共同で校正できる SceneCalib を提案します。

2) この論文の方法は画像マッチング関係のみに依存しており、対応するシーン点の事前知識を取得する必要はありません。

3) この論文は、カメラ全体の画像間の対応関係を見つけ、構造推定を LIDAR 点群から取得した表面に制限する画像特徴間の純粋な幾何学的損失関数を最小化する堅牢な方法を提示します。

b855f8bb340293b06941677a807225c8.jpeg

紙の写真と表

d1ece95a47138491ffb88bd9a61e8c3e.png

0413314c5641b4b36f36ceceb0d237fb.png

5e18867bd69e823d0b3030ec4528b5b3.png

858cbe3b3001e7df74ec9575880ffc41.png

e6f1eb066c8de53099181b9be185b514.png

271e506059bf5f613f5c1c6ac73f1f2b.png

b5382fdf13e2237848f9fa5f8e3be318.png

b30cc84f1343bbadbaa914777931feba.png

c3c7ee787878b4c4ddde2451ab1abbff.jpeg

要約する

81dddaab7d157848834cd6b1ee7cac9f.png

この論文では、自動運転において異なる特性を持つ複数のカメラと LIDAR センサーを校正するための、完全に自動でターゲットフリーの校正アルゴリズムを提案します。キャリブレーション アルゴリズムは、カメラから LIDAR への外部パラメータとカメラの内部パラメータを校正し、カメラからカメラへの姿勢変換を明示的に制限することができ、同時に LIDAR から提供される高品質の 3D 情報を使用して構造を制限します。推定。このアルゴリズムは人間の介入をまったく必要とせず (したがって拡張性が高く)、手動キャリブレーションに匹敵するキャリブレーション品質を達成し、さまざまなシナリオに対して堅牢であることを示しました。直接的なキャリブレーションは、低照度や厳しい気象条件では困難ですが、今後の主な作業領域は、特徴検出モジュールの探索です。このような条件下でより多くの画像特徴を抽出できるようになると、アルゴリズムの堅牢性が大幅に向上する可能性があります。

(1)動画講座はこちら!

自動運転の心臓部は、ミリ波レーダービジョンフュージョン、高精度地図、BEV知覚、マルチセンサーキャリブレーション、センサー展開、自動運転協調知覚、セマンティックセグメンテーション、自動運転シミュレーション、L4知覚、意思決定計画、軌道予測を統合します。 、など、各方向の学習ビデオ。ご自身で受講することを歓迎します (コードをスキャンして学習を入力してください)。

52365a31c6702e02a2f34fc025d70a4c.png

(コードをスキャンして最新のビデオをご覧ください)

動画公式サイト:www.zdjszx.com

(2) 中国初の自動運転学習コミュニティ

1,000 人近くのコミュニケーション コミュニティと 20 以上の自動運転技術スタックの学習ルートが、自動運転の認識 (分類、検出、セグメンテーション、キー ポイント、車線境界線、3D 物体検出、占有、マルチセンサー フュージョン、物体追跡、オプティカル フロー推定、軌道予測)、自動運転位置決めとマッピング(SLAM、高精度マップ)、自動運転計画と制御、フィールド技術ソリューション、AI モデル展開の実装、業界トレンド、求人リリース、スキャンへようこそ以下の QR コード、自動運転の中心となるナレッジ プラネットに参加してください。ここは本物の乾物がある場所です。この分野の大手の人々と、仕事の開始、勉強、仕事、転職に関するさまざまな問題を交換し、論文 + コードを共有します。毎日+ビデオ、交換を楽しみにしています!

9f65c6559555bbc00bb41baadb5d2f4d.jpeg

(3) 自動運転の心臓部】フルスタック技術交流会

The Heart of Autonomous Driving は、物体検出、セマンティック セグメンテーション、パノラマ セグメンテーション、インスタンス セグメンテーション、キー ポイント検出、車線境界線、物体追跡、3D 物体検出、BEV 認識、マルチセンサー フュージョン、 SLAM、光流推定、深さ推定、軌道予測、高精度地図、NeRF、計画制御、モデル展開、自動運転シミュレーションテスト、プロダクトマネージャー、ハードウェア構成、AI求人検索とコミュニケーションなど。

c14e7f7986909fb85388741a56d3d456.jpeg

Autobot Assistant Wechat への招待を追加してグループに参加します

備考:学校/会社+方向+ニックネーム

おすすめ

転載: blog.csdn.net/CV_Autobot/article/details/131356285