JP6275887B2 - センサ較正方法及びセンサ較正装置 - Google Patents
センサ較正方法及びセンサ較正装置 Download PDFInfo
- Publication number
- JP6275887B2 JP6275887B2 JP2017000575A JP2017000575A JP6275887B2 JP 6275887 B2 JP6275887 B2 JP 6275887B2 JP 2017000575 A JP2017000575 A JP 2017000575A JP 2017000575 A JP2017000575 A JP 2017000575A JP 6275887 B2 JP6275887 B2 JP 6275887B2
- Authority
- JP
- Japan
- Prior art keywords
- sensors
- uav
- sensor
- item
- subset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 128
- 230000008859 change Effects 0.000 claims description 40
- 238000005259 measurement Methods 0.000 claims description 27
- 230000007246 mechanism Effects 0.000 description 55
- 238000004891 communication Methods 0.000 description 39
- 238000001514 detection method Methods 0.000 description 22
- 238000012545 processing Methods 0.000 description 22
- 230000033001 locomotion Effects 0.000 description 21
- 230000001133 acceleration Effects 0.000 description 8
- 238000006073 displacement reaction Methods 0.000 description 8
- 238000013507 mapping Methods 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000013519 translation Methods 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 3
- 238000013480 data collection Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005265 energy consumption Methods 0.000 description 3
- 238000007619 statistical method Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000032258 transport Effects 0.000 description 3
- 241000238631 Hexapoda Species 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 241000271566 Aves Species 0.000 description 1
- 241000283690 Bos taurus Species 0.000 description 1
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241001125840 Coryphaenidae Species 0.000 description 1
- 241000283086 Equidae Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 241001494479 Pecora Species 0.000 description 1
- 241000283984 Rodentia Species 0.000 description 1
- 241000282887 Suidae Species 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000003915 air pollution Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Landscapes
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Description
本明細書に記載される複数の文献、複数の特許及び複数の特許出願の全ては、各個別の文献、特許または特許出願が参照により組み込まれるべく詳細にかつ個別に示されたものと同程度に、参照により本明細書に組み込まれる。
いくつかの実施形態では、複数のシステム、デバイス及び方法は、複数のセンサを含んでもよい。複数のセンサの較正は、センサデータの積算を備えてもよい。図3を参照すると、1つのカメラが、301に示される画像を撮影してもよく、他のカメラが、異なる変位及び異なる方向で第2の画像302を撮影してもよい。そのため、2つのカメラは、較正される必要があり、較正は、第1のカメラによって撮影された画像301及び第2のカメラによって撮影された第2の画像302の双方を用いてもよい。以下、複数の較正の数学的公式を開示する。
いくつかの実施形態では、複数のシステム及び複数の方法は、カメラ及びIMUの較正を含む。この較正の原理は、複数の画像をカメラによって経時的に得ること、及び自己の複数の位置変化をカメラによって予測することに基づく。いくつかの例において、自己較正方法は、2つのカメラ
[項目1]
インラインセンサの較正方法であって、
無人航空機(UAV)に接続された複数の異なるタイプのセンサであって、互いに対する初期空間構成を有する複数のセンサから、上記UAVの飛行中にセンサデータを取得するステップと、
プロセッサを介して、上記複数のセンサの互いに対する上記初期空間構成から次の空間構成への空間構成における変化を、上記センサデータに基づいて検出するステップと、
上記次の空間構成を決定するステップと、
上記複数のセンサのうち少なくとも1つからのデータを、上記次の空間構成に基づいて、上記UAVの飛行中に調整するステップとを含む、方法。
[項目2]
上記複数の異なるタイプのセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを含む、項目1に記載の方法。
[項目3]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目2に記載の方法。
[項目4]
上記複数のセンサからの上記センサデータは、上記慣性センサと関連付けられる座標系に与えられる、項目3に記載の方法。
[項目5]
上記初期空間構成は、上記複数のセンサの各々に対して、互いに対する初期位置及び初期方向を備える、項目1に記載の方法。
[項目6]
上記空間構成における上記変化は、上記複数のセンサのうち少なくとも1つの、上記複数のセンサのうちの他の複数のセンサに対する、上記初期位置及び上記初期方向のうち少なくとも1つにおける変化を含む、項目5に記載の方法。
[項目7]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目1に記載の方法。
[項目8]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目1に記載の方法。
[項目9]
上記空間構成における上記変化は、上記UAVの動きによって生じる、項目1に記載の方法。
[項目10]
上記空間構成における上記変化は、上記UAVの振動によって生じる、項目9に記載の方法。
[項目11]
上記プロセッサを介して、複数のカルマンフィルタを用いて上記次の空間構成を決定する段階をさらに備え、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを含む、項目1に記載の方法。
[項目12]
上記プロセッサは、上記UAVに搭載されている、項目1に記載の方法。
[項目13]
上記プロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目11に記載の方法。
[項目14]
インラインセンサの較正装置であって、
(a)(i)無人航空機(UAV)と接続され、かつ、(ii)上記UAVの飛行中にセンサデータを与えるように構成され、互いに対する初期空間構成を有する複数の異なるタイプのセンサと、
(b)個別にまたは集合的に、(i)上記センサデータに基づいて、複数のセンサの、互いに対する上記初期空間構成から次の空間構成への、空間構成における変化を検出し、(ii)上記次の空間構成を決定し、(iii)上記UAVの飛行中に、上記次の空間構成に基づいて、上記複数のセンサのうち少なくとも1つからのデータを調整するように構成される、1つまたは複数のプロセッサとを備える、装置。
[項目15]
上記複数の異なるタイプのセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目14に記載の装置。
[項目16]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目15に記載の装置。
[項目17]
上記複数のセンサからの上記センサデータは、上記慣性センサと関連付けられる座標系に与えられる、項目16に記載の装置。
[項目18]
上記初期空間構成は、上記複数のセンサの各々に対して、互いに対する初期位置及び初期方向を備える、項目14に記載の装置。
[項目19]
上記空間構成における上記変化は、上記複数のセンサのうち少なくとも1つの、上記複数のセンサのうちの他の複数のセンサに対する、上記初期位置及び上記初期方向のうち少なくとも1つにおける変化を備える、項目18に記載の装置。
[項目20]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目14に記載の装置。
[項目21]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目14に記載の装置。
[項目22]
上記空間構成における上記変化は、上記UAVの動きによって生じる、項目14に記載の装置。
[項目23]
上記空間構成における上記変化は、上記UAVの振動によって生じる、項目22に記載の装置。
[項目24]
上記1つまたは複数のプロセッサは、複数のカルマンフィルタを用いて上記次の空間構成を決定し、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目14に記載の装置。
[項目25]
上記1つまたは複数のプロセッサは、上記UAVに搭載される、項目14に記載の装置。
[項目26]
上記1つまたは複数のプロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目14に記載の装置。
[項目27]
センサ較正方法であって、
無人航空機(UAV)と連結された複数の異なるタイプの複数のセンサからセンサデータを取得する段階と、
基準座標系を選択する段階と、
プロセッサを介して、上記複数のセンサ間の予測される空間関係に基づいて、上記複数のセンサからの上記センサデータを上記基準座標系に表す段階と、
上記プロセッサを介して、上記複数のセンサ間における上記センサデータの不一致を検出する段階であって、上記不一致は、上記複数のセンサ間の上記予測される空間関係におけるエラーを示す、段階と、
実際の空間構成を決定する段階と、
上記実際の空間構成に基づいて、上記複数のセンサのうち少なくとも1つからのデータを調整する段階とを備える、方法。
[項目28]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目27に記載の方法。
[項目29]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目28に記載の方法。
[項目30]
上記基準座標系は、上記慣性センサと関連付けられる座標系である、項目29に記載の方法。
[項目31]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える上記複数のセンサの初期空間構成からの、上記構成における予測される空間変化に基づく、項目27に記載の方法。
[項目32]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目31に記載の方法。
[項目33]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目31に記載の方法。
[項目34]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、項目27に記載の方法。
[項目35]
上記プロセッサを介して、複数のカルマンフィルタを用いて上記次の空間構成を決定する段階をさらに備え、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目27に記載の方法。
[項目36]
上記プロセッサは、上記UAVに搭載されている、項目27に記載の方法。
[項目37]
上記複数のプロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目27に記載の方法。
[項目38]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目27に記載の方法。
[項目39]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目38に記載の方法。
[項目40]
上記複数のセンサからの上記データは、上記UAVの動作中に調整される、項目27に記載の方法。
[項目41]
上記実際の空間構成に基づいて調整された上記データは、ビジョンセンサによって記録された画像データである、項目27に記載の方法。
[項目42]
センサ較正装置であって、
(a)(i)無人航空機(UAV)と連結され、かつ、(ii)センサデータを与えるように構成される複数の異なるタイプの複数のセンサと、
(b)個別にまたは集合的に、
(i)基準座標系を選択し、
(ii)上記複数のセンサ間の予測される空間関係に基づいて、上記複数のセンサからの上記センサデータを上記基準座標系に表し、
(iii)上記複数のセンサ間における上記センサデータの不一致であって、上記複数のセンサ間の上記予測される空間関係におけるエラーを示す不一致を検出し、
(iv)実際の空間構成を決定し、
(v)上記実際の空間構成に基づいて、上記複数のセンサのうち少なくとも1つからのデータを調整するように構成される、1つまたは複数のプロセッサとを備える、装置。
[項目43]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目42に記載の装置。
[項目44]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目43に記載の装置。
[項目45]
上記基準座標系は、上記慣性センサと関連付けられる座標系である、項目44に記載の装置。
[項目46]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える上記複数のセンサの初期空間構成からの、上記構成における予測される空間変化に基づく、項目42に記載の装置。
[項目47]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目46に記載の装置。
[項目48]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目46に記載の装置。
[項目49]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、項目42に記載の装置。
[項目50]
上記1つまたは複数のプロセッサは、複数のカルマンフィルタを用いて上記次の空間構成を決定し、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目42に記載の装置。
[項目51]
上記1つまたは複数のプロセッサは、上記UAVに搭載される、項目42に記載の装置。
[項目52]
上記1つまたは複数のプロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目42に記載の装置。
[項目53]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目42に記載の装置。
[項目54]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目53に記載の装置。
[項目55]
上記複数のセンサのうち上記少なくとも1つからの上記データは、上記UAVの動作中に調整される、項目42に記載の装置。
[項目56]
上記実際の空間構成に基づいて調整された上記データは、ビジョンセンサによって記録された画像データである、項目42に記載の装置。
[項目57]
センサ較正方法であって、
無人航空機(UAV)と連結された複数の異なるタイプの複数のセンサからセンサデータを取得する段階と、
プロセッサを介して、上記複数のセンサを複数のサブセットにグループ化する段階であって、各サブセットは、(i)少なくとも2つのセンサと、(ii)複数のセンサの異なる組み合わせとを有する段階と、
上記プロセッサを介して、上記センサデータに基づいて、各サブセットにおける上記少なくとも2つのセンサ間の予測される空間関係を算出する段階と、
上記予測される空間関係に基づいて、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を決定する段階と、
上記プロセッサを介して、上記少なくとも2つのセンサ間の上記実際の空間関係に基づいて、各サブセットにおける上記複数のセンサの、互いに対する空間構成を算出する段階とを備える、方法。
[項目58]
各サブセットは、基準センサ及び1つまたは複数の測定センサを備える、項目57に記載の方法。
[項目59]
各サブセットに対する上記基準センサは、同じである、項目58に記載の方法。
[項目60]
各サブセットに対する上記基準センサは、異なる、項目58に記載の方法。
[項目61]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目57に記載の方法。
[項目62]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目61に記載の方法。
[項目63]
各サブセットにおける上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える上記複数のセンサの初期空間構成からの、上記構成における予測される空間変化に基づく、項目58に記載の方法。
[項目64]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目63に記載の方法。
[項目65]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目63に記載の方法。
[項目66]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、項目58に記載の方法。
[項目67]
上記プロセッサは、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を複数のカルマンフィルタを用いて決定し、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目58に記載の方法。
[項目68]
上記プロセッサは、上記UAVに搭載されている、項目58に記載の方法。
[項目69]
上記プロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目58に記載の方法。
[項目70]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目58に記載の方法。
[項目71]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目58に記載の方法。
[項目72]
上記複数のセンサからの上記データは、上記UAVの動作中に調整される、項目58に記載の方法。
[項目73]
上記空間構成に基づいて、上記複数のセンサのうち少なくとも1つからのデータを調整する段階と、上記プロセッサを介して、上記少なくとも2つのセンサ間の上記実際の空間関係に基づいて、各サブセットにおける上記複数のセンサの、互いに対する空間構成を算出する段階とをさらに備える、項目57に記載の方法。
[項目74]
上記実際の空間構成に基づいて調整された上記データは、ビジョンセンサによって記録された画像データである、項目73に記載の方法。
[項目75]
センサ較正装置であって、
(a)(i)無人航空機(UAV)と連結され、かつ、(ii)センサデータを与えるように構成される複数の異なるタイプの複数のセンサと、
(b)個別にまたは集合的に、
(i)上記複数のセンサを、複数のサブセットであって、各サブセットが(i)少なくとも2つのセンサと、(ii)複数のセンサの異なる組み合わせとを有する複数のサブセットにグループ化し、
(ii)上記センサデータに基づいて、各サブセットにおける上記少なくとも2つのセンサ間の予測される空間関係を算出し、
(iii)上記予測される空間関係に基づいて、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を決定し、
(iv)上記少なくとも2つのセンサ間の上記実際の空間関係に基づいて、各サブセットにおける上記複数のセンサの、互いに対する空間構成を算出するように構成される1つまたは複数のプロセッサとを備える、装置。
[項目76]
各サブセットは、基準センサ及び1つまたは複数の測定センサを備える、項目75に記載の装置。
[項目77]
各サブセットに対する上記基準センサは、同じである、項目76に記載の装置。
[項目78]
各サブセットに対する上記基準センサは、異なる、項目76に記載の装置。
[項目79]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目75に記載の装置。
[項目80]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目79に記載の装置。
[項目81]
各サブセットにおける上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える上記複数のセンサの初期空間構成からの、上記構成における予測される空間変化に基づく、項目75に記載の装置。
[項目82]
上記初期空間構成は、上記UAVの離陸に先立って与えられる、項目81に記載の装置。
[項目83]
上記初期空間構成は、上記UAVの飛行中に与えられる、項目81に記載の装置。
[項目84]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、項目75に記載の装置。
[項目85]
上記1つまたは複数のプロセッサは、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を、複数のカルマンフィルタを用いて決定し、上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目75に記載の装置。
[項目86]
上記1つまたは複数のプロセッサは、上記UAVに搭載される、項目75に記載の装置。
[項目87]
上記1つまたは複数のプロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目75に記載の装置。
[項目88]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目75に記載の装置。
[項目89]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目75に記載の装置。
[項目90]
上記複数のセンサのうち上記少なくとも1つからの上記データは、上記UAVの動作中に調整される、項目75に記載の装置。
[項目91]
センサ較正方法であって、
複数の異なるタイプの複数のセンサからセンサデータを取得する段階と、
プロセッサを介して、上記複数のセンサを複数のサブセットにグループ化する段階であって、各サブセットは、(i)基準センサと1つまたは複数の測定センサとを備える少なくとも2つのセンサ、及び(ii)複数のセンサの異なる組み合わせを有し、上記複数のサブセットの少なくとも2つは、複数の異なる基準センサを有する段階と、
上記プロセッサを介して、上記センサデータに基づいて、サブセット当たり少なくとも1つのカルマンフィルタを用いて、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を決定する段階と、
上記プロセッサを介して、上記少なくとも2つのセンサ間の上記実際の空間関係に基づいて、各サブセットにおける上記複数のセンサの、互いに対する空間構成を算出する段階とを備える、方法。
[項目92]
上記複数のセンサは、無人航空機(UAV)と連結される、項目91に記載の方法。
[項目93]
上記プロセッサは、上記UAVに搭載されている、項目92に記載の方法。
[項目94]
上記プロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目92に記載の方法。
[項目95]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目92に記載の方法。
[項目96]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目92に記載の方法。
[項目97]
上記複数のセンサからの上記データは、上記UAVの動作中に調整される、項目92に記載の方法。
[項目98]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目91に記載の方法。
[項目99]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目98に記載の方法。
[項目100]
上記複数のセンサのうち少なくとも1つは、ビジョンセンサである、項目98に記載の方法。
[項目101]
上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目91に記載の方法。
[項目102]
上記複数のセンサを複数のサブセットにグループ化した後、上記センサデータに基づいて、各サブセットにおける上記少なくとも2つのセンサ間の予測される空間関係を算出する段階をさらに備え、上記カルマンフィルタは、上記予測される空間関係に基づいて、実際の空間関係を決定する、項目91に記載の方法。
[項目103]
上記複数のセンサ間の上記予測される空間関係は、上記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、項目91に記載の方法。
[項目104]
センサ較正装置であって、
(a)センサデータを与えるように構成される複数の異なるタイプの複数のセンサと、
(b)個別にまたは集合的に、
(1)上記複数のセンサを、複数のサブセットであって、各サブセットは、(i)基準センサと1つまたは複数の測定センサとを備える少なくとも2つのセンサ、及び(ii)複数のセンサの異なる組み合わせを有し、上記複数のサブセットの少なくとも2つは、複数の異なる基準センサを有する、複数のサブセットにグループ化し、
(2)上記センサデータに基づいて、サブセット当たり少なくとも1つのカルマンフィルタを用いて、各サブセットにおける上記少なくとも2つのセンサ間の実際の空間関係を決定し、
(3)上記少なくとも2つのセンサ間の上記実際の空間関係に基づいて、各サブセットにおける上記複数のセンサの、互いに対する空間構成を算出するように構成される、1つまたは複数のプロセッサとを備える、装置。
[項目105]
上記複数のセンサは、無人航空機(UAV)と連結される、項目104に記載の装置。
[項目106]
上記1つまたは複数のプロセッサは、上記UAVに搭載される、項目105に記載の装置。
[項目107]
上記1つまたは複数のプロセッサは、上記UAVの外部デバイスにあり、上記UAVの飛行中に、上記UAVと通信を行う、項目105に記載の装置。
[項目108]
上記複数のセンサの上記実際の空間構成は、上記UAVの動作中に決定される、項目105に記載の装置。
[項目109]
上記複数のセンサの上記実際の空間構成は、上記UAVの飛行中に決定される、項目105に記載の装置。
[項目110]
上記複数のセンサのうち上記少なくとも1つからの上記データは、上記UAVの動作中に調整される、項目105に記載の装置。
[項目111]
複数の異なるタイプの上記複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、項目104に記載の装置。
[項目112]
上記複数のセンサのうち少なくとも1つは、慣性センサである、項目111に記載の装置。
[項目113]
上記複数のセンサのうち少なくとも1つは、ビジョンセンサである、項目111に記載の装置。
[項目114]
上記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、項目104に記載の装置。
Claims (26)
- センサ較正方法であって、
無人航空機(UAV)と接続された異なるタイプの複数のセンサからセンサデータを取得するステップと、
プロセッサを介して、前記複数のセンサを複数のサブセットにグループ化するステップであって、各サブセットは、(i)少なくとも2つのセンサと、(ii)複数のセンサの異なる組み合わせとを有するステップと、
前記プロセッサを介して、前記センサデータに基づいて、各サブセットにおける前記少なくとも2つのセンサ間の予測される空間関係を算出するステップと、
前記予測される空間関係に基づいて、各サブセットにおける前記少なくとも2つのセンサ間の実際の空間関係を決定するステップと、
前記少なくとも2つのセンサ間の前記実際の空間関係に基づいて、各サブセットにおける前記複数のセンサの、互いに対する空間構成を算出するステップとを有する、方法。 - 各サブセットは、基準センサ及び1つまたは複数の測定センサを備える、請求項1に記載の方法。
- 前記異なるタイプの複数のセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、請求項1または2に記載の方法。
- 前記複数のセンサのうち少なくとも1つは、慣性センサである、請求項3に記載の方法。
- 前記予測される空間関係は、前記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える前記複数のセンサの初期空間構成からの、前記構成における予測される空間変化に基づく、請求項1から4の何れか1つに記載の方法。
- 前記初期空間構成は、前記UAVの離陸または飛行中に設定される、請求項5に記載の方法。
- 前記予測される空間関係は、前記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、請求項1から6の何れか1つに記載の方法。
- 前記プロセッサは、各サブセットにおける前記少なくとも2つのセンサ間の実際の空間関係を複数のカルマンフィルタを用いて決定し、前記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、請求項1から7の何れか1つに記載の方法。
- 前記プロセッサは、前記UAVに搭載されている、請求項1から8の何れか1つに記載の方法。
- 前記プロセッサは、前記UAVの外部デバイスにあり、前記UAVの飛行中に、前記UAVと通信を行う、請求項1から9のいずれか1つに記載の方法。
- 前記複数のセンサの前記実際の空間構成は、前記UAVの動作中に決定される、請求項1から10の何れか1つに記載の方法。
- 前記複数のセンサからの前記データは、前記UAVの動作中に調整される、請求項1から11のいずれか1つに記載の方法。
- 前記空間構成に基づいて、前記複数のセンサのうち少なくとも1つからのデータを調整するステップと、前記プロセッサを介して、前記少なくとも2つのセンサ間の前記実際の空間関係に基づいて、各サブセットにおける前記複数のセンサの、互いに対する空間構成を算出するステップとをさらに含む、請求項1から12の何れか1つに記載の方法。
- 前記実際の空間構成に基づいて調整された前記データは、ビジョンセンサによって記録された画像データである、請求項13に記載の方法。
- センサ較正装置であって、
(a)(i)無人航空機(UAV)と連結され、かつ、(ii)センサデータを与えるように構成される複数の異なるタイプの複数のセンサと、
(b)
(i)前記複数のセンサを、複数のサブセットであって、各サブセットが(i)少なくとも2つのセンサと、(ii)複数のセンサの異なる組み合わせとを有する複数のサブセットにグループ化し、
(ii)前記センサデータに基づいて、各サブセットにおける前記少なくとも2つのセンサ間の予測される空間関係を算出し、
(iii)前記予測される空間関係に基づいて、各サブセットにおける前記少なくとも2つのセンサ間の実際の空間関係を決定し、
(iv)前記少なくとも2つのセンサ間の前記実際の空間関係に基づいて、各サブセットにおける前記複数のセンサの、互いに対する空間構成を算出するように構成される1つまたは複数のプロセッサとを備える、装置。 - 各サブセットは、基準センサ及び1つまたは複数の測定センサを備える、請求項15に記載の装置。
- 前記複数の異なるタイプのセンサは、ビジョンセンサ、GPSセンサ、慣性センサ、赤外線センサ、超音波センサまたはライダセンサのうち少なくとも2つを備える、請求項15または16に記載の装置。
- 前記複数のセンサのうち少なくとも1つは、慣性センサである、請求項17に記載の装置。
- 各サブセットにおける前記複数のセンサ間の前記予測される空間関係は、前記複数のセンサの各々に対して、互いに対する、初期位置及び初期方向を備える前記複数のセンサの初期空間構成からの、前記構成における予測される空間変化に基づく、請求項15から18の何れか1つに記載の装置。
- 前記初期空間構成は、前記UAVの離陸または飛行中に設定される、請求項19に記載の装置。
- 前記複数のセンサ間の前記予測される空間関係は、前記複数のセンサの、互いに対する相対的空間位置及び相対的空間方向を備える、請求項15から20の何れか1つに記載の装置。
- 前記1つまたは複数のプロセッサは、各サブセットにおける前記少なくとも2つのセンサ間の実際の空間関係を、複数のカルマンフィルタを用いて決定し、前記複数のカルマンフィルタは、1つまたは複数の拡張カルマンフィルタ及び/またはアンセンテッドカルマンフィルタを備える、請求項15から21の何れか1つに記載の装置。
- 前記1つまたは複数のプロセッサは、前記UAVに搭載される、請求項15から22の何れか1つに記載の装置。
- 前記1つまたは複数のプロセッサは、前記UAVの外部デバイスにあり、前記UAVの飛行中に、前記UAVと通信を行う、請求項15から23の何れか1つに記載の装置。
- 前記複数のセンサの前記実際の空間構成は、前記UAVの動作中に決定される、請求項15から24の何れか1つに記載の装置。
- 前記複数のセンサのうち前記少なくとも1つからの前記データは、前記UAVの動作中に調整される、請求項15から25の何れか1つに記載の装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017000575A JP6275887B2 (ja) | 2017-01-05 | 2017-01-05 | センサ較正方法及びセンサ較正装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017000575A JP6275887B2 (ja) | 2017-01-05 | 2017-01-05 | センサ較正方法及びセンサ較正装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016525510A Division JP6080189B2 (ja) | 2014-08-15 | 2014-08-15 | インラインセンサの較正方法及び較正装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017102942A JP2017102942A (ja) | 2017-06-08 |
JP6275887B2 true JP6275887B2 (ja) | 2018-02-07 |
Family
ID=59015576
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017000575A Expired - Fee Related JP6275887B2 (ja) | 2017-01-05 | 2017-01-05 | センサ較正方法及びセンサ較正装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6275887B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US12079012B2 (en) | 2018-06-04 | 2024-09-03 | Nileworks Inc. | Drone system, drone, steering device, drone system control method, and drone system control program |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI628113B (zh) * | 2017-08-29 | 2018-07-01 | 財團法人工業技術研究院 | 無人飛行器、判斷無人飛行器降落狀況的系統與方法 |
KR20210029518A (ko) | 2019-09-06 | 2021-03-16 | 삼성전자주식회사 | 멀티 센서 기반의 무인 비행체 및 그 제어 방법 |
KR20210100297A (ko) * | 2020-02-06 | 2021-08-17 | 삼성전자주식회사 | 전자 장치 및 이의 제어 방법 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2985329B1 (fr) * | 2012-01-04 | 2015-01-30 | Parrot | Procede de pilotage intuitif d'un drone au moyen d'un appareil de telecommande. |
WO2015105597A2 (en) * | 2013-11-27 | 2015-07-16 | The Trustees Of The University Of Pennsylvania | Multi-sensor fusion for robust autonomous flight in indoor and outdoor environments with a rotorcraft micro-aerial vehicle (mav) |
-
2017
- 2017-01-05 JP JP2017000575A patent/JP6275887B2/ja not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US12079012B2 (en) | 2018-06-04 | 2024-09-03 | Nileworks Inc. | Drone system, drone, steering device, drone system control method, and drone system control program |
Also Published As
Publication number | Publication date |
---|---|
JP2017102942A (ja) | 2017-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6080189B2 (ja) | インラインセンサの較正方法及び較正装置 | |
US11822353B2 (en) | Simple multi-sensor calibration | |
US10914590B2 (en) | Methods and systems for determining a state of an unmanned aerial vehicle | |
JP6329642B2 (ja) | センサ融合 | |
US10599149B2 (en) | Salient feature based vehicle positioning | |
JP6181300B2 (ja) | 無人航空機の速度を制御するシステム | |
US10447912B2 (en) | Systems, methods, and devices for setting camera parameters | |
JP6609833B2 (ja) | 無人航空機の飛行を制御する方法及びシステム | |
CN109388150B (zh) | 多传感器环境地图构建 | |
JP6487010B2 (ja) | ある環境内で無人航空機を制御する方法、ある環境のマップを生成する方法、システム、プログラムおよび通信端末 | |
EP3158293B1 (en) | Sensor fusion using inertial and image sensors | |
US9958874B2 (en) | Aircraft attitude control methods | |
US20200026720A1 (en) | Construction and update of elevation maps | |
EP3123260B1 (en) | Selective processing of sensor data | |
CN107615211B (zh) | 使用传感器融合估计可移动物体的状态信息的方法及系统 | |
EP3158411B1 (en) | Sensor fusion using inertial and image sensors | |
US10789722B2 (en) | Processing images to obtain environmental information | |
JP6275887B2 (ja) | センサ較正方法及びセンサ較正装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6275887 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |