--- title: "Apple iPad/iPhone搭載「LiDARスキャナ」について調べてみた (1)" emoji: "📝" type: "tech" topics: ["LiDAR"] published: true published_at: "2021-05-16 11:08" cover: "./20210515182403.png" category: "info" author: "武仙" description: "AppleがII-VI Inc.(ツーシックス)に、4億ドル(約440億円)をAwardしたニュース記事から、LiDARについて調べ始めたらすごい分量になった記事の第一弾ｗ" original_url: "https://blog.hololab.co.jp/entry/2021/05/16/110850" --- ホロラボ武仙です。好きなものは、赤外線です。 あ、最近は超音波とかも好きです。 ホロラボが出来る前はTMCNという3Dセンサーのコミュニティーで活動していたりもあったので、3Dセンサーのことはすごく今でも気になります。 そんな中で、こんなニュースが出ました。 [www.moguravr.com](https://www.moguravr.com/lidar-ii-vi-funding/) このニュースが気になってLiDARについて調べ始めたら週末の時間の相当を消費。 Twitterでも反応をたくさんいただいて関心のある人が多そうだったので、こちらのブログにも加筆しつつまとめて書いておきます。 ※そして、書き始めたら分量がとんでもないことになってきたので、たぶん3部作ぐらいになりますｗ * * * > 4億ドルがAppleからUS企業II-VI(ツーシックス)へ提供(Award)されて、LiDAR用コアパーツの生産安定を狙うとの、LiDARファンとしては気になる嬉しい記事。[https://t.co/jGPPRwt0Ni](https://t.co/jGPPRwt0Ni) > > そして「LiDARセンサーの供給元」には色々と意味がありそう。調べ始めたら沼だったｗ > > [#iPhoneという名のLiDAR](https://twitter.com/hashtag/iPhone%E3%81%A8%E3%81%84%E3%81%86%E5%90%8D%E3%81%AELiDAR?src=hash&ref_src=twsrc%5Etfw) [https://t.co/NqPnYtPGkn](https://t.co/NqPnYtPGkn) > > — Takesen - 武仙＠一緒にMixed Realityやろうぜ！(採用拡大中) (@takesenit) [2021年5月8日](https://twitter.com/takesenit/status/1390852041883348994?ref_src=twsrc%5Etfw) ニュース記事自体はAppleがLiDARスキャナ用部品のサプライヤーなUS企業II-VI Inc.(ツーシックス)に、4億ドル(約440億円)をAward(支給？)したとの報道。 ただ、それまでいろいろと知ってた話と総合すると「注目のLiDARのサプライヤー」って言い切ると語弊がありそうだなと思って調べ始めたのがきっかけでした。 ### LiDARとは何ぞや？ そもそもLiDARって何よ？って話から始めなければなりませぬ。 > なんか、LiDARの略語が何度調べても覚えられないと思っていたら、「Light Detection and Ranging」と、「Laser Imaging Detection and Ranging」のふたつの説？があるんですね。[https://t.co/mJ61YTH6iF](https://t.co/mJ61YTH6iF) > > — Takesen - 武仙＠一緒にMixed Realityやろうぜ！(採用拡大中) (@takesenit) [2020年1月15日](https://twitter.com/takesenit/status/1217416341843402752?ref_src=twsrc%5Etfw) こちら、AppleがiPad ProへLiDARを搭載する前の2020年1月につぶやいてます。時代の先を行ってるぜアピール。 何で当時これを言ってたかと言うと、Livoxという車載用ながら当時にしては超ローコストなLiDARが発売されたから。 > ホロラボの事業パートナーであるSB C&S社にてDJI社のLiDAR「Livox」のお取り扱いが始まりました。 > ホロラボでもセンサー事業の一環として取り組んでいきます。 [https://t.co/TYKnuI1S9e](https://t.co/TYKnuI1S9e) > > — ホロラボ (@HoloLabInc) [2020年1月15日](https://twitter.com/HoloLabInc/status/1217420149889753088?ref_src=twsrc%5Etfw) LiDAR(ライダー)はいわゆるアクロニム(acronym)＝頭文字語で、全体を記載すると下記2つのバリエーションがあるようです。 - LiDAR Light Detection and Ranging - 「光検出と測距」 - LIDAR Laser Imaging Detection and Ranging - 「レーザー画像検出と測距」 [ja.wikipedia.org](https://ja.wikipedia.org/wiki/LIDAR) 2文字目の「i」を大文字で書いたり小文字で書いたり、あとWikiによると軍事関係では「LADAR」と記載したりもあるようで表記ゆれが気になるところですが、**光の跳ね返りを見て距離を測る技術**って、ざっくり覚えてますｗ ### ToF方式とLiDARの進化 代表的なLiDARの方法で有名なToF方式(Time of Flight)を例にしてみます。ToF方式LiDARの構成は発光部と受光部、その計測回路からなります。光源が発行した際の時間と、受光部がその光を受けた時間の差がTime of Flight、光の飛行時間？ということで、この時間差から計算することで対照物までの距離が割り出せる、という原理です。
LiDARの基本的な仕組み (浜松ホトニクスウェブサイトより)
LiDARの基本的な仕組み (浜松ホトニクスウェブサイトより)
[LiDAR | 浜松ホトニクス](https://www.hamamatsu.com/jp/ja/applications/automotive/lidar/index.html) あとこれもWikiを読んでなるほどなって思いましたが、いわゆる「レーダー：RADAR」も「Radio Detection and Ranging」のアクロニム。Radio＝無線も、Light/Laser＝光線もどちらも突き詰めれば「波」って観点では一緒。そう考えると、基本は「LiDAR」が表記的に正統派なのかもとかｗ Appleが一番最初にLiDAR搭載を発表したのがA12 Bionicを搭載したiPad Pro2機種で、2020/3/18のことでした。世界的に、この日がLiDAR記念日ですね。(謎 [www.apple.com](https://www.apple.com/jp/newsroom/2020/03/apple-unveils-new-ipad-pro-with-lidar-scanner-and-trackpad-support-in-ipados/) そしてApple製品においては必ず「LiDAR」と2文字目のiは小文字表記されているので、この場合にはLight Detection and Rangingの略である可能性が高そうです。 そしてLiDARセンサーと言わず、「LiDARスキャナ」なのですよね。 * * * #### シンプルなLiDARとしての測距計 ちょっと話題がそれますが、↑の浜松ホトニクスさんのLiDAR原理をそのまま製品にした感じなのがこの辺のゴルフとかで使う測距計です。写真はニコンのページのものを参照。
ニコンCOOLSHOT(測距計)・システム詳細
ニコンCOOLSHOT(測距計)・システム詳細
[測距テクノロジー | テクノロジー | COOLSHOT スペシャルコンテンツ | ニコンイメージング](https://www.nikon-image.com/sp/coolshot/products/technology/technology_4/) ただ、これは直進するレーザーの当たった1点のみしか測れないので、「スキャナ」とは言えない感じ。 それで登場するのがこういうもの。 #### 回転式2D LiDAR > Scanse sweep [#LiDAR](https://twitter.com/hashtag/LiDAR?src=hash&ref_src=twsrc%5Etfw) moves!! It took one year to deliver since the finding, but the sensor and software seems good. [pic.twitter.com/wtXsUHlVls](https://t.co/wtXsUHlVls) > > — Takesen - 武仙＠一緒にMixed Realityやろうぜ！(採用拡大中) (@takesenit) [2017年5月6日](https://twitter.com/takesenit/status/860703410034810880?ref_src=twsrc%5Etfw) レーザーと受光素子は1つなので、それをモーターで回転させてLiDARデバイスから水平方向360度の距離データを測定します。 これはKickstarterに出てた激安2D LiDAR。動画を見て頂くと、右上のテーブルの上の黒い円筒形のブツがグルグルと120rpmぐらいで回ってるのがLiDARデバイス。左のPCモニタで可視化してるんですが、さすが激安だけあって荒かったりであんまりよく分からないですねｗ 一般的なLiDARはこのタイプのイメージ。 この方式だと、北陽電機LiDARはインタラクティブコンテンツの制作で使ったりなイメージで有名ですね。 [www.youtube.com](https://www.youtube.com/watch?v=u8SR9MP6mAk&t=76s) これでもまだLiDARデバイスを中心にした2D平面しか取れないので、これを3Dにしたい各位がいらっしゃいます。 #### やっぱり一気に全部センシングしたい「3D LiDAR」 > 一軸LidarがKeiganモーターで2軸になって > unityで点群可視化！！[https://t.co/ccmelz3wF7](https://t.co/ccmelz3wF7) [pic.twitter.com/WtK33nOvhR](https://t.co/WtK33nOvhR) > > — 光輝@見える補聴器（仮） (@koukiwf) [2018年10月17日](https://twitter.com/koukiwf/status/1052524526775357440?ref_src=twsrc%5Etfw) センサー仲間な光輝さんは、2D LiDARの回転平面をもう一つのモーター(Keiganモーター)で物理的に回転させて3Dにしてたり。 他によく見るのが、2D LiDARを2台直交配置して3Dにしてるケースとか。 これはポータブルな産業用スキャナNavVisの着用する3Dスキャナ。THETAで有名な「おっさんが映り込む致命的なバグ」を構造的に取り除きつつ、奥行きの点群もカラーも絶対逃さないぞっていう力強いデザインが魅力的ですｗ
NavVis VLX: VelodyneなLiDARが頭上と手元にそれぞれ直交関係で配置されてます
NavVis VLX: VelodyneなLiDARが頭上と手元にそれぞれ直交関係で配置されてます
[www.navvis.com](https://www.navvis.com/vlx) #### Solid Stateな3D LiDAR実現のアプローチ メカ的に回転させるのはコストが高い、耐久性が下がる、物理フットプリントがデカイ、などの様々な課題があるので、最近はグルグルと回さないで3D LiDARを実現しようとしてる動きが多くみられます。詳しくはそれ系の記事があるのでご参照いただければですが、大きく下記のアプローチとその組み合わせっぽいです。 1. レーザーを複数にしてラインスキャン状態にする 2. MEMSを使ってメカながらMicroに実現する 3. 光学的に3D LiDARにする もともと回転系LiDARを使った自動運転で著名なVelodyneのLiDARは、内部にレーザーを複数チャンネル搭載したものを回すことで限定的ながら3D LiDARを実現する特許を取得していたようで、それで有名なんですね。上記1のアプローチ。 [www.youtube.com](https://www.youtube.com/watch?v=tZ8WbSNsNaU) このページが経緯については詳しいです。 [www.argocorp.com](https://www.argocorp.com/cam/VelodyneLidar/VelodyneLidar.html) IntelもRealSenseシリーズでMEMSを使ったSolid State LiDARをリリースしています。3D LiDAR実現に関しては2のアプローチ。 [www.switch-science.com](https://www.switch-science.com/catalog/6369/) 戦争の火種を内包した危険なTweet。。。 > [#realsense](https://twitter.com/hashtag/realsense?src=hash&ref_src=twsrc%5Etfw) [#intel](https://twitter.com/hashtag/intel?src=hash&ref_src=twsrc%5Etfw) [#今川焼](https://twitter.com/hashtag/%E4%BB%8A%E5%B7%9D%E7%84%BC?src=hash&ref_src=twsrc%5Etfw) [#LiDAR](https://twitter.com/hashtag/LiDAR?src=hash&ref_src=twsrc%5Etfw) [https://t.co/Iyq6jtSCqL](https://t.co/Iyq6jtSCqL) > > — Takesen - 武仙＠一緒にMixed Realityやろうぜ！(採用拡大中) (@takesenit) [2020年6月18日](https://twitter.com/takesenit/status/1273427219042332673?ref_src=twsrc%5Etfw) そして、肝心なAppleのLiDARスキャナでは、アプローチとしては1の「複数光源」と3つめの「光学的に3D LiDARにする」っていうアプローチを組み合わせたもの、っていう風に武仙は理解をしています。 それを実現してるのが**発光素子の「VCSEL: Vertical Cavity Surface Emitting Laser」と、光学素子の「DOE: Diffractive Optical Element」**。 > Apple、iPad/iPhoneの裏面に搭載されてる「LiDAR」の中身で今まで詳しいチラシが。 > > dToF方式のLiDARモジュールの中身は下記の構成とサプライヤ名。 > > VCSEL(発光素子) - Lumentum[https://t.co/QI3Fbh5YSj](https://t.co/QI3Fbh5YSj) > SPAD (受光素子) - Sony > DOE (光学素子) - Himax > > Source: [https://t.co/wTrLp02iou](https://t.co/wTrLp02iou) > > — Takesen - 武仙＠一緒にMixed Realityやろうぜ！(採用拡大中) (@takesenit) [2021年5月8日](https://twitter.com/takesenit/status/1390853088169271297?ref_src=twsrc%5Etfw) 次回投稿ではその辺を詳しく見て行きたいと思います。([次回リンク](https://blog.hololab.co.jp/entry/2021/05/19/123857)) * * * ホロラボではLiDARスキャナを使ったiOSアプリも開発しています。 開発のお問い合わせはこちら。 [https://hololab.co.jp/#contact](https://hololab.co.jp/#contact) また、ARKitやLiDARを使ったiOSアプリ開発者も激しく募集しています！ [hololab.co.jp](https://hololab.co.jp/recruit/#pe-accordion-item-3-6) 面白そうだなと思って頂けたら、ぜひお気軽にお問い合わせください！