2025/05/04 21:49 Helmdar: 3D Scanning Brooklyn on Rollerblades
ロボ子、今回のITニュースは、ローラーブレードでブルックリンを3Dスキャンするプロジェクト「Helmdar」じゃ。
ローラーブレードで3Dスキャンですか！面白そうですね、博士。
そうじゃろう！Owen Truebloodという人が、夜中にローラーブレードで都市を探検しながら、都市の構造をスキャンしたそうじゃ。
夜の都市は人通りが少なくて、インフラがむき出しになるから観察しやすい、と。
その通り！彼はまず「Stickdar」という、2D LiDARスキャナーを棒に取り付けたものでスキャンを始めたらしいぞ。スキャナーは角度と距離を測定して、データを記録するんじゃ。
それを重ねて視覚化するんですね。まるで奇妙なカメラみたいです。
そうじゃ！そして、ローラーブレードで移動しながら大規模な地図を作る「Helmdar」に発展したんじゃ。6DoFトラッキングにスマホのARフレームワークを使ったらしいぞ。
6DoFトラッキング！位置と姿勢の追跡ですね。ARCoreを使ったと。
AndroidのWebXR APIでデータにアクセスして、LiDARをスマホに取り付けて、空間内の位置と向きを追跡するんじゃ。SLAM（Simultaneous Localization and Mapping）の技術も使っているらしいぞ。
SLAMですか。自己位置推定と環境地図作成を同時に行う技術ですね。
ハードウェア構成も面白いぞ。アルミニウム製のフレームにPixel 6とLiDARを取り付けて、ヘルメットに固定したらしい。AprilTagを側面に取り付けて、VFX実験用のトラッキングマーカーとして使ったそうじゃ。
VFX実験！本格的ですね。ソフトウェアはどうなっているんですか？
AndroidアプリでLiDARのドライバーを実装して、ARCoreで6DoFトラッキングデータを提供。UIで最新のスキャンを3D ARシーンにオーバーレイ表示するんじゃ。
スキャン結果はどうだったんでしょう？
ARCoreのトラッキングが長距離でも安定していることに驚いたらしいぞ。Google Mapsにスキャンデータをオーバーレイ表示したり、低い光量でも一貫性のある結果が得られたりしたそうじゃ。
でも、移動速度や頭の向きで歪みが生じるんですね。
そうじゃ。でも、スキャンデータは個人の経験と一致するテクスチャを持つ、とも言っておる。上から見ると抽象的な形状が現れるのも面白い。
視覚化の実験もしているんですね。スキャンデータと撮影映像を合成して、3Dレンダリングをオーバーレイ表示したり。
そうじゃ。仮想カメラを現実世界のカメラと正確に一致させる必要があったらしい。GoProのSuperViewモードで撮影された映像の歪みを補正したり、OpenCVでカメラの内部パラメータを決定したり。
点群ビューアも作ったんですね。インタラクティブにスキャンを表示するための。
SideFX Houdiniで点群の視覚化を行い、ビューアにパイプラインを構築したそうじゃ。いやー、面白いプロジェクトじゃった。
本当に面白いですね！私もローラーブレードでスキャンしてみたくなりました。
ロボ子、もしやるなら、安全第一じゃぞ！転んでLiDARを壊したら、修理代で破産してしまうからの。
博士こそ、お気をつけてくださいね。ローラーブレードに乗ったことがないでしょう？
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。