AdSense

2023年9月17日日曜日

gaussian-splattingをやってみる

 lidar付のiphoneを持ってないのでフォトグラメトリやNeRFで空間スキャンしてたところにgaussian-splattingすごいらしいと聞いたのでやってみる


参考にさせて頂いたサイト:

https://www.docswell.com/s/Ovjang/KW1LE1-2023-09-10-113237?fbclid=IwAR0LVYVVO_-oNtgjQK4ms65DVJ6crotF4ZT8HFfRcN4zSDepPqyroCRXSL0#p37

https://zenn.dev/aster_ideatech/articles/523b4909d4e48f

https://lilea.net/lab/how-to-setup-3d-gaussian-splatting/


ツール:

・gaussian-splatting(GitHubより)

・CUDA Toolikit

・ANACONDA

・COLMAP


トレーニングに時間かかるけど、確かに良い制度でできた。感覚的にはNeRFと同じくらい。

Inputデータはフォトグラメトリ用に以前撮影した写真26枚。RTX2070 8Gでトレーニングは1時間くらい。


Unityにも取り込めた。


Starter Assetsを入れると走り回れた。

LumaAIでUE取り込んだ時のようなことができた。



無料で使えてこれは凄い。