ブラウザだけでARを実現するAR.jsを使ってAR時計を作ってみよう

-

AR (Augmented Reality, 拡張現実) といえば、昨年大流行したポケモンGOでも使われていたり、最新のiOSリリースでAR機能が強化されたりと、最近では話題に事欠きません。

今回は、そのAR機能をブラウザだけで実現できるJavaScriptライブラリのAR.jsを使って簡単なARを作ってみましょう。

AR.jsとは

AR.jsは、WebGLやWebRTCなどのWeb標準の機能のうえに実現されたライブラリで、アプリをインストールすることなくWebブラウザだけでAR機能を実現することができます。

技術的には、ネイティブ向けのARライブラリであるARToolkitをEmscriptenを使ってJavaScriptに変換するというなかなか豪快な作りになっていますが、使う分にはいたって普通のJavaScriptライブラリとして使用することができます。スマホのブラウザ上でも問題ないパフォーマンスで動作するので、いろいろな応用ができそうな可能性を秘めています。

ARには、画像認識を助ける2次元パターンの「ARマーカー」を使う通常のARと、ARマーカーを使わないマーカーレスARがありますが、現在AR.jsではマーカーレスでない通常のARのみをサポートしているようです。

AR.jsを使ってみよう

今回はそのAR.jsを使って以下のようにARマーカーにデジタル時計をオーバーレイ表示する機能を作ってみます。

なお、ここでは以降の実装にClojureScriptを使いますが、JavaScriptやその他のAltJSの言語でも同じように作ることができます。

AR.jsはJavaScriptから使えるいくつかの3DあるいはVR向けのライブラリ、フレームワークと連携させて使うことができるようになっています。ここではそのなかで、JavaScriptから使える3Dライブラリとして知名度の高いThree.jsと合わせて使う方法を見てみます。

AR.jsをThree.jsを合わせて使う場合、機能分担は次のようになります：

  • AR.jsはWebRTCからの入力を基にARマーカーの位置を特定し、マーカーの中心を原点とする座標系を用意してくれます。この座標系は、カメラの位置や角度が変わってもマーカーを追従するように随時更新されるため、ここにオブジェクトを配置することであたかもそのオブジェクトがマーカーに固定されているように表示することができます。
  • AR.jsで用意した座標系を基に、Three.jsで任意のオブジェクトを配置します。一旦マーカーの座標が特定できればあとはThree.jsで自由にグラフィックを組み立てていくことができます。

AR.jsで提供されている主要なAPIは次の3つです：

  1. THREEx.ArToolkitSource

     (js/THREEx.ArToolkitSource. #:js{:sourceType <source type>})

    ARで使用する入力ソースを指定します。WebRTC経由でウェブカメラを使うことができるほか、画像や動画も入力ソースとして指定することができます。

  2. THREEx.ArToolkitContext

     (js/THREEx.ArToolkitContext. <opts>)

    入力ソースからマーカーを特定する処理をするコンテキストを作ります。ではキャンバスのサイズやカメラパラメータ等の各種設定を指定します。詳しくは 公式ドキュメント を参照して下さい。

  3. THREEx.ArMarkerControls

     (js/THREEx.ArMarkerControls. <context> <marker> <opts>)

    2.で作ったコンテキストをに渡すことで、に指定したオブジェクトを常にマーカーの位置に追従させることができます。により追従するマーカーの情報をします。

さて、ここまで見たところでこの3つのAPIを組み合わせてシンプルなARを作ってみましょう。ARのサンプルとしてよくある、マーカー位置に立方体を表示する例を作ってみます。

コードはこちらを参照下さい： 立方体を表示するサンプルコード

これを実行すると、次のようにマーカー位置に立方体が表示されます：

ARで時計を表示してみよう

ここまでで、AR.jsの基本的な部分は押さえられました。先の例では単純な立方体を表示するだけでしたが、Three.jsを使ってより複雑なARを実現することができます。

ARでデジタル時計を実現するためには何が必要でしょうか？やり方はいろいろ考えられますが、ここでは次のように実現してみます：

  1. 現在時刻を表すテキストオブジェクトを配置する
  2. 配置したテキストオブジェクトを定期的に更新する

現在時刻を表すテキストオブジェクトを配置する

Three.jsでテキストオブジェクトを扱うには TextGeometry を使いますが、TextGeometryを使うにはフォントをあらかじめロードしておく必要があります。

フォントのロードには、FontLoaderを使います。以下のようなコードを書くことで、 にフォントデータをロードすることができます(なお、フォントデータはフォントごとにJSON形式で用意しておく必要がありますが、いつくかのフォントに関してはThree.jsの Examples の中にすでに用意されています。facetype.js を使って自前で作ることもできます)。

■ フォントをロードする処理

(.load (js/THREE.FontLoader.) <path>
  (fn [font]
    ... <ロードしたfontを使った処理> ...))

ロードしたフォントをオプションで指定してTextGeometryを作り、それをThree.jsのメッシュでくるんでやるとテキストオブジェクトを生成できます：

■ テキストオブジェクトの生成処理

(let [geo (js/THREE.TextGeometry. <text> #js{:font font ...})
      mat (js/THREE.MeshNormalMaterial. <mat opts>)]
  (js/THREE.Mesh. geo mat))

配置したテキストオブジェクトを定期的に更新する

TextGeometryで表示するテキストの内容はコンストラクタの第一引数に文字列として指定できるため、現在時刻を文字列にして渡してやれば時刻をテキストとして表現できます。しかし、一度生成したTextGeometryのテキストを後から変更することはできないので、刻一刻と時刻が変化していくのを素直に実現することができません。

そこで、定期的にテキストの内容を更新するごとに新たなテキストオブジェクトを生成し、元のテキストオブジェクトと差し替えることでテキスト内容の更新を実現します：

■ テキストオブジェクトの定期的な更新

(defn update-clock [clock target]
  (when clock (.remove target clock))
  (let [clock' <現在時刻のテキストオブジェクトの生成処理>]
    (.add target clock')
    (js/setTimeout #(update-clock clock' target) 200)))

これらを組み合わせると、以下のように1秒ごと(実際には200ミリ秒ごと)に更新されるデジタル時計として動くことが確認できます：

まとめ

今回はブラウザだけでARを実現できるJavaScriptライブラリであるAR.jsを使って、ARでデジタル時計を作ってみました。

この試みによって以下のようなことが分かりました：

  • AR.jsを使って非常に簡単にブラウザ上にAR機能を実現できる
  • スマホ上でも(ネイティブアプリでなくても)実用的なパフォーマンスでARを動かすことができる
  • Three.js等のライブラリと組み合わせて使えば、好みに合わせて自由にグラフィックを拡張していける
  • ただし、裏を返すとThree.js等の使い方が分からないと好きなように表示させるのはやや難しいかも

また、今回はよくある単なるARのグラフィックを表示するだけのサンプルプログラムではなく、時々刻々と変化する内容を伴った表示をARで実現するサンプルを試すことで、ユーザへ情報提示をする表現方法としてのARの可能性も改めて確認することができました。

今回作ったサンプルプログラムは以下のデモページから実際に確認することができます。その際は、下のARマーカーをあらかじめ印刷しておくか、別の端末で表示しておくように下さい。

コメント

コメントを投稿

このブログの人気の投稿

レイクタウンにある生産緑地

-
イメージ
１９９２年に改正された生産緑地法に基づいて定められた地域区域で市街化区域にありながら３０年間の農業の継続することや・１５１坪以上所有などの条件で税制優遇が受けれる地区を生産緑地地区(生産緑地)と呼ばれますが、生産緑地２０２２年問題と騒がれた税制優遇の廃止や農家の高齢化(後継者問題)によって手放す懸念が増す中、続けて頑張って下さっている農家の皆さまには頭が上りません。 都内でも、練馬や世田谷での生産緑地手放しの声は耳にしますが意外にも皆さん延長されているようです。というのも３０年経過前に特定生産緑地に指定しておけば１０年後まで税制優遇も延長できるのです。地球温暖化現象を抑えてる緑地を少しでも無くさないためにも、これからもご尽力頂ければ幸いです。   HaLake は、 ニャンパス株式会社 の運営するコワーキングスペースです。 受託開発をメインに行うニャンパス株式会社では、ウェブサービスやアプリ開発、IoTデバイスの開発を含め様々なご注文にお応えいたします。お気軽にご連絡ください。 ニャンパスへのお問い合わせ
続きを読む

越谷レイクタウンに新たに民間キャンプ場がオープン

-
イメージ
 越谷レイクタウンでアウトドア施設といえば、レイクタウンアウトレットに隣接し 湖畔を一望しながらBBQが楽しめる  KOSHIGAYA Lake side BBQ   が思い浮かびますが、 今年９月に、越谷市東町の中川沿いに新たにBBQはもちろんサイクリングやカヌーも楽しめ、 テントによるキャンプができる観光スポットがオープンすることになったという。 キャンプ場予定地に上げられる東町にある中川河川緑地。 昨年、吉川橋がリニューアルし交通の便が良くなりこの河川緑地のスペースに何かできる予感はしていましたが、期待以上の施設が計画されておりました。 　テントサイトは１０区画(大型 12 × 8m・小型 6 × 5m)・管理施設や炊事場も完備する予定だとか。 　天気も良く風がなければ、中川や元荒川はカヌーに適した場所なので期待できるでしょう！ HaLake は、 ニャンパス株式会社 の運営するコワーキングスペースです。 受託開発をメインに行うニャンパス株式会社では、ウェブサービスやアプリ開発、IoTデバイスの開発を含め様々なご注文にお応えいたします。お気軽にご連絡ください。 ニャンパスへのお問い合わせ
続きを読む

Phaser3 + Typescriptを使ってRPGゲームの基礎を作ろう！その２

-
イメージ
前回の記事 に引き続きPhaser3+Typescriptを使って RPG の基礎を作っていきます。 この記事は前回の記事を呼んだ前提で説明していきますので、ぜひそちらを先に読むことをお勧めします。 また、今回の記事は前回よりも難易度と内容量が上がっていますが、記事の最後に作業後の リポジトリ のリンクがありますので、そちらを先にダウンロードしてそちらと比較しながら学習することができます。 前回まで作成した状態のプログラムが以下の リポジトリ からダウンロードできますので前回まででうまくいっていない方は参考にしてみてください。 github.com 最終目標（再掲） ・Phaser3とTypescriptで RPG ゲームの基礎を作る。 ・Phaser3をTypescriptで使う方法を学ぶ ・Phaser3の使い方を学ぶ 今回の目標 ・ゲームの作り方の断片を知る ・キャラの表示できるようにする ・キャラを移動できるようにする ・当たり判定をつける ・ NPC の追加してみる ・話しかけられるようにする 開発前提（再掲） ・Nodejsの環境・知識がある ・ Javascript ・Typescriptがある程度かける ・当ページ紹介の環境を試す場合はgit・ github の知識がある 使用した主要Nodeモジュール（再掲） ・typescript（Typescriptの コンパイル 用） ・phaser（フロントの Javascript 用ゲームライブラリ） ・live-server（ソースを監視してブラウザのページをリロード） ・ts-loader（webpackがTypescriptをバンドルする用）webpack（言わずと知れたモジュール依存をいい感じに解決しバンドルする） ・webpack- cli （webpackを コマンドライン で使用するのに必要） 注：各Nodeモジュールバージョンは後述 当ブログ仕様の画像素材の注意点 当ブログで使用する画像素材は『 ピポヤ倉庫 』より許可なしで無償再配布・改変が認められたものを改変して作成されたものです。 中には許可なく再配布・改変してはいけない素材もインターネット上には多く存在するのでそれらを使用するときは十分に規約を呼んでから使用しましょう。 1. キャラの表示 想定画面 今回は、はじめにキャラつまり操作
続きを読む