- スマホアプリ開発を一貫支援
- AI活用・XRなど先端技術に対応
- PoC・新規サービス開発に対応
生成AI連携 マルチモーダル対話アプリケーション
東北大学自然言語処理学研究室の研究課題「現実世界の変化に適応する自然言語理解モデルの研究開発」調査用アプリケーション開発へ参画
- 業種
- 教育事業
- 地域
- 情報非公開
- 規模
- 情報非公開
- 費用
- 情報非公開
ユーザーが現実空間に関連する質問をすると、AIがリアルタイムに状況を推論し、音声・テキストで返答する機能を開発しました。Apple Vision Proを通じて「現実空間の情報」と「ユーザーの音声データ」を取得し、AIが解析・推論を行う仕組みになっています。
Apple Vision Proでは通常、カメラ映像から「現実空間の情報」を取得することはできません。しかし今回のプロジェクトではApple社に申請を行い、特別に利用許諾(Enterprise API)を取得しました。これにより、既存の生成AI(ChatGPT、Gemini)に現実情報を渡すことが可能となりました。
今後の展望として、今回の取り組みを機にAIとの関わりを広げ、AI開発で行われる技術開発を積極的に推進してまいります。
本プロジェクトを通じて得られた知見を活かし、アップフロンティアは今後もAIとXR技術を融合させた研究開発を積極的に進めてまいります。
現実世界に適応するインテリジェントな体験の実現を目指し、未来の社会や暮らしに寄り添う次世代テクノロジーの創出に挑戦していきます。
- 依頼を受けたカテゴリ
- スマホアプリ開発スマホアプリ開発モバイルシステム開発ソフトウェア開発
- 制作物種別
- iPhone、iPadアプリAndroidアプリツール・ユーティリティ系学習・教育系
- 業務範囲
- Apple Vision Proアプリの開発
生成AI(ChatGPT、Gemini)を利用
- 業務の概要
- 東北大学自然言語処理学研究室は、現実世界の状況に柔軟に適応するマルチモーダルモデルの研究開発に取り組んでいます。既存の生成AI(ChatGPT、Gemini)と最先端デバイスのApple Vision Proを活用し、目の前の状況に応じて人とAIとが自然に対話できるアプリケーションの開発に取り組みました。
- 開発規模・期間
- 利用技術
- JavaC#Object-Cjavascriptその他言語ソフト・アプリ設定サーバ設定PC設定
- 利用サーバー環境・DB
- AndroidiPhone
- 備考
実績・事例画像
業務内容
-
スマートフォンアプリ開発、AI活用、XR/AR、PoC開発に対応。要件整理からUI/UX設計、開発、運用まで、実際に使えるサービスとして形にします。
-
人気
1
-
実績
1
-
価格 -----
アプリ開発、AI活用、XR/AR、PoCまで。構想段階から伴走し、サービスを形にする開発会社です
-
-
モバイルシステム開発を企画・設計・開発・運用まで一貫支援
-
人気
1
-
実績
1
-
価格 -----
スマートフォンアプリ、業務支援、AI活用、AR/XR、PoCまで。構想段階から相談でき、実際に使い続けられるモバイルシステムとして形にします。
-
実績・事例
-
アプリひとつで予約から返却まで完結する、カーシェア専用アプリ
—— 最寄りのカーステーション検索や、乗りたい車種の予約(キャンセル待ち)、乗車、返却までのステータスを管理できる便利アプリです。- 業種
- 製造業
- 地域
- 東京都
- 規模
- 情報非公開
本アプリは、先進安全運転支援システムを搭載した最新車両を対象とするカーシェアサービスの中核を担う公式アプリです。月会費・年会費・入会金が無料、平日15分200円から利用できる料金体系と、4時間/8時間/16 …
-
「物語の自動販売機」システム /街中で物語と出会う、日本初の体験を支えるアプリケーション開発
—— 書店以外の場所で「物語との偶然の出会い」を演出する、自動販売機型コンテンツ配信システム。文化庁「令和7年度 文字・活字文化資源活用推進事業」採択プロジェクトを、専用アプリケーションの開発で支えました。- 業種
- 新聞・出版業
- 地域
- 情報非公開
- 規模
- 情報非公開
本アプリは、新規事業を技術面から実現したものです。 高さ118cm x 横幅38cm x 奥行30cmの専用筐体にタブレットと印刷機を内蔵し、利用者が画面のボタンを選択すると、各カテゴリに登録された500から2500字程度(3 …
-
リスクハンター
—— 物流倉庫で働く従業員向けのヒヤリ・ハット防止トレーニングゲームアプリ- 業種
- 金融・保険・証券
- 地域
- 情報非公開
- 規模
- 情報非公開
1つのアプリで2つのステージを用意しています。 「倉庫編」 物流倉庫で働く従業員等の貨物事故防止を目的とした学習ゲームです。 360度カメラで撮影した倉庫内のステージ上で、注意ポイントを探し出すことで、学 …
-
熱帯植物虫めがねAR
—— 東京都夢の島熱帯植物館でARを使って館内に生育する植物たちの魅力を伝えるスマートフォン用ARアプリ- 業種
- ソフト・システム開発
- 地域
- 情報非公開
- 規模
- 情報非公開
館内6箇所に設置された2次元バーコードを読み取ることで、植物の実際の位置に虫めがねARとして植物の情報がARで表示されます。 ARを通し植物の鑑賞をより楽しく、より植物たちの魅力を知っていただく、新しい植物 …
-
豊洲ARスタンプラリー
—— 東京都のスマートサービス実装促進プロジェクト「Be Smart Tokyo」の一環として企画された、豊洲で楽しめるスマートフォン用 ARアプリ- 業種
- ソフト・システム開発
- 地域
- 情報非公開
- 規模
- 情報非公開
アップフロンティアのAR開発サポートツール「CFA(シーファ)」のパッケージ「ARスタンプラリー機能」を活用したアプリとなっています。 AR表示にはGoogle社のVPS(Visual Positioning System/Servise)「ARCore Geosp …