顔・手・姿勢に反応するARカメラ
表情、ジェスチャー、姿勢に応じた効果を重ねるARアプリです。認識の分類と表示、写真・動画に効果を残すネイティブ合成を実装しました。
画面
認識を画面効果に変える
顔・手・身体の認識を分類してオーバーレイに接続します。感情は診断や事実ではなく、信頼度を伴う推定として表示します。
プレビューと保存結果をそろえる
ネイティブカメラとGPU合成をつなぎ、利用者が保存した写真・動画にもプレビューの効果が残るようにしました。
端末内の認識処理
顔・姿勢の認識は端末内で行い、一般的なアプリ分析基盤とは別の処理としてデータを区分しています。