はじめに

faceのblendshapeや、handのlandmarkを使用し、オブジェクトをイイ感じに動かせるようになりました。その方法を紹介します☺️

前回からの変更点は以下の通りです。

  • faceの輪郭4点の座標を送信用JSONに追加
  • blendshapeを使った眉・瞼・口の動き
  • handのlandmarkで指の動き

Python

前回から、顔の輪郭4点（上・下・左・右）の座標をJSONに追加しました。

face_json_tmp['top'] = face_top_lm_data
face_json_tmp['bottom'] = face_bottom_lm_data
face_json_tmp['right'] = face_right_lm_data
face_json_tmp['left'] = face_left_lm_data

Unity

顔の輪郭4点から顔全体の向きを計算します。blendshapeを使って眉・瞼・口の動きを再現します。

動作確認

さいごに

それでは、今回はここまで。ありがとうございました😊