顔を拡張した機能の概要

プラットフォーム固有のガイド

Augmented Faces API を使用すると、特殊なハードウェアを使用せずに、人間の顔の上にアセットをレンダリングできます。検出された顔のさまざまな領域をアプリが自動的に識別できるようにする特徴ポイントが提供されます。アプリはこれらの領域を使用して、個々の顔の輪郭に適切に一致するようにアセットをオーバーレイできます。

ユースケース

顔ベースの AR は、美容やアクセサリーの試着から、友達と一緒に楽しめる顔のフィルタやエフェクトまで、幅広いユースケースを可能にします。たとえば、3D モデルとテクスチャを使用して、キツネの特徴をユーザーの顔に重ねます。

モデルは 2 頭のキツネの耳と 1 頭のキツネの鼻で構成されています。それぞれが別個の 骨 それぞれが接着している顔の領域に合わせて個別に移動できます。

テクスチャは、アイシャドウ、そばかす、その他の色で構成されています。

Augmented Faces API は実行時にユーザーの顔を検出し、その顔にテクスチャとモデルの両方をオーバーレイします。

オーグメンテッド フェイスの構成要素

Augmented Faces API は中心ポーズ、3 つのリージョン ポーズ、3D フェイス メッシュを提供します。

中央ポーズ

鼻の後ろに位置し、ユーザーの頭の中央を描くポーズ。頭の上に帽子などのアセットをレンダリングするために使用します。

地域のポーズ

部位のポーズは、左額、右額、鼻先にあり、ユーザーの顔の重要な部分を示します。鼻や耳にアセットを表示する場合に使用します。

顔メッシュ

468 ポイントの高密度 3D フェース メッシュにより、顔に正確にフィットする、適応性のある詳細なテクスチャを描くことができます。たとえば、鼻の特定の部分に仮想メガネを重ねる場合などです。メッシュは、この仮想画像を簡単にレンダリングできる十分な詳細な 3D 情報を収集します。