Google、アプリがリアルタイムで姿勢を認識できる新技術を開発

最近取り組んでいる技術の 1 つは、リアルタイムの身体姿勢モニタリングです。新型コロナウイルス感染症による外出制限中に、姿勢を正すために、カメラを通して私たちの位置を特定できるアプリケーションが(特にスポーツ分野で)登場しました。 Google は、いつものように、機械学習ツールを活用して、現在のリアルタイム姿勢認識手法をさらに一歩進めたいと考えています

MediaPipe BlazePose は、ビデオ経由で被写体の位置を推定するための新しいツールで、これまでよりも正確かつ強力になることが約束されています。それでは、このテクノロジーが何に基づいているのか、そしてそれが私たちの携帯電話にどのようなアプリケーションを搭載できるのかを説明しましょう。

体位検出を新たなレベルへ

画像 2020 08 17 11 07 20

Googleはブログで、体の姿勢を検出するための現在の標準はCOCOトポロジーであり、胴体、腕、顔、脚に分散された合計17の基準点で構成されていると述べている。 Google はこのテクノロジーをさらに進化させたいと考え、約束どおり、体の動きをより正確に予測できる新しい 33 ポイント トポロジである BlazePose を作成しました。

Google は、このテクノロジーがリアルタイムで動作できるように、携帯電話のコンポーネントを使用しています。

体の位置を決定するには、2D 画像を通じてこれら 33 個の基準点を分析する機械学習アルゴリズムが使用されます。さらに、携帯電話の GPU と CPU リソースを活用することで効果的であることが約束されています。彼らが公開した例のいくつかでは、動きが速い場合でも、このテクノロジーが基準点から体全体を追跡できることがわかります。

画像4 1

専門的なことにはあまり立ち入りませんが、一連のアルゴリズムを使用して、分析されたポイントを使用して関心領域を分析し、被写体の位置を分析し、被写体の動きを追跡します。このプロセス全体はリアルタイムで実行する必要があるため、数ミリ秒で完了します

Googleは、この技術は、動作の上手い下手を検証できるため、スポーツ用途で特に役立つだろうと述べている。 BlazePose は、Android と iOS の両方で開発者がサービスを提供するツールとなり、位置検出 API を通じても利用できるようになります。

経由 | Google AI ブログ

Google、アプリがリアルタイムで姿勢を認識できる新技術を開発・関連動画