Apple Vision ProはAppleのどのAI機能を「漏洩」させたのか？

巴比特_

2023-06-06 07:45:29

原文: ジョブズ

出典: ビッグモデルハウス

北京時間6月6日早朝、Apple WWDC 2023 Worldwide Developers Conferenceが正式に開幕し、このイベントでは「もうひとつ」としてデビューしたApple Vision Proは間違いなくイベントで最も注目された製品となった。そのうちの。

業界では「メタバース」ブームは後退し、AppleのXR路線への参入はやや遅れているとの見方が一般的だったが、結果的にはApple Vision Proのような「王様爆弾」製品であることが判明し、業界を驚かせた。

さて、業界は一般的に人工知能に注目を集めており、Apple は「メタバース」デバイス Apple Vision Pro を発売しましたが、これにより人々は Apple の人工知能における能力を疑うようになりました。

次に、大きなモデルハウスで、WWDC 2023 で最新の Apple Vision Pro によって明らかになった Apple の人工知能の強みを評価してみましょう。

AIGC はポートレートを生成します

FaceTime ビデオ通話に Apple Vision Pro を使用する場合、ユーザーに向かってカメラがなく、ユーザーが XR デバイスを装着しているため、ユーザーは非常に奇妙に見えます。

この目的のために、Apple は Apple Vision Pro のフロントレンズを通して顔情報をスキャンし、機械学習テクノロジーに基づいて、システムは高度なコーディングニューラルネットワークを使用してユーザーの「デジタルクローン」を生成し、ユーザーの顔と手を動的に模倣します。さらに、デジタルツインのボリュームと奥行きも維持します。使いやすさと効果は、現在市場にある一部のデジタルツインソフトウェアをも上回ります。

よりスマートな入力方法

皆さんご存知のとおり、XR 業界で最も批判されているジレンマの 1 つは、入力方法の不足です。ハンドルによる単一キー入力であっても、フローティングキーボードによる入力方法であっても、効率と精度の点で比較されます。物理キーボードを使用すると、エクスペリエンスが劣り、非常に悪いです。

Apple Vision Pro の主な操作方法は目、ジェスチャー、音声です。つまり、音声入力は Apple Vision Pro の最も重要な入力方法の 1 つになる可能性があります。

Apple は Apple Vision Pro の導入では入力方法を強調しませんでしたが、iOS 17 の導入では、スペルミスを修正するだけでなく、入力プロセス中にユーザーの文法上の誤りも修正できる、よりスマートな入力方法について言及しました。

自動修正された単語には一時的に下線が引かれ、どの単語が変更されたのかがユーザーにわかりやすくなり、ワンタッチで元の単語に戻ります。

さらに重要なことは、デバイス側の機械学習に基づいて、入力メソッドが各ユーザーの入力に基づいてモデルを自動的に改善することです。入力方式の自動補正機能はかつてない精度に達しました。

さらに、最先端の単語予測 Transformer 言語モデルに基づいた単語関連付け機能により、次の単語や完全な文を非常に迅速に入力できます。

また、この非常にパーソナライズされた言語予測モデルにより、入力方法がユーザーの言語習慣をよりよく理解できるようになり、ユーザーが音声と入力を使用する場合の入力の精度も大幅に向上します。

新しい「メモ」アプリ

iOS 17のリリースに合わせて、デバイス上の機械学習テクノロジーを使用して、ユーザーの写真、音楽、運動、その他の情報に基づいてパーソナライズされた思い出や書き込みの提案を作成できる新しい「ジャーナル」アプリも追加されました。この情報に基づいて、アプリは適切なタイミングで録音と書き込みに関する提案を提供します。

これは、iPhone のコンピューティング能力に基づいて、このデバイスがテキストや画像などのマルチメディアコンテンツのローカライズされた処理のための意味理解機能を展開でき、特定の生成 AI 機能を備えていることを意味します。

現時点では、Apple は目立たないようにすることを選択していますが、Big Model House の見解では、Apple の AI 機能は GPT のようなトップレベルの大規模モデルに比べて確かに相対的に弱いと言えます。

さらに、家電製品やサービスが主な収益源であるテクノロジー企業として、Apple は AI という比較的一般的な概念と比較して、ユーザーエクスペリエンスを向上させ、ユーザーの定着率を高め続ける新機能の出現を強調する必要があります。

シーンとアクションの認識能力

また、空間音声の計算、目の動きや手の動きのキャプチャなど、これらも人工知能技術が強みを発揮する分野であり、AppleはM2チップとR1チップの演算能力により人工知能を実現しています。スムーズなローカリゼーションの展開は、家電分野に人工知能を適用する Apple の能力を完全に反映しています。

Apple は WWDC 2023 で AI 機能を過度に強調しませんでしたが、製品機能のあらゆる側面から、その AI 機能は製品の細部にまで浸透しており、ユーザーエクスペリエンスを向上させる重要な手段となっています。

世界で最も影響力のあるテクノロジー企業の 1 つとして、Apple は人工知能における業績を公表していませんが、Apple の大ヒット製品のスタイルから判断すると、人工知能の分野における同社の強みは依然として過小評価できません。