在2017年時,蘋果曾推出基於Core ML的電腦視覺框架Vision,就像它名字里暗示的那樣,電腦視覺也是Vision Pro頭顯的重要功能之一。在WWDC 2023期間,蘋果宣布,Vision框架將新增Animal Body Pose API,特點是追蹤貓、狗等動物的多個骨骼節點,以實現全身姿態追蹤。據悉,該API僅支持iOS 17、iPadOS 17、tvOS 17和macOS Sonoma系統。

據了解,此前Vision框架已經支持人體姿態檢測,可追蹤19個身體關節,開發者利用該功能曾開發出多款健康、健身相關應用。而潛心的Animal Body Pose API則你的寵物,可追蹤25個身體標記,並定義了6個關節組,包括頭部(耳朵、眼睛和鼻子)、前腿、後腿、頸部、尾部(三個尾關節)、全身。值得注意的是,該功能目前僅能同時追蹤兩隻動物。
應用場景方面,動物姿態追蹤可以更好的分析寵物的行為,以及和傳感器的相對位置。如果應用於Vision Pro頭顯,也許可以允許用戶與寵物在AR模式互動,或在VR模式中提醒用戶寵物進入邊界。