Команда фахівців-дослідників Apple розробила нову ІІ-систему, яка отримала назву Reference Resolution As Language Modeling (ReALM).

Потенційно вона здатна помітно збільшити можливості голосових помічників. ReALM може розуміти неоднозначні посилання на об'єкти на екрані, а також враховувати розмовне та контекстне тло.

Нова AI-система здатна реконструювати екран у зрозумілому для себе форматі. Фактично ReALM переводить інформацію на екрані в текст, враховуючи при цьому візуальні особливості та розташування об'єктів. Такий підхід разом із тонким налаштуванням мовних моделей забезпечує краще розуміння системою різних особливостей та тонкощів.

При цьому розробники попереджають, що на даному етапі ReALM погано справляється із складними візуальними об'єктами та завданнями. Для покращення всієї системи потрібно задіяти мультимодальні підходи та комп'ютерний зір.

Однак сама по собі розробка свідчить про те, що компанія Apple продовжує вкладати великі сили та кошти у розвиток свого голосового помічника. Поліпшена Siri може стати однією із ключових особливостей iOS 18.