Microsoft Build 2024: основні ШІ-анонси першого дня
- Корпорація Microsoft запропонувала використовувати асистента Copilot для автоматичного виконання завдань.
- Анонсовано мультимодальну модель Phi-3-vision, здатну виконувати загальні завдання візуального міркування.
- У браузері Edge з’явиться ШІ-функція живого перекладу відео з YouTube та інших сайтів.
- Microsoft і Qualcomm представили «крихітний» ПК Snapdragon для Windows.
- У PowerToys для Windows 11 з’явиться ШІ-функція копіювання і вставки.
- Також компанія оголосила про партнерство з Академією Хана в галузі ШІ.
21 травня 2024 року корпорація Microsoft запустила щорічну триденну конференцію для розробників Build.
У перший день топменеджери компанії багато говорили про Windows і штучний інтелект.
Агенти ШІ для рутинних завдань
За даними техгіганта, скоро підприємства і розробники зможуть створювати кастомні версії Copilot, здатні працювати як віртуальні співробітники і виконувати завдання автоматично.
Замість очікування запитів користувача, чат-бота дозволять задіяти для моніторингу електронної пошти, допомоги в адаптації персоналу, введення даних або інших рутинних завдань, заявили в корпорації. При цьому підказки не будуть потрібні.
«Ми дуже швидко зрозуміли, що застосування чат-бота просто для діалогу вкрай обмежує можливості Copilot сьогодні», ― зазначили в компанії.
Поки що функцію може випробувати невелика група тестувальників. Пізніше 2024 року компанія запустить загальнодоступну попередню версію Copilot Studio.
Підприємства зможуть створити ШІ-агента Copilot, який виконуватиме завдання служби ІТ-допомоги, прийматиме співробітників і багато іншого.
«Copilot перетворюється з помічників, які працюють із вами, на асистентів, які працюють на вас», ― ідеться в блозі.
Мультимодальна модель Phi-3-vision
Компанія анонсувала нову версію невеликої мовної моделі Phi-3. Тепер вона може переглядати зображення і відповідати на запитання про них.
За даними Microsoft, мультимодальний алгоритм Phi-3-vision з 4,2 млрд параметрів здатний виконувати загальні завдання візуального міркування. Завдяки «компактності» його можна запускати на мобільних пристроях.
Модель набагато менша, ніж DALL-E від OpenAI або Stable Diffusion від Stability AI, і не вміє генерувати картинки, але здатна аналізувати і розуміти їхній вміст.
Phi-3-vision доступна в попередній версії. Інші алгоритми сімейства Phi-3 ― Phi-3-mini, Phi-3-small і Phi-3-medium ― можна використовувати через бібліотеку моделей Azure.
Переведення живих відео в Edge
Корпорація пообіцяла незабаром додати в браузер Edge ШІ-функцію перекладу усного контенту у відео в режимі реального часу.
За даними Microsoft, система може дублювати або генерувати субтитри обраною мовою для роликів з YouTube, LinkedIn, Coursera та інших платформ. Також вона підтримує переклад відео з новинних сайтів, наприклад, Reuters, CNBC і Bloomberg.
У майбутньому компанія має намір розширити список ресурсів і мов.
Поки що функція вміє перекладати з іспанської на англійську, а також з англійської на іспанську, італійську, німецьку, російську та хінді.
У компанії впевнені, що крім зручного способу перекладу відео нова ШІ-функція Edge зробить ролики доступнішими для людей із порушеннями слуху.
«Крихітний» ПК Snapdragon
Компанія Qualcomm представила міні-комп’ютер Snapdragon Dev Kit для Windows. Його ціна становить $899,99.
Пристрій оснащений процесором Snapdragon X Elite з GPU продуктивністю 4,6 TFLOP. Він включає 32 ГБ оперативної пам’яті LPDDR5x, 512 ГБ NVMe-накопичувач і безліч портів.
Розмір ПК: 20,3 см х 17,8 см х 3,3 см. Він пропонує Wi-Fi 7, Bluetooth 5.4 і достатньо потужності для одночасної роботи трьох моніторів 4K.
Продаж Snapdragon Dev Kit для Windows розпочнеться 18 червня 2024 року. Поки неясно, чи всі зможуть його придбати.
Копіювання та вставка на базі ШІ
Корпорація додала в набір службових програм PowerToys для Windows 11 ШІ-функцію Advanced Paste. Вона дає змогу «на льоту» конвертувати вміст буфера обміну в необхідний формат за допомогою штучного інтелекту.
Advanced Paste включена в PowerToys версії 0.81. Після активації за допомогою команди Windows Key + Shift + V відкриється текстове вікно із запропонованими параметрами перетворення: простий текст, markdown і JSON.
При виборі «вставити з ШІ» в налаштуваннях функції з’явиться пропозиція OpenAI ввести бажану конвертацію ― узагальнений текст, переклади, згенерований код, переписування з повсякденного стилю на професійний, синтаксис Yoda або інше.
Щоб використовувати Advanced Paste, необхідно додати ключ API OpenAI в PowerToys, а також купити кредити для свого облікового запису.
Партнерство з Академією Хана
Крім описаних новинок Microsoft також оголосила про партнерство з некомерційною освітньою організацією Академією Хана.
У рамках угоди всі викладачі K-12 у США отримають безкоштовний доступ до пілотної версії ШІ-асистента Kanmigo. Він допомагає вчителям знаходити способи робити уроки більш цікавими та захопливими.
Kanmigo вміє рекомендувати завдання, відображати інформацію про успішність школярів для оцінки їхнього прогресу та надавати навчальні ресурси. Він також може створювати плани занять і пропонувати групи для командної роботи.
Раніше використання асистента коштувало $4 на місяць. Партнерство з Microsoft дало змогу Академії Хана безкоштовно використовувати службу Azure OpenAI для забезпечення роботи Khanmigo.
У рамках угоди освітня організація також допоможе корпорації навчати мовні моделі Phi-3 і розвивати можливості ШІ в математиці.
Раніше Microsoft провела спеціальний захід напередодні конференції Build 2024, де презентувала ПК Copilot+, Windows 11 на Arm і безліч функцій із ШІ.
