Відкриття може кардинально змінити індустрію гаджетів
Дослідники з Массачусетського університету в Амгерсті розробили першу асинхронну ШІ-архітектуру ANT, яка імітує роботу людського мозку. Технологія дозволяє суттєво знизити енергоспоживання ШІ під час обчислень завдяки активації окремих груп штучних нейронів. При цьому алгоритм зберігає високу здатність до навчання.
Про це пише РБК-Україна з посиланням на наукове дослідження, опубліковане у Nature Communications.
Чому сучасний ШІ занадто "голодний"?
Головна проблема чинних нейромереж - надмірна синхронність. Вчені пояснили: всі сучасні моделі працюють за командою так званого глобального годинника.
"Коли ви ставите запитання чат-боту, одночасно прокидаються і починають прораховувати відповідь мільярди цифрових нейронів. Навіть якщо завдання зовсім просте, система все одно запускає всі свої потужності і витрачає купу енергії просто на те, щоб тримати ці процеси синхронізованими", - зазначають дослідники.
Раніше, коли нейромережі були малими, це не було проблемою. Але зараз моделі виросли до трильйонів параметрів. Через це вони стали настільки енергоємними, що їх просто неможливо встановити у роботі чи звичайному смартфоні - батарея розрядиться за лічені хвилини.
Спроби зробити ШІ асинхронним робилися і раніше, проте такі системи втрачали здатність нормально навчатися й "гальмували" у розвитку.
Читайте більше: ШІ навчився "вмикати зір" через мозок: що винайшли вчені
Як технологія ANT вирішує проблему?
Вчені спробували поєднати точність звичайного ШІ та економність людського мозку і створили цифрову архітектуру ANT (Asynchronous Neural Turing networks). Її головна фішка - повна відмова від загального "годинника", але із збереженням високої здатності до навчання.
Нова система працює за двома простими принципами:
Робота по черзі: ШІ більше не вмикає всі свої цифрові "мізки" одночасно. На кожному кроці активуються лише ті нейрони, які потрібні для розв'язання конкретної задачі. Як результат - споживання енергії скорочується в рази.
Навчання на ходу: ANT вміє накопичувати та зберігати інформацію прямо під час роботи. Така нейромережа може донавчатися в реальному часі, не потребуючи для цього повторного переведення через гігантські комп'ютерні ферми.
"Теоретично, новий підхід дозволить створювати системи, які за розумом не поступатимуться сучасним ШІ, але працюватимуть значно чистіше та екологічніше", - підсумовують вчені.
Найближчим часом розробники планують протестувати технологію на практиці. Найбільше користі від ANT отримають сфери, де кожен ват енергії на рахунку: безпілотні автомобілі, портативні гаджети, дрони та розумні роботи, яким більше не доведеться залежати від розетки.
Ще більше цікавого:
- ШІ почав навчатися швидше за людей: Anthropic назвала ключові загрози
- Шахраї можуть копіювати відбитки пальців із фото: як уберегтися
