Технології

Штучний інтелект виснажує ресурси Вікіпедії: деталі

3 квт•SPEKA

Фонд Вікімедіа повідомив, що автоматизований збір даних штучним інтелектом зріс, що вже вплинуло на стабільність роботи Вікіпедії й інших платформ фонду, пише Ars Technicа.Від початку 2024 року компанії, що розробляють LLM-моделі, збільшили масштаб сканування через API і прямі завантаження, що призвело до зростання на 50% пропускної здатності для мультимедійного контенту.Фонд Вікімедіа хостить не лише Вікіпедію, а й Wikimedia Commons, де зберігається 144 млн медіафайлів. Це робить платформи привабливими для компаній, які масово збирають дані для навчання ШІ. Проте такий трафік коштує дорого: боти генерують 65% найбільш ресурсомістких запитів, хоча становлять лише 35% переглядів сторінок. На відміну від людей, які відкривають популярні статті, ШІ-боти безсистемно «прочісують» навіть маловідомі сторінки, обминають кешування і навантажують сервери фонду. Окрім навантаження, деякі ШІ-сканери порушують правила чесного використання:ігнорують директиви robots.txt; маскуються під звичайних користувачів; використовують житлові IP-адреси для обходу блокувань.Фонд Вікімедіа наголошує: їхній контент є відкритим, але підтримка серверів потребує ресурсів. Тому організація ініціювала проєкт WE5: відповідальне використання інфраструктури, що має розробити стійкі механізми взаємодії між ШІ-компаніями і відкритими платформами. Вікіпедія може:обмежити швидкість запитів для ботів; створити окремі API для ШІ-компаній; залучити фінансову підтримку інфраструктури з боку бізнесу.

фонд

Читайте ще