Слідом за Еріком ще декілька представників різних компаній заявили, що замінюють або планують…
- Anthropic: компанії почнуть замінювати працівників на AI вже наступного року. І AI буде писати весь код. 🟢 Shopify: працівники зобов'язані використовувати AI для виконання задач. 🟢 Canva замінили більшість технічних авторів на AI. 🟢 Duolingo заявили, що переходять на AI у багатьох процесах. Чим викликали хвилю гніву.
Але
55% компаній, де працівників замінили на AI, поки що визнають, що дарма вони це зробили. І результати у них не надто захоплюючі.
І ось днями ще вийшло цікаве дослідження — The Leaderboard Illusion. Якщо коротко:
перевірили, як зроблені рейтинги і оцінювання LLM у Chatbot Arena. Виявили, що провайдери здебільшого користуються приватною практикою тестування, вибірково розкривають результати і тільки ті, які більш позитивні. Іншими словами, моделі навчають показувати гарні результати на арені, але тільки з якоїсь там спроби. І потім публікують саме цей один нормальний результат, а усі інші не публікують.
Andriy Burkov взагалі каже, що LLM не здатні перерости у AGI.
У приватній розмові людина з гугла стверджувала приблизно те саме.
. ... ... ... AI ∧＿∧ ｡˖° ( •̀ω•́) ･ﾟ＊ ⊂ﾐ ⊂) +ﾟ* （＿＿づ+＊ _/／ ::ﾟ･｡
- ＊+ *･ SEOшники˖