Актуальні теми
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.
Karpathy щойно відмовився від автодослідження — агентів ШІ, які автономно виконують ML-експерименти на одній відеокарті, поки ви спите
Найкращі лабораторії ШІ 2027 року можуть бути лише 2-3 людьми

8 бер., 03:53
Я об'єднав проєкт «autoresearch» у новий автономний мінімальний репозиторій, якщо хтось хоче пограти на вихідних. По суті, це тренувальне ядро nanochat LLM, скорочене до однієї відеокарти, однієї файлової версії з ~630 рядків коду, а потім:
- Ітерації людини у запиті (.md)
- агент ШІ повторює навчальний код (.py)
Мета полягає в тому, щоб ваші агенти могли досягати найшвидшого прогресу в дослідженнях без вашої участі без вашої участі. На зображенні кожна крапка — це повний тренувальний забіг LLM, який триває рівно 5 хвилин. Агент працює в автономному циклі на гілці git feature і накопичує git-коміти до навчального скрипту, коли знаходить кращі налаштування (з меншими втратами валідації наприкінці) архітектури нейронної мережі, оптимізатора, усіх гіперпараметрів тощо. Можна уявити, як ви порівнюєте прогрес досліджень різних запитів, різних агентів тощо.
Частково код, частково наукова фантастика і щіпка психозу :)

З позитивного боку, ми могли б досягти більшого прогресу в дослідженнях з меншою кількістю $s зараз
376
Найкращі
Рейтинг
Вибране
