«Контекст 1M» больше не нужен. Как линейные RNN и Titans меняют архитектуру ИИ LLM научилась запоминать бесед…
«Контекст 1M» больше не нужен. Как линейные RNN и Titans меняют архитектуру ИИ LLM научилась запоминать беседу, не подгядывая в контекст. Архитектуры типа Titans и обещают превращение цикла вывода в цикл онлайн-оптимизации https://clck.ru/3S6FRT
Автор: Habr все новости об IT