Нейросети

Искусственный интеллект на 4 МГц: Z80-μLM, который шепчет с зелёного экрана

История крошечной языковой модели Z80-μLM, которая умещается в 40 КБ и работает на процессоре 1976 года, отвечая на вопросы и играя в «20 вопросов» — без флота из серверов и гигантских кластеров.

От Маркова до Трансформера: короткая история больших языковых моделей

Легкая прогулка по вехам, которые привели ИИ от n-грамм и распределённых представлений к трансформерам, предобучению и RLHF — с приметами «горького урока» масштаба.