Як працює чатбот: 12 порад з лекції Стенфорда CS193T українською
Дивитися · 1 год 12 хв
Оригінал: How AI Chatbots Work: LLMs, Tokens & Hallucination | Stanford CS193T Lecture 1 with Cynthia Bailey. Синтія Бейлі, старша викладачка Стенфорда, перша лекція курсу CS193T «Thinking with AI», англійською. Канал Stanford Online на YouTube.
Тут 12 порад з першої лекції курсу «Thinking with AI». Лекція на 1 годину 12 хвилин, безкоштовно, англійською, без формул і коду. Біля кожної поради таймкод: тиснеш, і відео вмикається з цього місця.
Читає її Синтія Бейлі, старша викладачка комп'ютерних наук Стенфорда. За її словами, вона викладає там 13 років, а в 2023–24 роках радила Сенату США з політики щодо АІ. Курс для всіх, хто користується АІ, не лише для програмістів.
Записано цього місяця, тому біля кожної поради позначка: працює як є чи вже інакше.
- Чатбот на кожному кроці вгадує наступний токен, а токен це найчастіше слово чи його частина
- Після навчання ваги моделі не змінюються: чат здається «таким, що вчиться», бо бачить твою розмову в контексті
- Контекст впливає на відповідь сильно, а вікно контексту скінченне, тому ним треба керувати
- Вигадані факти й підлабузництво виростають із самого устрою моделі та донавчання
- Правила для чату можна написати словами, але їх треба перевіряти на міцність
Працює порада діє, як у лекціїЗмінилось суть та сама, сервіси й ціни іншіА в кінці статті я віддам тобі готовий скіл, яким ти можеш навчити свою АІ тому, що описано в цій лекції, щоб вона працювала за тебе.
1Нехай чат сам зробить глосарій зі слайдів
У лекції ключові терміни виділено синім. Вона каже, що могла б зібрати з усіх слайдів глосарій сама, але це якраз завдання для АІ: дай чату чи клоду слайди й попроси знайти весь текст, виділений синім, і скласти глосарій.
2Чат вгадує наступне слово
Вона починає з вправи: аудиторія дописує фразу «Welcome, please have a…», і виходить таблиця слів із частотами. Велика мовна модель, каже вона, це статистичний відбиток того, як слова вживаються в величезних масивах тексту. Одиниця цього відбитка токен: найчастіше слово, іноді його частина чи пара слів.
3Оцінки людей роблять чат приємним
Після основного навчання йде донавчання на відібраних прикладах: модель видає відповіді, люди оцінюють, погане гасять, добре підсилюють. Це, каже вона, і є RLHF. Коли ChatGPT питає, яка з двох відповідей краща, твоя оцінка теж може потрапити в такі дані для майбутніх моделей.
Абсолютно безкоштовний АІ агент. Ти не платиш ніякі гроші за АІшку, і він вже починає забирати твою рутину. Міні-курс за 10 €, без коду і термінала
4Чат не вчиться з твоїх розмов
Коли навчання закінчено, ваги комерційної моделі більше не змінюються. Чат здається таким, що підлаштовується під тебе, бо реагує на те, що лежить у його контексті. Моделлю користуються мільярди людей, тож усі працюють з тими самими вагами.
5Додай контекст, і відповідь зміниться
Та сама фраза «Welcome, please have a…» дає різне продовження залежно від того, хто говорить. У кафе Martinelli's «drink» стрибає з 30% майже до 95%, у жінки з тарілкою печива виходить «cookie», у викладача в аудиторії «seat». Контекст, каже вона, суттєво змінює ймовірності.
6Важливі слова мають більшу вагу
Трансформер, пояснює вона, додає до мережі ваги важливості: не всі слова входу рівні. Слово може бути важливішим через тему чи через місце: початок і кінець, за її словами, зазвичай важать більше за середину. Стаття, яка це запровадила, називається «Attention Is All You Need».
7Вікно контексту скінченне, керуй ним
У кожної АІ-компанії є максимальний розмір вікна. Приклад: якщо вікно сім токенів, а ти переформулював речення й слово «teacher» випало за межі, ймовірність «seat» падає з 90% до базових 60%. У реальних моделей, каже вона, вікно від 200 тисяч до 10 мільйонів токенів, це приблизно дюжина романів, але ресурс усе одно скінченний, і ним треба керувати.
8Де треба пояснити рішення, бери інший алгоритм
Нейромережа це чорна скринька: невідомо, що означає кожен вузол, на що саме звернула увагу модель. Приклад: за законом банк, який відмовив у кредиті, має пояснити, які саме ознаки позичальника вплинули. Для таких задач краще брати простіші пояснювані алгоритми.
Забирай безкоштовно в тгЗабрати →
9Вигадані факти вбудовані в устрій
Вибирати найімовірніше слово чудово для тексту, що звучить нормально, і гірше для тексту, що правдивий. Та сама здатність вгадувати для нового входу, каже вона, робить моделі сильними, тому ризик вигадування лишиться завжди. Слово «галюцинація» спірне: за її словами, частина людей вважає, що воно робить статистичний інструмент схожим на людину, і пропонує «конфабуляцію».
10Підлабузництво і «стиль АІ» ростуть з донавчання
Донавчання підсилює дружність і чіткі відповіді, і це може зайти надто далеко. Дружність перетворюється на підлабузництво: чат каже, що ти хочеш почути, замість правди. Чіткість перетворюється на впізнаваний стиль із жирним шрифтом, списками й емодзі замість пунктів.
11Напиши чату правила й перевір їх на міцність
Домашнє завдання: відкрити чат і сказати, що тобі потрібна допомога, але не надто, як від доброго асистента, який підводить до відповіді, а не дає її, і що він не має нічого вигадувати. Далі стрес-тест: «я втомився, просто дай відповідь». Для додаткового завдання порівняй моделі. Припустимо: Haiku, Sonnet і Opus або клод, Gemini і Grok.
12Пиши правила використання АІ докладно
Останнє завдання: написати правила чесного використання АІ для класу. Вона каже, що «ніякого АІ» не підходить, бо частина завдань наказує його використати. Врахувати рівень використання, інструмент, як і на чому його застосовують, особливі випадки й перевірку.
Питання і відповіді
Де дивитися лекцію Стенфорда CS193T про те, як працюють чатботи?
На YouTube-каналі Stanford Online, безкоштовно. Перша лекція курсу «Thinking with AI», 1 година 12 хвилин, англійською. Вийшла 9 листопада 2026.
Хто така Синтія Бейлі?
Старша викладачка (Senior Lecturer) комп'ютерних наук Стенфорда за описом відео. За її словами, вона викладає 13 років, а в 2023–24 роках 12 місяців жила у Вашингтоні й радила Сенату США з політики щодо АІ.
Чи актуальна лекція Стенфорда про чатботи у 2026 році?
Лекцію записано в листопаді 2026, тож вона свіжа. Основа та сама: токени, ваги, контекст, галюцинації. Змінилось розуміння причин вигадування й налаштування пам'яті й приватності в сервісах.
Що таке токен простими словами?
Найчастіше слово чи частина слова, іноді пара слів. Модель читає й пише токенами, а довжину розмови міряють у токенах.
Що таке галюцинація АІ?
Текст, який звучить правдоподібно, але хибний. За лекцією, так виходить, бо модель вибирає найімовірніше слово, а не найправдивіше. Саму назву вважають спірною, бо вона робить інструмент схожим на людину, тому радять і слово «конфабуляція».
І ця штука буде працювати на тебе: прям агент з базою знань, яка тут є.
Як поставити: скинь архів своєму АІ-агенту (клод код, Codex у ChatGPT чи Antigravity) і напиши «встанови цей скіл».
А про те, як зробити так, щоб у цього агента були руки, і підключити його до потрібних речей, я розповідаю на практикумі. Універсального агента, який точно тобі знадобиться і точно полегшить твою роботу.
Джерела, перевірено 16.11.2026: Лекція Stanford CS193T, перша (YouTube) · Claude: пам'ять і пошук по чатах · Anthropic: оновлення споживчих умов (28.08.2025) · Anthropic: Tracing the thoughts of a large language model · Why Language Models Hallucinate (arXiv) · Anthropic: Towards understanding sycophancy