Тұжырымдама
Басқа қағидатқа құрылған.
Білімді бір ғана дұрыс мағынаға бекітуге болмайды. Бір сөздер оны кім оқитынына қарай әртүрлі қабылданады — ал адамдар мен AI арасындағы алшақтық одан да кең.
VATES білімді бекітілген мағына ретінде емес, әр оқырман сол сәтте өмірге әкелетін құрылым ретінде қарастырады. Дәстүрлі әдістер мағынаны алдын ала бекітсе, VATES түсіндіруді оқырманға қалдырады. Осы қағидат — оның құрылу негізі.
Неге дәл осылай құрылған
VATES пен тілдік модельге білім беретін кең тараған әдісті (RAG) салыстыру.
| Аспект | RAG | VATES |
|---|---|---|
| Аралық өңдеу | Embedding, vector search, re-ranking | Бұлардың ешқайсысы — қарапайым мәтін бойынша BM25; top-k модельге |
| Жаңартулар | Қайта embed және қайта индекстеу қажет | ES жазылған сәтте күшіне енеді |
| Мағына | Embedding кезінде координаттарға қысылады әрі ауытқиды | Құрылым ретінде сақталады; бақылау кезінде түсіндіріледі |
| Тәуелділіктер | Vector-database инфрақұрылымы | Тек стандартты дерекқор мен файлдар |
| Көрінушілік | Сандық векторлар; фрагмент неге алынғаны түсініксіз (black box) | Құрылымды қарапайым мәтін; мазмұны көрінеді (white box) |
| Операция | Қайта embed, қайта индекстеу; жоюлар векторларда қалуы мүмкін | Жолды тікелей өңдеу не жою; көзбен тексеруге болады |
Аралық өңдеу жоқ
Әдеттегі RAG жүйесі pipeline жүргізеді — embedding, vector search, re-ranking. VATES-те мұның ешқайсысы жоқ.
Сұрақ келеді. Әрбір ES соған қарсы BM25-пен бағаланады. Ең жоғары ұпай жинаған top-k модельге беріледі. Модель жауап береді.
Бүкіл жол осы. Алдын ала дайындалатын жалғыз нәрсе — ES-тің өзі; іздеу үшін алдын ала ештеңе дайындалмайды. Бағалау әр сұраққа қайта құрылады, сондықтан ұстап тұратын index жоқ, қайта embed жасайтын ештеңе жоқ, ешбір жерде сақталған бекітілген мағына жоқ. Іздеу лексикалық — өзіңіз оқи алатын қарапайым мәтін бойынша. Модель құрылымды тікелей бақылайды — мағына ол жеткенге дейін шешілмейді, оқылған сәтте шешіледі.
Лезде жаңартулар
RAG білім өзгерген сайын қайта embed жасап, индексін қайта құруға тиіс. VATES-те ES жазылған бойда келесі сұраудан-ақ көрініс табады. Қайта құратын индекс жоқ.
Мағына бақылау кезінде түсіндіріледі
Embedding мағынаны сақталған сәтте бекітілген координаттарға тегістейді. VATES мағынаны алдын ала бекітпейді — іздеу әр сұрау бойынша қайта құрастырылады, ал түсіндіру оқырманға қалдырылады. Бір білім қорынан жауаптар сұраққа және оқырманның тіліне бейімделеді. Сондықтан жапон тілінде сақталған білім ешқандай аударма деректері сақталмай-ақ француз тілінде жауап бере алады.
Тек стандартты дерекқор мен файлдар
Арнайы vector database жоқ — Pinecone, Weaviate не pgvector жоқ. Білім — қарапайым құрылымды мәтін, кәдімгі дерекқор мен файлдарда жұмыс істейді. GPU жоқ, пайдалану сайын embedding API жоқ. Қозғалмалы бөлшектердің аздығы — төмен шығын мен ақаулық нүктелерінің аздығын білдіреді.
White box
RAG индексі — ешбір адам оқи алмайтын сандық векторлар жиыны; фрагмент неге алынғанын айту мүмкін емес. VATES білімді бақылаудың негізгі осьтері бойынша — субстанция, сан, сапа, қатынас және т.б. — қарапайым мәтін ретінде сақтайды, әрі тақырып сыймаған кезде осьтер еркін кеңейеді. Бұл бекітілген schema емес. Оны көзбен оқуға әрі іздеуге болады. Модель синтаксисті көреді; адам кестені көреді.
Тікелей өңдеу және жою
RAG-тегі жою қайта embed жасағаннан кейін де векторларда із қалдыруы мүмкін. VATES-те тиісті жолды тікелей өңдеп не жойып, нәтижені көзбен растайсыз — бұл деректерді жою өтініштеріне, ұмытылу құқығына да қызмет ететін құрылым.
ES дегеніміз не?
ES = EchoScript
VATES білімді ұстайтын бірлік. Екі баған, n жол, pipe-пен (|) бөлінген. Pipe-тің өзі ешқандай мағына тасымалдамайды; ол тек шекараны белгілейді. Мағына нышанда емес, оны бақылаушыда туады.
IIIS = Inter-Intelligence Intermediary Syntax
ES сондай-ақ интеллектаралық делдал синтаксис (IIIS) ретінде жасалған синтаксистік құрылым.
Ішіне не кіреді
Кез келген табиғи тіл, оған қоса логикалық белгілеу және басқалар. Сөздер де, сөйлемдер де.
IIIS дегеніміз не?
Тіршілікке жарамды аймақ
Әртүрлі қабылдауы бар интеллекттер бір құрылымды бақылай алатын синтаксис — олардың қабылдаулары қабаттасатын тіршілікке жарамды аймақ шегінде. Міне, осы — IIIS.
Интеллекттер арасында
Әзірге: AI мен адамдар.
Қабылдаулар арқылы бақылау
Бір ES-ті AI json ретінде, ал адам екі бағанды кесте ретінде оқиды. Екеуі де бір ғана құрылымды — екі баған, n жол, pipe-пен бөлінген, өз бетінше ешқандай мағына тасымалдамайтын — әрқайсысы өз қабылдауы арқылы бақылайды.