Муқаддима

Моделҳои бузурги забонӣ (Large Language Models — LLM) дар чанд соли охир аз мавзӯи танги пажӯҳишҳои илмӣ ба абзори ҳаррӯзаи миллионҳо одам табдил ёфтанд. Онҳо матн менависанд, ба саволҳо ҷавоб медиҳанд, тарҷума мекунанд, код тавлид менамоянд ва ҳатто ҳамчун агентҳои мустақил вазифаҳои бисёрқадамаро иҷро мекунанд. Аммо барои бисёр хонандагон тарзи кори ин моделҳо ҳанӯз ҳам «қуттии сиёҳ» боқӣ мемонад.

Ин китоб кӯшиши фаҳмондани ҳамин «қуттии сиёҳ» ба забони тоҷикӣ мебошад.

Ин китоб дар бораи чист?

Китоб роҳи пурраро аз мафҳумҳои аввалия то усулҳои муосир тай мекунад:

• зеҳни сунъӣ, коркарди забони табиӣ (Natural Language Processing — NLP) ва ҷойгоҳи LLM дар байни онҳо;
• тарзи ба рақамҳо табдил додани матн: токенсозӣ (Tokenization) ва векторҳо;
• шабакаҳои нейронӣ, механизми таваҷҷуҳ (Attention) ва меъмории Transformer;
• омӯзиши пешакӣ (Pre-training), танзими дақиқ (Fine-tuning) ва мутобиқсозии модел ба афзалиятҳои инсон;
• тавлиди матн, муҳандисии промпт, RAG ва агентҳо;
• самаранокӣ, арзёбӣ, бехатарӣ ва тафсирпазирии моделҳо;
• имкониятҳо ва мушкилоти истифодаи LLM барои забони тоҷикӣ.

Мафҳумҳои мураккаб қадам ба қадам, бо шарҳҳои сода ва мисолҳои амалӣ омӯзонда мешаванд. Ҳар ҷо, ки имкон дорад, мисолҳои код низ оварда шудаанд, то хонанда натиҷаро худаш бубинад ва таҷриба кунад.

Китоб барои кист?

Китоб пеш аз ҳама барои навомӯзон навишта шудааст: донишҷӯён, барномасозон, муҳандисони додаҳо ва ҳар касе, ки мехоҳад бифаҳмад LLM чӣ гуна кор мекунад ва онро чӣ гуна дар лоиҳаҳои воқеӣ истифода бурдан мумкин аст.

Барои хондани бобҳои аввал дониши махсус лозим нест. Барои бобҳои техникӣтар шиносоӣ бо асосҳои барномасозӣ дар Python ва математикаи мактабӣ (вектор, матритса, эҳтимол) муфид хоҳад буд. Маводи зарурии математикӣ ва асосҳои Python/PyTorch дар замимаҳо (боби 17) ҷамъ оварда шудаанд.

Истилоҳоти англисӣ ҳангоми бори аввал истифода шуданашон дар қавс оварда мешаванд, то хонанда онҳоро дар адабиёти байналмилалӣ низ шинохта тавонад. Луғати истилоҳот дар охири китоб ҷойгир аст.

Китоб чӣ гуна ташкил шудааст?

Бобҳо аз рӯи мантиқи «аз сода ба мураккаб» ҷойгир шудаанд ва онҳоро ба чор қисм ҷудо кардан мумкин аст:

1. Асосҳо (бобҳои 1–3). Шиносоӣ бо зеҳни сунъӣ ва NLP, тарзи муаррифии матн барои компютер ва шабакаҳои нейронии аввалия.
2. Сохтор ва омӯзиши моделҳо (бобҳои 4–8). Transformer, оилаҳои асосии моделҳо, омӯзиши пешакӣ, танзими дақиқ ва мутобиқсозӣ.
3. Истифодаи амалӣ (бобҳои 9–13). Тавлиди матн ва танзимоти он (ҳарорат, top-k, top-p ва ғайра), муҳандисии промпт, RAG, агентҳо ва ҷорӣ кардани моделҳо.
4. Масъалаҳои пешрафта (бобҳои 14–16). Арзёбӣ ва бехатарӣ, тафсирпазирӣ ва кор бо забони тоҷикӣ.

Бобҳои аввалро беҳтар аст бо тартиб хонед. Хонандае, ки бо асосҳо шинос аст, метавонад мустақиман ба бобҳои дилхоҳ гузарад: дар ҳар боб ба бобҳои марбут ишора шудааст.

Мундариҷа

• Боби 0. Муқаддима — мақсад, хонандагон ва сохтори китоб.
• Боби 1. Зеҳни сунъӣ, NLP ва LLM — фарқи AI, зеҳни сунъии тавлидӣ ва LLM; NLP чист ва чаро душвор аст; LLM дар сатҳи умумӣ чӣ гуна кор мекунад.
• Боби 2. Асосҳои кор бо матн: токенсозӣ ва векторҳо — тақсими матн ба токенҳо, токенҳои махсус, қолабҳои суҳбат ва муаррифии векторӣ.
• Боби 3. Шабакаҳои нейронӣ ва моделҳои пайдарпайӣ (RNN) — асосҳои шабакаҳои нейронӣ ва коркарди пайдарпайиҳо.
• Боби 4. Механизми таваҷҷуҳ ва Transformer — таваҷҷуҳ, худтаваҷҷуҳӣ ва меъмории Transformer.
• Боби 5. Оилаҳои моделҳо: BERT, GPT, T5 ва LLM-ҳои муосир — моделҳои рамзгузор, рамзкушо ва рамзгузор–рамзкушо.
• Боби 6. Омӯзиши пешакӣ ва қонунҳои миқёспазирӣ — тарзи омӯзиши LLM дар маҷмӯаҳои азими матн ва таъсири андозаи модел.
• Боби 7. Танзими дақиқ, PEFT ва LoRA — мутобиқ кардани модел ба вазифаҳои мушаххас.
• Боби 8. Мутобиқсозӣ: RLHF, DPO ва моделҳои андешаронӣ — ҳамоҳанг кардани рафтори модел бо афзалиятҳои инсон.
• Боби 9. Тавлиди матн ва стратегияҳои декодкунӣ — ҳарорат, top-k, top-p, ҷаримаҳо, ҷустуҷӯи ҳарисона ва чандмасира.
• Боби 10. Муҳандисии промпт — тарзи навиштани дастурҳои самаранок барои модел.
• Боби 11. RAG — пайваст кардани модел ба манбаъҳои беруна тавассути ҷустуҷӯ.
• Боби 12. Агентҳо ва абзорҳо — моделҳое, ки нақша мекашанд ва абзорҳоро истифода мебаранд.
• Боби 13. Самаранокӣ ва ҷорӣ кардан — суръат, хотира, квантонӣ ва хизматрасонии моделҳо.
• Боби 14. Арзёбӣ, галлюсинатсия, ғаразнокӣ ва бехатарӣ — санҷиши сифат ва хатарҳои истифодаи LLM.
• Боби 15. Тафсирпазирӣ (Interpretability) — кӯшиши фаҳмидани он, ки дар дохили модел чӣ рӯй медиҳад.
• Боби 16. LLM барои забони тоҷикӣ — додаҳо, токенсозӣ ва мушкилоти забонҳои камманбаъ.
• Боби 17. Замимаҳо — математика, Python/PyTorch ва луғати истилоҳот.

Манбаъҳо ва миннатдорӣ

Ин китоб аз сифр навишта нашудааст. Як қисми бобҳо дар асоси маводи омӯзишии кушода ва мақолаҳои муаллифони дигар таҳия шудаанд: тарҷума, кӯтоҳ ва ба хонандаи тоҷик мутобиқ карда шудаанд. Ба муаллифони онҳо барои кори арзишмандашон самимона миннатдорем.

• Курси LLM-и Hugging Face — бобҳои 1, 5, 9, 13 ва 14: вазифаҳои NLP, мисолҳои pipeline(), оилаҳои моделҳо, тавлиди матн, механизмҳои самараноки таваҷҷуҳ ва мисоли ғаразнокии BERT. https://huggingface.co/learn/llm-course
• Ҳуҷҷатҳои китобхонаи Hugging Face Transformers — боби 9: стратегияҳои тавлид. https://huggingface.co/docs/transformers/generation_strategies
• Себастиан Рашка (Sebastian Raschka), «Build a Large Language Model (From Scratch)» (Manning, 2024) — боби 4: сохтани қадам ба қадами механизми худтаваҷҷуҳӣ ва модели GPT, аз ҷумла мисоли «Your journey starts with one step». Коди китоб: https://github.com/rasbt/LLMs-from-scratch
• Тимоти Ли ва Шон Тротт (Timothy B. Lee, Sean Trott), «Large language models, explained with a minimum of math and jargon» (2023) — бобҳои 2, 4 ва 6: мисоли «John wants his bank to cash the …», ташбеҳи шири об ва мисоли «назарияи зеҳн». https://www.understandingai.org/p/large-language-models-explained-with
• Ҷингфэн Ян (Jingfeng Yang), «Why did all of the public reproduction of GPT-3 fail? In which tasks should we use GPT-3.5/ChatGPT?» (2023) — боби 6: қисмҳои «Дарсҳо аз бозсозии GPT-3» ва «Кай модели бузург ва кай модели хурди танзимшуда?».

Мақолаҳои илмие, ки натиҷаҳояшон дар китоб оварда шудаанд, дар матни бобҳо ва дар қисмҳои «Манбаъҳо»-и бобҳо зикр шудаанд. Масъулияти хатоҳои эҳтимолии тарҷума ва мутобиқсозӣ бар дӯши таҳиягарони ин китоб аст.

Чанд сухан дар бораи замон

Соҳаи LLM бениҳоят зуд тағйир меёбад: моделҳо, номҳо ва рекордҳо ҳар чанд моҳ нав мешаванд. Аз ин рӯ, дар китоб ба фаҳмиши принсипҳо — ки солҳо эътибор доранд — бештар аз муаррифии маҳсулоти мушаххас диққат дода шудааст. Ҳар ҷо, ки сухан дар бораи моделҳои мушаххас меравад, хонандаро тавсия медиҳем, ки маълумоти навтаринро аз ҳуҷҷатҳои расмии таҳиягарон санҷад.

Умед дорем, ки ин китоб ба хонандагон кӯмак мекунад, ки бо мафҳумҳо ва усулҳои асосии моделҳои бузурги забонӣ шинос шаванд ва онҳоро бо боварӣ дар лоиҳаҳои воқеии худ истифода баранд.