TOSHKENT KIMYO XALQARO UNIVERSITETI NAMANGAN FILIALI
Keywords:
matnni tahlil qilish, tabiiy tilni qayta ishlash (NLP), tokenizatsiya, TF-IDF, tasniflash, o’zbek tili.Abstract
Ushbu tezisda matnlarni avtomatik tahlil qilishning asosiy bosqichlari, ishlatiladigan algoritmlar va ularning amaliy qo’llanilishi ko’rib chiqiladi. Matnni dastlabki qayta ishlash, xususiyatlarni ajratib olish, TF-IDF usuli, mashinaviy o’qitish asosidagi tasniflash hamda zamonaviy neyron tarmoq modellarining afzalliklari va kamchiliklari yoritiladi. Shuningdek, o’zbek
tili matnlarini tahlil qilishdagi o’ziga xos qiyinchiliklar tahlil qilinadi.
Downloads
References
1.
2.Jurafsky D., Martin J. H. Speech and Language Processing. 3rd ed. draft. Manning C. D., Raghavan P., Schütze H. Introduction to Information Retrieval. Cambridge University Press, 2008.
3. Vaswani A. va boshq. Attention Is All You Need. NeurIPS, 2017.
4. Devlin J. va boshq. BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. NAACL, 2019.
5. Казанцев Т. Искусственный интеллект и Машинное обучение. Основы программирования на Python / Т. Казанцев - «ЛитРес: Самиздат», 2020.
