66 lines
2.4 KiB
Markdown
66 lines
2.4 KiB
Markdown
---
|
||
license: apache-2.0
|
||
language:
|
||
- uz
|
||
- en
|
||
base_model: mistralai/Mistral-7B-Instruct-v0.3
|
||
library_name: transformers
|
||
tags:
|
||
- text-generation-inference
|
||
- summarization
|
||
- translation
|
||
- question-answering
|
||
pipeline_tag: text-generation
|
||
---
|
||
|
||
# LYRA-Uz
|
||
|
||
**LYRA-Uz** — o‘zbek tilida yuqori sifatli ko‘rsatmalarni bajaruvchi (instruction-tuned) ochiq manbali til modeli. **Mistral-7B-Instruct-v0.3** arxitekturasi asosida o‘zbek va ingliz tillaridagi maʼlumotlar bilan maxsus oʻqitilgan. Apache 2.0 litsenziyasi bilan erkin foydalanish mumkin.
|
||
|
||
## Asosiy imkoniyatlari
|
||
|
||
- **Savol-javob** — o‘zbek tilidagi umumiy bilim savollariga javob beradi
|
||
- **Matnni umumlashtirish** — uzoq matnlarni qisqacha bayon qiladi
|
||
- **Tarjima** — o‘zbek ↔ ingliz tillari o‘rtasida tarjima qiladi
|
||
- **Matn tasnifi** — yangiliklar, hissiy tahlil va boshqa toifalarga ajratadi
|
||
- **Ko‘rsatmalarni bajarish** — berilgan vazifani ingliz va o‘zbek tillarida tushunib, bajaradi
|
||
## Tezkor ishlatish
|
||
```markdown
|
||
|
||
|
||
```python
|
||
from transformers import AutoTokenizer, AutoModelForCausalLM
|
||
|
||
tokenizer = AutoTokenizer.from_pretrained("Abduqodir06/Lyra-Uz")
|
||
model = AutoModelForCausalLM.from_pretrained(
|
||
"Abduqodir06/Lyra-Uz",
|
||
load_in_4bit=True,
|
||
device_map="auto"
|
||
)
|
||
|
||
prompt = "O'zbekiston poytaxti qaysi?"
|
||
inputs = tokenizer(prompt, return_tensors="pt").to("cuda")
|
||
outputs = model.generate(**inputs, max_new_tokens=128)
|
||
print(tokenizer.decode(outputs[0], skip_special_tokens=True))
|
||
```
|
||
|
||
## LYRA loyihasi haqida
|
||
|
||
Ushbu model **LYRA (Large Uzbek Language Reasoning Architecture)** loyihasining bir qismidir. To‘liq loyiha quyidagi bosqichlarni o‘z ichiga oladi (hozirda ustida ish olib borilmoqda):
|
||
|
||
1. **Tokenizer optimallashtirish** — o‘zbek tili morfologiyasiga mos BPE
|
||
2. **RAG va veb-qidiruv** — bilimlarni real vaqtda qidirib javob berish
|
||
3. **Deploy** — FastAPI, Telegram bot va ommaviy foydalanish
|
||
|
||
> **Hozirgi holat**: Ushbu repo’dagi model LYRA loyihasining birinchi tayyor komponentidir. Qo‘shimcha funksiyalar (RAG, veb-qidiruv, maxsus tokenizator) ustida ish olib borilmoqda.
|
||
|
||
## Texnik maʼlumotlar
|
||
|
||
| Xususiyat | Qiymat |
|
||
|-----------|--------|
|
||
| **Parametrlar soni** | 7 milliard |
|
||
| **Arxitektura** | Mistral-7B-Instruct-v0.3 |
|
||
| **Litsenziya** | Apache 2.0 |
|
||
| **GPU talabi (FP16)** | ~14.5 GB VRAM |
|
||
| **GPU talabi (4-bit)** | ~4.5 GB VRAM |
|
||
| **Tillari** | o‘zbek (asosiy), ingliz | |