File size: 1,176 Bytes
f9cc19c |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 |
import gradio as gr
import torch
from transformers import AutoTokenizer, AutoModelForCausalLM
# Загрузка модели и токенизатора RuBERT
model_name = "DeepPavlov/rubert-base-cased"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForCausalLM.from_pretrained(model_name)
# Функция для генерации текста на основе модели
def generate_text(prompt):
# Токенизация входного текста
input_ids = tokenizer.encode(prompt, return_tensors='pt')
# Генерация продолжения текста с помощью модели
output = model.generate(input_ids, max_length=100)
# Декодирование сгенерированного текста
return tokenizer.decode(output[0], skip_special_tokens=True)
# Создание интерфейса Gradio
iface = gr.Interface(
fn=generate_text,
inputs=gr.inputs.Textbox(placeholder="Введите текст для генерации"),
outputs=gr.outputs.Textbox(label="Сгенерированный текст")
)
# Запуск интерфейса Gradio
iface.launch()
|