prouditalian commited on
Commit
ff38b3b
·
1 Parent(s): 17075ae

Create app.py

Browse files
Files changed (1) hide show
  1. app.py +32 -0
app.py ADDED
@@ -0,0 +1,32 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ import streamlit as st
2
+ from transformers import AutoTokenizer, AutoModelForCausalLM
3
+ from transformers import pipeline
4
+
5
+ model_name = "ai-forever/mGPT"
6
+ tokenizer = AutoTokenizer.from_pretrained(model_name)
7
+ model = AutoModelForCausalLM.from_pretrained(model_name)
8
+
9
+
10
+ # Декоратор @st.cache говорит Streamlit, что модель нужно загрузить только один раз, чтобы избежать утечек памяти
11
+ @st.cache_resource
12
+ # загружает модель
13
+ def load_model():
14
+ return pipeline("text-generation", model=model, tokenizer=tokenizer)
15
+
16
+
17
+ # Загружаем предварительно обученную модель
18
+ answer = load_model()
19
+
20
+ # Выводим заголовок страницы
21
+ st.title("Помощник студента")
22
+
23
+ # Получаем текст для анализа
24
+ text = st.text_area("Введите запрос")
25
+
26
+ # Создаем кнопку
27
+ button = st.button('Генерировать')
28
+
29
+ # Выводим результат по нажатию кнопки
30
+ if button:
31
+ st.subheader("Вот мой ответ:")
32
+ st.write(answer(text[0]["generated_text"]))