mbarnig commited on
Commit
80c8ef8
·
verified ·
1 Parent(s): 26ab772

Update app.py

Browse files
Files changed (1) hide show
  1. app.py +68 -73
app.py CHANGED
@@ -10,40 +10,7 @@ client = AsyncOpenAI(
10
  )
11
 
12
  assistantID = os.getenv("OPENAI_ASSISTANT_ID")
13
- username = os.getenv("YOUR_ID")
14
- password = os.getenv("YOUR_PASSWORD")
15
-
16
- mytitle = "<h1 align=center>RTL AI News Reader : Qu'est-ce qui s'est passé dans le pays 🇱🇺 et dans le monde 🌎 ?</h1>"
17
-
18
- mydescription="""
19
- <h3 align='center'>Quel sujet vous intéresse : 🐶 🏃🏻‍♂️ 🌗 🍇 🌈 🍽️ 🏆 🚘 ✈️ 🩺 </h3>
20
- <table width=100%>
21
- <tr>
22
- <th width=50% bgcolor="Moccasin">Posez vos questions en français ou dans une autre langue :</th>
23
- <th bgcolor="Khaki">Réponse de l'Assistant file-search OpenAI :</th>
24
- </tr>
25
- </table>
26
- """
27
-
28
- myarticle ="""
29
- <h3>Contexte :</h3>
30
- <p>Cette démo de HuggingFace Space a été réalisée par <a href="https://github.com/mbarnig">Marco Barnig</a>.
31
- En tant qu'intelligence artificielle, le <a href="https://platform.openai.com/docs/models">modèle OpenAI</a> gpt-4o-mini-2024-07-18 est utilisé via une API,
32
- qui peut utiliser jusqu'à 128 000 tokens comme contexte, fournir une réponse d'un maximum de 16 384 tokens à une question,
33
- et traiter jusqu'à 200 000 tokens par minute (TPM).
34
- L'ensemble du contenu français de RTL.lu depuis le début 2013 jusqu'en septembre 2024 a été découpé en 25 fichiers JSON
35
- et chargé dans un Vector Store de l'Assistant file-search d'OpenAI "RTL French News Reader".
36
- Chaque fichier contient moins de 5 millions de tokens, ce qui est une limite supérieure pour le modèle d'IA.
37
- Il est possible de charger jusqu'à 10 000 fichiers sur un Assistant OpenAI. Les réponses des exemples sont mises en cache et donc affichées sans délai.</p>
38
- """
39
-
40
- myinput = gr.Textbox(lines=3, label="Que voulez-vous savoir ?")
41
-
42
- myexamples = [
43
- "Qui est Schlimé ?",
44
- "Quel est le plus ancien message dans la base de données locale ?",
45
- "Quels étaient les événements qui ont marqué l'année 2017 ?"
46
- ]
47
 
48
  class EventHandler(AsyncAssistantEventHandler):
49
  def __init__(self) -> None:
@@ -89,14 +56,17 @@ async def initialize_thread():
89
  session_data["thread_id"] = thread.id
90
 
91
  async def generate_response(user_input):
92
- assistant_id = session_data["assistant_id"]
93
- thread_id = session_data["thread_id"]
94
-
95
- # Add a Message to the Thread
96
- oai_message = await client.beta.threads.messages.create(
97
- thread_id=thread_id,
98
- role="user",
99
- content=user_input
 
 
 
100
  )
101
 
102
  # Create and Stream a Run
@@ -114,34 +84,59 @@ async def generate_response(user_input):
114
  yield event_handler.response_text
115
 
116
  # Gradio interface function (generator)
117
- async def gradio_chat_interface(user_input):
118
- # Create a new event loop if none exists (or if we are in a new thread)
119
- try:
120
- loop = asyncio.get_running_loop()
121
- except RuntimeError:
122
- loop = asyncio.new_event_loop()
123
- asyncio.set_event_loop(loop)
124
-
125
- # Initialize the thread if not already done
126
- if session_data["thread_id"] is None:
127
- await initialize_thread()
128
-
129
- # Generate and yield responses
130
- async for response in generate_response(user_input):
131
- yield response
132
-
133
- # Set up Gradio interface with streaming
134
- interface = gr.Interface(
135
- fn=gradio_chat_interface,
136
- inputs=myinput,
137
- outputs="markdown",
138
- title=mytitle,
139
- description=mydescription,
140
- article=myarticle,
141
- live=False,
142
- allow_flagging="never",
143
- examples=myexamples
144
- )
145
-
146
- # Launch the Gradio app
147
- interface.launch(auth=(username, password), auth_message="<h1>Lecteur de nouvelles IA de RTL</h1><p>Ce HuggingFace Space est un prototype et n'est pas encore accessible à tout le monde. Le projet est basé sur un assistant de recherche de fichiers via l'API d'OpenAI et utilise le modèle GPT-4o-mini. Vous devez utiliser un navigateur Chrome. Les spécialistes en IA intéressés peuvent demander un identifiant et un mot de passe en contactant [email protected].</p>")
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
10
  )
11
 
12
  assistantID = os.getenv("OPENAI_ASSISTANT_ID")
13
+ mypassword = os.getenv("RTL_PASSWORD")
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
14
 
15
  class EventHandler(AsyncAssistantEventHandler):
16
  def __init__(self) -> None:
 
56
  session_data["thread_id"] = thread.id
57
 
58
  async def generate_response(user_input):
59
+ if user_input == "":
60
+ yield "Schreif eng Fro als Input"
61
+ else:
62
+ assistant_id = session_data["assistant_id"]
63
+ thread_id = session_data["thread_id"]
64
+
65
+ # Add a Message to the Thread
66
+ oai_message = await client.beta.threads.messages.create(
67
+ thread_id=thread_id,
68
+ role="user",
69
+ content=user_input
70
  )
71
 
72
  # Create and Stream a Run
 
84
  yield event_handler.response_text
85
 
86
  # Gradio interface function (generator)
87
+ async def gradio_chat_interface(mode, password, user_input, example):
88
+ if mode == "Beispiller":
89
+ filename = example[-6:-2] + ".md"
90
+ file = open("examples/" + filename, "r")
91
+ output = file.read()
92
+ yield output
93
+ else:
94
+ # check the password
95
+ if password == "":
96
+ yield "To serach you need to enter an RTL password !"
97
+ elif password != mypassword:
98
+ yield "Please enter the correct RTL password !"
99
+ else:
100
+
101
+ # Create a new event loop if none exists (or if we are in a new thread)
102
+ try:
103
+ loop = asyncio.get_running_loop()
104
+ except RuntimeError:
105
+ loop = asyncio.new_event_loop()
106
+ asyncio.set_event_loop(loop)
107
+
108
+ # Initialize the thread if not already done
109
+ if session_data["thread_id"] is None:
110
+ await initialize_thread()
111
+
112
+ # Generate and yield responses
113
+ async for response in generate_response(user_input):
114
+ yield response
115
+
116
+ with gr.Blocks() as demo:
117
+ with gr.Row():
118
+ myTitle = gr.HTML("<h2 align=center>RTL AI News Reader : What happened in the country 🇱🇺 or in the world 🌎 ?</h2>")
119
+ with gr.Row():
120
+ myDescription = gr.HTML("""
121
+ <h3 align='center'>Wat fir een Thema interesséiert Iech ?</h3>
122
+ <p align='center'>🐶 🏃🏻‍♂️ 🌗 🍇 🌈 🍽️ 🏆 🚘 ✈️ 🩺 </p>
123
+ <p align='center' bgcolor="Moccasin">Submit your question in english or in another language !</p>
124
+ """
125
+ )
126
+ with gr.Row():
127
+ mode = gr.Radio(choices=["Search", "Examples"], label = "You can run the examples without password.", value = "Examples")
128
+ pw = gr.Textbox(lines=1, label="Enter the correct RTL password !")
129
+ with gr.Row():
130
+ question = gr.Textbox(lines=3, label="Please submit your question ?")
131
+ with gr.Row():
132
+ examples = gr.Radio(["What happened in May 2009 ?"], value="What happened in May 2009 ?", label="Beispiller")
133
+ with gr.Row():
134
+ clear = gr.Button("Clear")
135
+ submit = gr.Button("Submit")
136
+ with gr.Row():
137
+ mySubtitle = gr.HTML("<p align='center' bgcolor='Khaki'>English RTL News :</p>")
138
+ with gr.Row():
139
+ myOutput = gr.Markdown(label="Answer from the OpenAI File-Search Assistent :")
140
+
141
+ submit.click(fn = gradio_chat_interface, inputs=[mode, pw, question, examples], outputs = myOutput)
142
+ demo.launch()