rss9051's picture
Update app.py
35d86be verified
raw
history blame
2.37 kB
import gradio as gr
from huggingface_hub import InferenceClient
import json
# Inicialize o cliente com o modelo do Hugging Face
client = InferenceClient(model="rss9051/autotrein-BERT-iiLEX-dgs-0004")
# Função para dividir o texto em chunks menores
def split_text_into_chunks(text, max_tokens=512):
words = text.split()
chunks = []
for i in range(0, len(words), max_tokens):
chunk = " ".join(words[i:i + max_tokens])
chunks.append(chunk)
return chunks
# Função para classificar texto, lidando com textos longos
def classify_text(text):
chunks = split_text_into_chunks(text, max_tokens=512) # Divida o texto em chunks menores
all_responses = [] # Lista para armazenar respostas de cada chunk
for chunk in chunks:
response_bytes = client.post(json={"inputs": chunk}) # Enviar o chunk
response_str = response_bytes.decode('utf-8') # Decodificar de bytes para string
response = json.loads(response_str) # Converter string JSON para objeto Python
if isinstance(response, list) and len(response) > 0:
sorted_response = sorted(response[0], key=lambda x: x['score'], reverse=True)
all_responses.append(sorted_response[0]) # Adicionar a melhor classificação do chunk
# Combinar resultados de todos os chunks
if all_responses:
# Contar as classes mais frequentes
class_scores = {}
for res in all_responses:
label = res['label']
score = res['score']
if label in class_scores:
class_scores[label] += score
else:
class_scores[label] = score
# Obter a classe com maior score combinado
predicted_class = max(class_scores, key=class_scores.get)
else:
predicted_class = "Classificação não encontrada"
return predicted_class
# Interface Gradio
demo = gr.Interface(
fn=classify_text, # Função a ser chamada para classificar o texto
inputs=gr.Textbox(label="Texto para Classificação"), # Entrada de texto
outputs=gr.Label(label="Classe Predita"), # Saída da classificação
title="Classificador de Texto", # Título da interface
description="Insira um texto para obter a classificação usando o modelo treinado." # Descrição da interface
)
if __name__ == "__main__":
demo.launch()