File size: 2,373 Bytes
10625fe
 
5d53afe
10625fe
4f95c8e
35d86be
 
 
 
 
 
 
 
 
 
 
 
4f95c8e
35d86be
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
eab490f
 
 
4f95c8e
 
 
 
 
 
 
 
 
10625fe
 
 
35d86be
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
import gradio as gr
from huggingface_hub import InferenceClient
import json

# Inicialize o cliente com o modelo do Hugging Face
client = InferenceClient(model="rss9051/autotrein-BERT-iiLEX-dgs-0004")

# Função para dividir o texto em chunks menores
def split_text_into_chunks(text, max_tokens=512):
    words = text.split()
    chunks = []
    for i in range(0, len(words), max_tokens):
        chunk = " ".join(words[i:i + max_tokens])
        chunks.append(chunk)
    return chunks

# Função para classificar texto, lidando com textos longos
def classify_text(text):
    chunks = split_text_into_chunks(text, max_tokens=512)  # Divida o texto em chunks menores
    all_responses = []  # Lista para armazenar respostas de cada chunk

    for chunk in chunks:
        response_bytes = client.post(json={"inputs": chunk})  # Enviar o chunk
        response_str = response_bytes.decode('utf-8')  # Decodificar de bytes para string
        response = json.loads(response_str)  # Converter string JSON para objeto Python

        if isinstance(response, list) and len(response) > 0:
            sorted_response = sorted(response[0], key=lambda x: x['score'], reverse=True)
            all_responses.append(sorted_response[0])  # Adicionar a melhor classificação do chunk

    # Combinar resultados de todos os chunks
    if all_responses:
        # Contar as classes mais frequentes
        class_scores = {}
        for res in all_responses:
            label = res['label']
            score = res['score']
            if label in class_scores:
                class_scores[label] += score
            else:
                class_scores[label] = score
        
        # Obter a classe com maior score combinado
        predicted_class = max(class_scores, key=class_scores.get)
    else:
        predicted_class = "Classificação não encontrada"

    return predicted_class

# Interface Gradio
demo = gr.Interface(
    fn=classify_text,  # Função a ser chamada para classificar o texto
    inputs=gr.Textbox(label="Texto para Classificação"),  # Entrada de texto
    outputs=gr.Label(label="Classe Predita"),  # Saída da classificação
    title="Classificador de Texto",  # Título da interface
    description="Insira um texto para obter a classificação usando o modelo treinado."  # Descrição da interface
)

if __name__ == "__main__":
    demo.launch()