app modified

app.py

@@ -359,11 +359,12 @@ class ModeloDataset:
                ig_tok.append(aux2)
             print('new_tokens',new_tokens)  
             print('ig_tok',ig_tok) 
-           
+            
             for items in _predicted_tokens_classes:
-                print('len(_predicted_tokens_classes)',len(items))
-                aux=self.reordenacion_identificadores(ig_tok[i],items)
-                new_identificadores.append(aux)
+                if i<len(tokenized_text[i]):
+                    print('len(_predicted_tokens_classes)',len(items))
+                    aux=self.reordenacion_identificadores(ig_tok[i],items)
+                    new_identificadores.append(aux)
                 i=i+1
             print('new_identificadores',new_identificadores)
            
@@ -486,7 +487,7 @@ def procesar(texto,archivo, etiquetas):
             for item in df.columns.values:
                 sentences=df[item]
                 model.identificacion_idioma(sentences[0])
-                print('sentences',sentences)
+                #print('sentences',sentences)
                 ides, predicted = modelo.aplicar_modelo(sentences,model.idioma)