Spaces:
Sleeping
Sleeping
app modified
Browse files
app.py
CHANGED
@@ -317,7 +317,7 @@ class ModeloDataset:
|
|
317 |
i=i+1
|
318 |
labels = predicted_token_class_ids
|
319 |
loss = self.model(input_ids, labels=labels).loss
|
320 |
-
|
321 |
else:
|
322 |
|
323 |
print('idioma:',idioma)
|
@@ -345,9 +345,7 @@ class ModeloDataset:
|
|
345 |
labels = predicted_token_class_ids
|
346 |
loss = self.model(input_ids, labels=labels).loss
|
347 |
|
348 |
-
|
349 |
-
print('tokenized_text',tokenized_text)
|
350 |
-
print('ids',ids)
|
351 |
|
352 |
|
353 |
#new_tokens=[]
|
@@ -467,11 +465,13 @@ def procesar(texto,archivo, etiquetas):
|
|
467 |
|
468 |
|
469 |
if len(texto)>0:
|
|
|
470 |
model.identificacion_idioma(texto)
|
471 |
return model.predict(etiquetas),gr.Dataframe(),gr.File()
|
472 |
else:
|
473 |
|
474 |
if archivo.name.split(".")[1]=="csv":
|
|
|
475 |
df=pd.read_csv(archivo.name,delimiter=",")
|
476 |
|
477 |
df_new = pd.DataFrame( columns=df.columns.values)
|
@@ -490,6 +490,7 @@ def procesar(texto,archivo, etiquetas):
|
|
490 |
return "", df_new, df_new.to_csv(sep='\t', encoding='utf-8',index=False)
|
491 |
#return "", df_new, df_new.to_excel( index=False)
|
492 |
else:
|
|
|
493 |
if archivo.name.split(".")[1]=="json":
|
494 |
util = utilJSON(archivo.name)
|
495 |
df=util.obtener_dataframe(util.data)
|
|
|
317 |
i=i+1
|
318 |
labels = predicted_token_class_ids
|
319 |
loss = self.model(input_ids, labels=labels).loss
|
320 |
+
|
321 |
else:
|
322 |
|
323 |
print('idioma:',idioma)
|
|
|
345 |
labels = predicted_token_class_ids
|
346 |
loss = self.model(input_ids, labels=labels).loss
|
347 |
|
348 |
+
|
|
|
|
|
349 |
|
350 |
|
351 |
#new_tokens=[]
|
|
|
465 |
|
466 |
|
467 |
if len(texto)>0:
|
468 |
+
print('text')
|
469 |
model.identificacion_idioma(texto)
|
470 |
return model.predict(etiquetas),gr.Dataframe(),gr.File()
|
471 |
else:
|
472 |
|
473 |
if archivo.name.split(".")[1]=="csv":
|
474 |
+
print('csv')
|
475 |
df=pd.read_csv(archivo.name,delimiter=",")
|
476 |
|
477 |
df_new = pd.DataFrame( columns=df.columns.values)
|
|
|
490 |
return "", df_new, df_new.to_csv(sep='\t', encoding='utf-8',index=False)
|
491 |
#return "", df_new, df_new.to_excel( index=False)
|
492 |
else:
|
493 |
+
print('json')
|
494 |
if archivo.name.split(".")[1]=="json":
|
495 |
util = utilJSON(archivo.name)
|
496 |
df=util.obtener_dataframe(util.data)
|