Spaces:
Sleeping
Sleeping
Update app.py
Browse files
app.py
CHANGED
|
@@ -18,15 +18,15 @@ def ajouter_a_liste(liste_actuelle, nouveau_texte):
|
|
| 18 |
return liste_actuelle, ""
|
| 19 |
|
| 20 |
def apprendre(liste_actuelle):
|
| 21 |
-
gr.Markdown("traitement des textes")
|
| 22 |
# Traiter la liste finale
|
| 23 |
resultat = ", ".join(liste_actuelle)
|
| 24 |
print("Liste soumise:", liste_actuelle) # Pour voir dans la console
|
| 25 |
# analyse du texte
|
| 26 |
tokenizer = Tokenizer()
|
| 27 |
-
tokenizer.fit_on_texts(
|
| 28 |
total_words = len(tokenizer.word_index) + 1
|
| 29 |
-
gr.
|
|
|
|
| 30 |
type(tokenizer.word_index)
|
| 31 |
#from dict to list
|
| 32 |
liste = list(tokenizer.word_index.keys())
|
|
@@ -35,7 +35,7 @@ def apprendre(liste_actuelle):
|
|
| 35 |
# print()
|
| 36 |
# transformation des textes en vecteurs
|
| 37 |
input_sequences = []
|
| 38 |
-
for sentence in
|
| 39 |
token_list = tokenizer.texts_to_sequences([sentence])[0]
|
| 40 |
for i in range(1, len(token_list)):
|
| 41 |
n_gram_sequence = token_list[:i+1]
|
|
|
|
| 18 |
return liste_actuelle, ""
|
| 19 |
|
| 20 |
def apprendre(liste_actuelle):
|
|
|
|
| 21 |
# Traiter la liste finale
|
| 22 |
resultat = ", ".join(liste_actuelle)
|
| 23 |
print("Liste soumise:", liste_actuelle) # Pour voir dans la console
|
| 24 |
# analyse du texte
|
| 25 |
tokenizer = Tokenizer()
|
| 26 |
+
tokenizer.fit_on_texts(liste_actuelle)
|
| 27 |
total_words = len(tokenizer.word_index) + 1
|
| 28 |
+
with gr.Blocks() as demo:
|
| 29 |
+
gr.Markdown("nb de mots différents rencontrés :", total_words)
|
| 30 |
type(tokenizer.word_index)
|
| 31 |
#from dict to list
|
| 32 |
liste = list(tokenizer.word_index.keys())
|
|
|
|
| 35 |
# print()
|
| 36 |
# transformation des textes en vecteurs
|
| 37 |
input_sequences = []
|
| 38 |
+
for sentence in liste_actuelle:
|
| 39 |
token_list = tokenizer.texts_to_sequences([sentence])[0]
|
| 40 |
for i in range(1, len(token_list)):
|
| 41 |
n_gram_sequence = token_list[:i+1]
|