Şimdi Teacher Forcing kullanılarak eğitilmiş bir çıkarım (inference) modeliyle Fransızca çeviriler üreteceksin.

Bu model (nmt_tf), 100.000 cümle üzerinde 50 epoch eğitildi ve 35.000+ doğrulama kümesinde yaklaşık %98 doğruluk elde etti. Eğitilmiş model yüklenmesi gerektiğinden bu egzersizin başlatılması biraz daha uzun sürebilir. Sana sents2seqs() fonksiyonu verildi. Ayrıca iki yeni fonksiyon daha sağlandı:

word2onehot(tokenizer, word, vocab_size) şu parametreleri alır:

tokenizer - Bir Keras Tokenizer nesnesi
word - Sözlükteki bir kelimeyi temsil eden bir string (ör. 'apple')
vocab_size - Sözlük boyutu

probs2word(probs, tok) şu parametreleri alır:

probs - Modelden gelen [1,<French Vocab Size>] şeklindeki çıktı
tok - Bir Keras Tokenizer nesnesi

Bu fonksiyonların kaynak koduna, konsola print(inspect.getsource(word2onehot)) ve print(inspect.getsource(probs2word)) yazarak göz atabilirsin.

Makine çevirisi için kelime gömme kullanımı

Create Your Free Account