NLP I: Teks sebagai Angka

Cara teks menjadi angka, dari karakter sampai subword token lewat byte-pair encoding

Mengubah teks menjadi angka: hitung kemunculan kata untuk membuat representasi dokumen paling sederhana di NLP

Menilai seberapa penting sebuah kata bagi satu dokumen dalam koleksi, dasar mesin pencari dan text retrieval

Mempelajari representasi dense vector, dengan kata yang mirip saling berdekatan di dalam ruang

Memprediksi kata pusat dari konteksnya: arsitektur perata-rataan di balik Word2Vec

Memprediksi kata konteks dari kata pusat: arsitektur Word2Vec yang dilatih dengan negative sampling

Mengubah kata dan kategori menjadi vector