Pembelajaran Berbasis Proyek
Apa yang akan Anda pelajari?
-
Teknik pra-pemrosesan teks pada kumpulan data yang sangat besar
-
Pengembangan NLP berbasis proyek kehidupan nyata menggunakan Good Old Fashioned AI.
Persyaratan
-
Python
-
Beberapa pengetahuan tentang algoritma ML klasik
Keterangan
Proyek Pembelajaran Mesin Tradisional menggunakan data numerik dan tekstual yang disimpan dalam database konvensional. Mengembangkan aplikasi cerdas berdasarkan data teks murni sangat menantang? Kenapa gitu? Pertama, data teks yang tersedia di dunia ini jutaan kali lebih banyak daripada data numerik yang tersedia bagi kita di database konvensional. Jadi, pertanyaannya adalah dapatkah kita mengekstrak beberapa informasi berguna dari kumpulan data teks yang sangat besar ini – yang dapat mencapai beberapa terabyte atau lebih tepatnya petabyte. Saat Anda berbicara tentang ukuran ini untuk data, seluruh perspektif pembelajaran mesin berubah. Dalam database tradisional, jumlah kolom cukup rendah dan dengan demikian jumlah fitur untuk pembelajaran mesin juga sangat kecil – umumnya mencapai puluhan dan paling banyak beberapa ratus, maks. Dalam aplikasi NLP, karena tidak ada kolom seperti database terstruktur, setiap kata dalam korpus teks menjadi kandidat yang mungkin untuk dipertimbangkan sebagai fitur untuk pelatihan model. Tidak mungkin melatih model dengan jutaan fitur. Jadi, untuk mengembangkan aplikasi ML, persyaratan pertama dan utama adalah mengurangi jumlah fitur ini dengan mengurangi kosakata. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. setiap kata dalam korpus teks menjadi kandidat yang memungkinkan untuk dipertimbangkan sebagai fitur untuk pelatihan model. Tidak mungkin melatih model dengan jutaan fitur. Jadi, untuk mengembangkan aplikasi ML, persyaratan pertama dan utama adalah mengurangi jumlah fitur ini dengan mengurangi kosakata. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. setiap kata dalam korpus teks menjadi kandidat yang memungkinkan untuk dipertimbangkan sebagai fitur untuk pelatihan model. Tidak mungkin melatih model dengan jutaan fitur. Jadi, untuk mengembangkan aplikasi ML, persyaratan pertama dan utama adalah mengurangi jumlah fitur ini dengan mengurangi kosakata. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. Tidak mungkin melatih model dengan jutaan fitur. Jadi, untuk mengembangkan aplikasi ML, persyaratan pertama dan utama adalah mengurangi jumlah fitur ini dengan mengurangi kosakata. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. Tidak mungkin melatih model dengan jutaan fitur. Jadi, untuk mengembangkan aplikasi ML, persyaratan pertama dan utama adalah mengurangi jumlah fitur ini dengan mengurangi kosakata. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI. Persyaratan utama lainnya adalah mengubah data teks menjadi format biner karena mesin bodoh kami hanya memahami biner. Di situlah pembelajaran NLP menjadi berbeda dari pengembangan model pada database terstruktur. Setelah data teks diproses sebelumnya untuk mendapatkan jumlah minimal fitur yang mewakili seluruh korpus teks, sisa proses pengembangan model tetap sama dengan yang tradisional – yang dikenal sebagai Good Old Fashioned AI.
