{"id":5830,"date":"2022-08-24T18:46:15","date_gmt":"2022-08-24T11:46:15","guid":{"rendered":"https:\/\/sonarplatform.com\/proses-tugas-teknik-pemrosesan-bahasa-alami-nlp-bagian-2\/"},"modified":"2023-02-22T15:17:52","modified_gmt":"2023-02-22T08:17:52","slug":"proses-tugas-teknik-pemrosesan-bahasa-alami-nlp-bagian-2","status":"publish","type":"post","link":"https:\/\/sonarplatform.com\/id\/proses-tugas-teknik-pemrosesan-bahasa-alami-nlp-bagian-2\/","title":{"rendered":"Proses, Tugas & Teknik Pemrosesan Bahasa Alami (NLP) Bagian 2"},"content":{"rendered":"\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t\t\t\t

Di blog terakhir kami, kami telah memberi tahu Anda cara kerja alat NLP dan mengapa analisis sintaksis dan semantik perlu dilibatkan secara menyeluruh selama keseluruhan proses. Kami sekarang akan membahas detail tugas dan teknik utama NLP dalam analisis sintaksis dan semantik.<\/p>\n

Mesin pada dasarnya tidak mampu menguraikan bahasa manusia tanpa bantuan analisis sintaksis dan semantik \u2014 yang tugasnya termasuk memecah bahasa manusia menjadi sesuatu yang dapat dibaca oleh mesin.<\/p>\n

Analisis sintaksis mewakili hubungan antara kata-kata pada diagram yang disebut pohon parse\u2014atau tindakan penguraian, singkatnya\u2014sementara analisis semantik mengidentifikasi makna di balik kata-kata tersebut. Di bawah ini adalah beberapa tugas paling umum dari analisis sintaksis dan semantik.<\/p>\n

1. Tokenisasi (Tokenization)<\/b><\/p>\n

Tokenisasi pada dasarnya adalah proses penyederhanaan teks dengan memecah kata menjadi token\u2014unit yang dianggap berguna secara semantik. Bergantung pada skalanya, tokenisasi digunakan untuk membagi kalimat dalam satu teks utuh (sentence tokenization) atau untuk membagi kata dalam satu kalimat (word tokenization).<\/p>\n

Contoh: \u201cSaya merasa sangat puas dengan pelayanan yang diberikan oleh hotel ini.\u201d<\/p>\n

Token: \u201cSaya\u201d – \u201cmerasa\u201d – \u201csangat\u201d – \u201cpuas\u201d – \u201cdengan\u201d – \u201cpelayanan\u201d – \u201cyang\u201d – \u201cdiberikan\u201d – \u201coleh\u201d – \u201chotel\u201d – \u201cini\u201d<\/p>\n

2. Penandaan sebagian ucapan (penandaan PoS)<\/b><\/p>\n

Penandaan PoS atau penandaan part-of-speech berfokus pada mengidentifikasi hubungan antar kata untuk memahami makna di balik kalimat. Ini menentukan bagian dari kategori ucapan dari setiap token dalam teks \u2014 menandainya dengan label kata kerja, kata keterangan, kata benda, kata ganti, preposisi, dll.<\/p>\n

Contoh: \u201cSaya merasa sangat puas dengan pelayanan yang diberikan oleh hotel ini.\u201d<\/p>\n

Tags: Saya [pronoun] merasa [verb] sangat [adverb] puas [adjective] dengan [preposition] pelayanan [noun] yang [preposition] diberikan [verb] oleh [preposition] hotel [noun] ini [pronoun]<\/p>\n

3. Lemmatisasi dan stemming<\/b><\/p>\n

Agar mesin memahami bahasa kompleks kita, perlu ada beberapa penyesuaian yang dilakukan pada bentuk kata yang awalnya kita ucapkan atau tulis sebelum diproses. Alat NLP menggunakan lemmatisasi untuk mengubah kata kembali ke bentuk akarnya atau lemmanya\u2014bentuk kata seperti yang muncul di kamus.<\/p>\n

Contoh: \u201cmemberikan\u201d = beri, \u201cpencarian\u201d = cari, \u201cpepohonan\u201d = pohon<\/p>\n

Di sisi lain, stemming mengacu pada pemangkasan kata menjadi bentuk akarnya meskipun kurang akurat dan mungkin tidak selalu benar secara semantik\u2014sehingga lebih disukai daripada lemmatisasi untuk hasil yang lebih cepat dan kompleksitas yang lebih rendah.<\/p>\n

Contoh: \u201ckebersamaan, bersama, menyamai, disamakan\u201d = sama<\/p>\n

4. Penghapusan stopword<\/b><\/p>\n

Kata henti (stopword) adalah kata-kata berfrekuensi tinggi yang menambahkan sedikit atau tidak ada nilai semantik pada kalimat seperti which, for, to, is, at, on, dll. Menghapusnya dari teks yang ingin Anda proses menggunakan NLP sangat penting jika Anda ingin mendapatkan hasil bebas noise\u2014terutama saat Anda menangani kumpulan data besar seperti komentar media sosial atau umpan balik pelanggan yang perlu dikategorikan berdasarkan topiknya.<\/p>\n

Contoh: \u201cSelamat pagi. Saya mengalami kendala saat sedang melakukan pemesanan tiket.\u201d<\/p>\n

Kata henti: selamat, pagi, saya, mengalami, saat, sedang, melakukan<\/p>\n

Hasil: kendala pemesanan tiket = topik utama<\/p>\n

5. Klasifikasi teks<\/b><\/p>\n

Klasifikasi teks mungkin merupakan salah satu tugas NLP paling dasar yang membantu mesin memahami data tidak terstruktur dengan menetapkan kategori atau tag yang sesuai ke teks berdasarkan kontennya. Tugas NLP khusus ini populer digunakan dalam analisis sentimen\u2014salah satu layanan yang dimiliki dataxet:sonar.<\/p>\n

Contoh:<\/p>\n

\u201cPelayanan CS di sini buruk sekali!\u201d = negatif<\/p>\n

\u201cKecepatan internetnya sepertinya baik-baik saja, sih.\u201d = netral<\/p>\n

\u201cSaya sangat menyukai parfum ini.\u201d = positif<\/p>\n

Dengan NLP sebagai intinya, dataxet:sonar dapat melakukan analisis sentimen yang lebih komprehensif dan akurat dalam Bahasa Indonesia dengan akurasi hingga 83%\u2014memberi Anda wawasan yang dapat ditindaklanjuti yang dapat membantu perusahaan Anda mendeteksi krisis yang akan datang dan membuat keputusan berdasarkan data.<\/p>\n

Hubungi kami untuk demo yang dipersonalisasi.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<\/div>\n\t\t","protected":false},"excerpt":{"rendered":"

Kami sekarang akan membahas detail tugas dan teknik utama NLP dalam analisis sintaksis dan semantik.<\/p>\n","protected":false},"author":1,"featured_media":3421,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[117],"tags":[],"class_list":["post-5830","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-brand-id"],"_links":{"self":[{"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/posts\/5830","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/comments?post=5830"}],"version-history":[{"count":1,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/posts\/5830\/revisions"}],"predecessor-version":[{"id":5831,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/posts\/5830\/revisions\/5831"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/media\/3421"}],"wp:attachment":[{"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/media?parent=5830"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/categories?post=5830"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/sonarplatform.com\/id\/wp-json\/wp\/v2\/tags?post=5830"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}