Natural Languange Processing (Pemroses Bahasa Alami)

 

kali ini saya akan menulis blog yang berisi rangkuman materi pertemuan 10 tentang Natural language processing yang terdiri dari : 

1. Apa itu Natural language processing 

2. Pendekatan Natural language processing 

3. Teknik dalam Natural language processing

4. Masalah di Natural language processing 

5. Pembagian Natural language processing 

6. Tahapan Proses Natural language processing



1.    Apa itu Natural language processing

Natural language processing (NLP) adalah cabang dari kecerdasan buatan yang berhubungan dengan interaksi antara komputer dan manusia menggunakan bahasa alami yang dapat mengartikan suatu bahasa baik bahasa tulisan maupun bahasa lisan atau memproses masukan yang berupa bahasa menjadi suatu informasi atau pengetahuan


 2.    Pendekatan Natural language processing

  • Pendekatan simbolik

Pendekatan simbolik menggunakan pendekatan yang berdasarkan pada aturan dan leksikon yang dikembangkan manusia.Pendekatan statistik

  • Pendekatan statistik

Didasarkan pada contoh fenomena linguistik yang dapat diamati dan berulang. Sistem mengenali tema berulang melalui analisis matematis.

  • Pendekatan koneksi

Pendekatan koneksi merupakan pendekatan yang menggabungkan pendekatan simbolik dan pendekatan statistik.

 

3.    Teknik dalam Natural language processing

  1. Syntax

Syntax mengacu pada susunan kata-kata dalam sebuah kalimat sehingga tampak masuk akal secara tata bahasa. NLP menggunakan analisis syntax untuk menerapkan aturan tata bahasa pada kumpulan kata yang ditemukannya.

Ada beberapa teknik syntax yang bisa digunakan.

  • Lemmatization, melakukan pengurangan berbagai bentuk kata yang berubah menjadi satu bentuk untuk memudahkan analisis.
  • Segmentasi morfologis, melibatkan pembagian kata menjadi unit-unit individu atau morfem.
  • Segmentasi kata, membagi sebagian besar teks berkelanjutan menjadi unit-unit berbeda.

     2. Semantics

Semantics mengacu pada makna yang disampaikan oleh sebuah teks. Ini merupakan aspek yang paling sulit dianalisis dalam natural language processing dan belum sepenuhnya dipelajari. Analisis ini melibatkan penerapan algoritma komputer untuk memahami arti dan interpretasi kata-kata dan bagaimana kalimat disusun.

Berikut beberapa teknik semantics yang umum digunakan dalam NLP :

  • Named entity recognition (NER), melibatkan penentuan bagian-bagian teks yang dapat diidentifikasi dan dikategorikan ke dalam grup tertentu. Contohnya nama orang dan nama tempat.
  • Disambiguasi arti kata, melibatkan pemberian makna pada kata berdasarkan konteksnya.
  • Natural language generation, melibatkan penggunaan database untuk mendapatkan maksud semantik dari teks dan mengubahnya menjadi bahasa manusia.

 4.    Masalah di Natural language processing

Beberapa masalah yang dihadapi dalam pemrosesan bahasa alami antara lain adalah :

  1. Suatu kalimat sering kali tidak lengkap, artinya tidak memberi informasi yang jelas atau lengkap
  2. Satu kalimat dapat memiliki lebih dari satu pengertian dalam konteks yang berbeda
  3. Tidak ada program pemroses bahasa alami yang cukup lengkap karena bahasa selalu berkembang, kosa kata selalu bertambah.
  4. Bisa terdapat lebih dari satu cara (lebih dari satu kalimat) untuk mengungkapkan hal (maksud) yang sama

  

5.    Pembagian Natural language processing

Masalah pemrosesan bahasa alami dibagi menjadi dua bagian besar, yaitu :

1. Pemrosesan Naskah Tertulis

menggunkan pengetahuan tentang leksikal, sintax, dan semantik

2. Pemrosesan Bahasa Lisan

menggunakan semua pengetahuan dari pemrosesan naskah tertulis ditambah pengetahuan tentang phonology.




6. Tahapan Proses Natural language processing

1. Morphological level

Morfem adalah unit makna terkecil dari sebuah kata. Level ini berkaitan dengan morfem dalam perannya sebagai bagian yang menyusun kata.\

1. Morphological level

Morfem adalah unit makna terkecil dari sebuah kata. Level ini berkaitan dengan morfem dalam perannya sebagai bagian yang menyusun kata.

2. Lexical level

Pada level ini, sistem akan fokus pada bagaimana bagian-bagian kata (morfem) bergabung untuk membuat kata-kata. Kemudian, sistem akan mengidentifikasi perbedaan-perbedaan untuk menemukan arti dari setiap kata.

3. Syntactic level

Level ini berfokus pada teks di level kalimat. Tahap ini berkisar pada gagasan bahwa dalam kebanyakan bahasa, arti kalimat bergantung pada urutan kata dan tata bahasanya.

4. Semantic level

Pada level ini, sistem berfokus pada bagaimana konteks kata dalam kalimat membantu menentukan arti kata pada tingkat individu.

5. Discourse level

Level ini berfokus pada bagaimana kalimat berhubungan satu sama lain dalam satu teks. Sistem akan mengidentifikasi urutan dan pengaturan kalimat yang dapat mempengaruhi arti kalimat.

6. Pragmatic level

Level ini berfokus pada makna kata atau kalimat pada kesadaran situasional dan pengetahuan dunia. Pada dasarnya, sistem akan mengidentifikasi apa arti yang paling mungkin dan paling masuk akal dari teks tersebut.

 


Komentar

Posting Komentar

Postingan populer dari blog ini

Algorithma Klipping (Clipping)

Gambar
Algorithma Clipping Definisi Dalam kehidupan sehari-hari saat kita ingin menggambar sesuatu pada sebuah bidang, tentunya kita tidak akan bisa menggambar melebihi bidang tersebut. Dengan kata lain suatu bidang gambar pasti memiliki batas wilayah maksimum. Seperti halnya komputer, untuk melakukan proses penggambaran suatu objek di monitor, komputer tidak akan bisa menampilkan gambar melebihi batas maksisum yang telah ditentukan. Untuk dapat melakukan hal tersebut, maka digunakanlah proses clipping, Clipping berasal dari kata clip, yang secara umum memiliki arti memotong. Dalam ilmu grafika komputer, clipping merupakan proses pemotongan objek sehingga hanya bagian objek yang berada di dalam area tampil(viewport) yang dapat dilihat oleh user, sedangkan bagian objek yang berada di luar area tampil akan disembunyikan. Hal tersebut dilakukan agar proses perhitungan koordinat pixel pada layar tidak terlalu rumit. Tetapi sebelum melakukan proses clipping terlebih dahulu harus ditentukan bentuk ...
Baca selengkapnya

OpenGL & GLUT

Gambar
Pengertian OpenGL OpenGL (Open Graphics Library) adalah suatu spefikasi grafik yang low-level yang menyediakan fungsi untuk mempermudah pekerjaan atau untuk keperluan – keperluan pemrograman grafis (Graphics Programming / GP), termasuk grafik primitif (titik, garis, dan lingkaran). OpenGL(Open Graphic Library) adalah sebuah library terdiri dari berbagai macam fungsi dan biasanya digunakan untuk menggambar sebuah objek 2D ata 3D. OpenGL bersifat Open-Source, multi-platform dan multi-language. OpenGL juga merupakan suatu antarmuka pemrograman aplikasi (application programming interface (API) yang tidak tergantung pada piranti dan platform yang digunakan, sehingga OpenGL dapat berjalan pada sistem operasi Windows, UNIX,SGI, Linux, frreBSD dan sistem operasi lainnya. OpenGL pada awalnya didesain untuk digunakan pada bahasa pemrograman C/C++, namun dalam perkembangannya OpenGL dapat juga digunakan dalam bahasa pemrograman yang lain seperti Java, Tcl, Ada, Visual Basic, Delphi, maupun Fo...
Baca selengkapnya

SYNTHETIC CAMERA

Gambar
  SYNTHETIC CAMERA SYNTHETIC CAMERA 1 Proyeksi perspektif dengan mata berada di sumbu proyeksi sangat membatasi sudut pandang. 2 Memutar objek agar memperoleh sudut pandang yang berbeda sangat tidak efisien. 3 Pendekatan lain adalah dengan menggunakan synthetic camera. CARA KERJA CAMERA cahaya Citra objek dibawa cahaya menuju lensa sehingga di lensa muncul bayangan objek, oleh cahaya bayangan tersebut kemudian diteruskan ke film (plastik yang dilapisi dengan bahan kimia peka cahaya) sehingga menimbulkan reaksi kimia yang membentuk citra objek SYNTHETIC CAMERA - Synthetic camera adalah metoda memposisikan ‘camera’ untuk melihat benda. - Membutuhkan tiga komponen :  - Bidang proyeks i   - Sistem koordinat viewer - mata. - Cara kerja : objek dipindahkan ke koordinat viewer dan kemudian 'bayangan' objek diproyeksikan perspektif. - Objek perlu dipindahkan ke koordinat viewer agar posisi objek sesuai dengan (align) arah mata. VIEWING COORDINATE - Viewing co...
Baca selengkapnya