From 3421db49843bd13833e022ba147b7774ed21c5c1 Mon Sep 17 00:00:00 2001 From: Rizky Luthfianto Date: Sat, 3 Oct 2015 16:17:03 +0700 Subject: [PATCH] fix(stopwords-id.txt): changed to Lucene stopwords Changed the previous stopwords with Lucene`s Indonesian stopwords. Because it contains too many words that aren't stop words (eg: not function words). It was more an "Indonesian word list" than "Indonesian stop words". The Lucene stopwords is based from appendix D of: A Study of Stemming Effects on Information Retrieval in Bahasa Indonesia (https://www.illc.uva.nl/Research/Publications/Reports/MoL-2003-02.text.pdf) --- goose/resources/text/stopwords-id.txt | 1093 ++----------------------- 1 file changed, 71 insertions(+), 1022 deletions(-) diff --git a/goose/resources/text/stopwords-id.txt b/goose/resources/text/stopwords-id.txt index 418f43f9..73d2480e 100644 --- a/goose/resources/text/stopwords-id.txt +++ b/goose/resources/text/stopwords-id.txt @@ -1,194 +1,80 @@ -a -abad -acara -aceh ada -adalah adanya +adalah adapun agak agaknya -agama agar -agustus -air akan akankah -akhir -akhiri akhirnya -akibat aku akulah -alam -album amat amatlah -amerika -anak -and anda andalah -anggota antar +diantaranya antara -antarabangsa antaranya +diantara apa apaan +mengapa apabila apakah apalagi apatah -api -april -artikel -artinya -as -asal -asalkan -asas -asia -asing -atas atau ataukah ataupun -australia -awal -awalnya -awam -b -badan bagai bagaikan +sebagai +sebagainya bagaimana -bagaimanakah bagaimanapun -bagainamakah +sebagaimana +bagaimanakah bagi -bagian -bahagian -bahan -baharu -bahasa -bahawa bahkan bahwa -bahwasannya bahwasanya -baik -baiknya -bakal -bakalan -balik -bandar -bangsa -bank +sebaliknya banyak -bapak -barang -barangan -barat -baru -baru-baru -bawah +sebanyak beberapa +seberapa begini beginian beginikah beginilah +sebegini begitu begitukah begitulah begitupun -bekas -bekerja -belakang -belakangan -belanda -beli +sebegitu beliau belum belumlah -benar -benarkah -benarlah -bentuk -berada -berakhir -berakhirlah -berakhirnya +sebelum +sebelumnya +sebenarnya berapa berapakah berapalah berapapun -berarti -berasal -berat -berawal -berbagai -berbanding -berbeda -berdasarkan -berdatangan -berharap -berhasil -beri -berikan -berikut -berikutan -berikutnya -berita -berjalan -berjaya -berjumlah -berkaitan -berkali -berkali-kali -berkata -berkehendak -berkeinginan -berkenaan -berlainan -berlaku -berlalu -berlangsung -berlebihan -bermacam -bermacam-macam -bermain -bermaksud -bermula -bernama -bernilai -bersama -bersama-sama -bersiap -bertanya -bertemu -berturut -bertutur -berubah -berujar -berupa -besar -besok -betul betulkah -bhd +sebetulnya biasa biasanya -bidang bila bilakah -bilion -bintang bisa bisakah -blog -bn -bola +sebisanya boleh bolehkah bolehlah @@ -197,1113 +83,276 @@ bukan bukankah bukanlah bukannya -buku -bulan -bumi -bung -bursa -cadangan -cara -caranya -catch -china -click -code -copyright -cukup -cukupkah -cukuplah cuma -daerah -dagangan +percuma dahulu dalam dan -dana dapat dari daripada -dasar -data -datang -datuk dekat demi demikian demikianlah +sedemikian dengan depan -derivatives -desa -desember -detik -dewan di dia -diadakan -diakhiri -diakhirinya dialah -dianggap -diantara -diantaranya -diberi -diberikan -diberikannya -dibuat -dibuatnya -dibuka -dicatatkan -didapat -didatangkan -didirikan -diduga -digunakan -diibaratkan -diibaratkannya -diingat -diingatkan -diinginkan -dijangka -dijawab -dijelaskan -dijelaskannya -dikarenakan -dikatakan -dikatakannya -dikenal -dikerjakan -diketahui -diketahuinya -dikira -dilakukan -dilalui -dilihat -dimaksud -dimaksudkan -dimaksudkannya -dimaksudnya -dimana -diminta -dimintai -dimisalkan -dimulai -dimulailah -dimulainya -dimungkinkan dini -diniagakan -dipastikan -diperbuat -diperbuatnya -dipergunakan -diperkirakan -diperlihatkan -diperlukan -diperlukannya -dipersoalkan -dipertanyakan -dipunyai diri -dirilis dirinya -dis -disampaikan -disebut -disebutkan -disebutkannya -disember -disini -disinilah -distrik -ditambahkan -ditandaskan -ditanya -ditanyai -ditanyakan -ditegaskan -ditemukan -ditujukan -ditunjuk -ditunjuki -ditunjukkan -ditunjukkannya -ditunjuknya -ditutup -dituturkan -dituturkannya -diucapkan -diucapkannya -diungkapkan -document.write -dolar +terdiri dong -dr -dua dulu -dunia -effective -ekonomi -eksekutif -eksport -empat -enam enggak enggaknya entah entahlah -era -eropa -err -faedah -feb -film -gat -gedung -gelar -gettracker -global -grup -guna -gunakan -gunung -hadap -hadapan +terhadap +terhadapnya hal hampir hanya hanyalah -harga -hari -harian harus haruslah harusnya -hasil +seharusnya hendak hendaklah hendaknya -hidup hingga -https -hubungan -hukum -hutan -i +sehingga ia -iaitu ialah ibarat -ibaratkan -ibaratnya -ibu -ii -iklan -ikut -ilmu -indeks -india -indonesia -industri -informasi -ingat -inggris ingin inginkah inginkan ini inikah inilah -internasional -islam -isnin -isu -italia itu itukah itulah -jabatan -jadi -jadilah -jadinya -jakarta -jalan -jalur -jaman -jan jangan jangankan janganlah -januari -jauh -jawa -jawab -jawaban -jawabnya -jawatan -jawatankuasa -jelas -jelaskan -jelaslah -jelasnya -jenis -jepang -jepun -jerman jika jikalau -jiwa -jual -jualan juga -julai -jumaat -jumat -jumlah -jumlahnya -jun -juni justru -juta -kabar -kabupaten -kadar kala -kalangan kalau kalaulah kalaupun -kali kalian -kalimantan kami kamilah -kamis kamu kamulah kan -kantor -kapal kapan kapankah kapanpun +dikarenakan karena karenanya -karya -kasus -kata -katakan -katakanlah -katanya -kaunter -kawasan ke -keadaan -kebetulan -kebutuhan -kecamatan kecil -kedua -kedua-dua -keduanya -kedudukan -kegiatan -kehidupan -keinginan -kejadian -kekal -kelamaan -kelihatan -kelihatannya -kelima -kelompok -keluar -keluarga -kelurahan -kembali -kementerian -kemudahan kemudian -kemungkinan -kemungkinannya -kenaikan kenapa -kenyataan kepada kepadanya -kepala -kepentingan -keputusan -kerajaan -kerana -kereta -kerja -kerjasama -kes -kesampaian -keselamatan -keseluruhan -keseluruhannya -kesempatan -kesihatan -keterangan -keterlaluan -ketiga ketika -ketua -keuntungan -kewangan -khamis -khusus +seketika khususnya kini kinilah -kira -kira-kira kiranya +sekiranya kita kitalah -klci -klibor -klik -km kok -komentar -kompas -komposit -kondisi -kontrak -korban -korea -kos -kota -kuala -kuasa -kukuh -kumpulan -kurang -kurangnya lagi lagian -lagu +selagi lah lain lainnya -laku +melainkan +selaku lalu +melalui +terlalu lama lamanya -langkah -langsung -lanjut -lanjutnya -laporan -laut +selama +selama +selamanya lebih -lembaga -lepas -lewat -lima -lingkungan -login -lokasi -lot -luar -luas -lumpur -mac +terlebih +bermacam macam -mahkamah -mahu -majlis +semacam maka -makanan makanya makin -maklumat malah malahan -malam -malaysia mampu mampukah mana manakala manalagi -mantan -manusia -masa -masalah -masalahnya masih masihkah +semasih masing -masing-masing -masuk -masyarakat -mata mau maupun -measure -media -mei -melainkan -melakukan -melalui -melawan -melihat -melihatnya -memandangkan +semaunya memang -memastikan -membantu -membawa -memberi -memberikan -membolehkan -membuat -memerlukan -memihak -memiliki -meminta -memintakan -memisalkan -memperbuat -mempergunakan -memperkirakan -memperlihatkan -mempersiapkan -mempersoalkan -mempertanyakan -mempunyai -memulai -memungkinkan -menaiki -menambah -menambahkan -menandaskan -menanti -menantikan -menanya -menanyai -menanyakan -menarik -menawarkan -mencapai -mencari -mencatatkan -mendapat -mendapatkan -mendatang -mendatangi -mendatangkan -menegaskan -menerima -menerusi -mengadakan -mengakhiri -mengaku -mengalami -mengambil -mengapa -mengatakan -mengatakannya -mengenai -mengerjakan -mengetahui -menggalakkan -menggunakan -menghadapi -menghendaki -mengibaratkan -mengibaratkannya -mengikut -mengingat -mengingatkan -menginginkan -mengira -mengucapkan -mengucapkannya -mengumumkan -mengungkapkan -mengurangkan -meninggal -meningkat -meningkatkan -menjadi -menjalani -menjawab -menjelang -menjelaskan -menokok -menteri -menuju -menunjuk -menunjuki -menunjukkan -menunjuknya -menurut -menuturkan -menyaksikan -menyampaikan -menyangkut -menyatakan -menyebabkan -menyebutkan -menyediakan -menyeluruh -menyiapkan -merasa mereka merekalah -merosot -merupakan meski meskipun -mesyuarat -metrotv -meyakini -meyakinkan -milik -militer -minat -minggu -minta -minyak -mirip -misal -misalkan -misalnya -mobil -modal -mohd -mudah -mula -mulai -mulailah -mulanya -muncul +semula mungkin mungkinkah -musik -musim nah -naik -nama namun nanti nantinya -nasional -negara -negara-negara -negeri -new -niaga -nilai -nomor -noun -nov -november -numeral -numeralia -nya nyaris -nyatanya -of -ogos -okt -oktober -olah oleh olehnya -operasi -orang -organisasi +seorang +seseorang pada -padahal padanya -pagetracker -pagi -pak +padahal paling -pameran -panjang +sepanjang pantas -papan +sepantasnya +sepantasnyalah para -paras -parlimen -partai -parti -particle -pasar -pasaran -password pasti pastilah -pasukan -paticle -pegawai -pejabat -pekan -pekerja -pelabur -pelaburan -pelancongan -pelanggan -pelbagai -peluang -pemain -pembangunan -pemberita -pembinaan -pemerintah -pemerintahan -pemimpin -pendapatan -pendidikan -penduduk -penerbangan -pengarah -pengeluaran -pengerusi -pengguna -penggunaan -pengurusan -peniaga -peningkatan -penting -pentingnya per -perancis -perang -peratus -percuma -perdagangan -perdana -peringkat -perjanjian -perkara -perkhidmatan -perladangan -perlu -perlukah -perlunya -permintaan pernah -perniagaan -persekutuan -persen -persidangan -persoalan -pertama -pertandingan -pertanyaan -pertanyakan -pertubuhan -pertumbuhan -perubahan -perusahaan -pesawat -peserta -petang -pihak -pihaknya -pilihan -pinjaman -polis -polisi -politik -pos -posisi -presiden -prestasi -produk -program -projek -pronomia -pronoun -proses -proton -provinsi -pt -pubdate -pukul pula -pulau pun -punya -pusat -rabu -radio -raja -rakan -rakyat -ramai -rantau -rasa -rasanya -rata -raya -rendah -republik -resmi -ribu -ringgit -root -ruang -rumah -rupa +merupakan rupanya +serupa saat saatnya -sabah -sabtu -sahaja -saham +sesaat saja sajalah -sakit -salah saling +bersama sama -sama-sama +sesama sambil sampai -sampaikan sana sangat sangatlah -sarawak -satu -sawit saya sayalah -sdn se sebab sebabnya -sebagai -sebagaimana -sebagainya -sebagian -sebahagian -sebaik -sebaiknya -sebaliknya -sebanyak -sebarang -sebegini -sebegitu -sebelah -sebelum -sebelumnya -sebenarnya -seberapa -sebesar -sebetulnya -sebisanya sebuah -sebut -sebutlah -sebutnya -secara -secukupnya +tersebut +tersebutlah sedang sedangkan -sedemikian sedikit sedikitnya -seenaknya segala segalanya segera -segi -seharusnya -sehingga -seingat +sesegera sejak -sejarah -sejauh sejenak -sejumlah -sekadar -sekadarnya sekali -sekali-kali sekalian -sekaligus sekalipun +sesekali +sekaligus +sekarang sekarang -sekaranglah -sekecil -seketika -sekiranya sekitar sekitarnya -sekolah -sektor -sekurang -sekurangnya -sekuriti sela -selagi selain -selaku selalu -selama -selama-lamanya -selamanya -selanjutnya -selasa -selatan -selepas seluruh seluruhnya -semacam semakin -semalam -semampu -semampunya -semasa -semasih -semata -semaunya sementara -semisal -semisalnya sempat semua semuanya -semula -sen sendiri -sendirian sendirinya -senin seolah -seolah-olah -seorang -sepak -sepanjang -sepantasnya -sepantasnyalah -seperlunya seperti sepertinya -sepihak -sept -september -serangan -serantau -seri -serikat sering seringnya serta -serupa -sesaat -sesama -sesampai -sesegera -sesekali -seseorang -sesi -sesuai -sesuatu -sesuatunya -sesudah -sesudahnya -setelah -setempat -setengah -seterusnya -setiap -setiausaha -setiba -setibanya -setidak -setidaknya -setinggi -seusai -sewaktu -siap siapa siapakah siapapun -siaran -sidang -singapura +disini +disinilah sini sinilah -sistem -soal -soalnya -sokongan -sri -stasiun -suara +sesuatu +sesuatunya suatu +sesudah +sesudahnya sudah sudahkah sudahlah -sukan -suku -sumber -sungai supaya -surat -susut -syarikat -syed tadi tadinya -tahap -tahu -tahun tak -tama -tambah -tambahnya -tampak -tampaknya -tampil -tan -tanah -tandas -tandasnya -tanggal tanpa -tanya -tanyakan -tanyanya -tapi -tawaran -tegas -tegasnya -teknologi +setelah telah -televisi -teman -tempat -tempatan -tempo -tempoh -tenaga -tengah tentang -tentara tentu tentulah tentunya -tepat -terakhir -terasa -terbaik -terbang -terbanyak -terbesar -terbuka -terdahulu -terdapat -terdiri -terhadap -terhadapnya -teringat -terjadi -terjadilah -terjadinya -terkait -terkenal -terkira -terlalu -terlebih -terletak -terlihat -termasuk -ternyata -tersampaikan -tersebut -tersebutlah tertentu -tertuju -terus -terutama -testimoni -testimony -tetap +seterusnya +tapi tetapi -the -tiada +setiap tiap -tiba +setidaknya tidak tidakkah tidaklah -tidaknya -tiga -tim -timbalan -timur -tindakan -tinggal -tinggi -tingkat toh -tokoh -try -tun -tunai -tunjuk -turun -turut -tutur -tuturnya -tv -uang -ucap -ucapnya -udara -ujar -ujarnya -umum -umumnya -unescape -ungkap -ungkapnya -unit -universitas -untuk -untung -upaya -urus -usah -usaha -usai -user -utama -utara -var -versi waduh wah wahai -wakil -waktu -waktunya +sewaktu walau walaupun -wang -wanita -warga -warta -wib -wilayah wong -word -ya yaitu -yakin yakni yang -zaman \ No newline at end of file