Pembangunan Sistem Informasi Manajemen dan Penilaian Kinerja Mitra Statistik  
Makalah Skripsi – Program Studi D-IV Komputasi Statistik Pembangunan Sistem Informasi Manajemen dan Penilaian Kinerja Mitra Statistik Studi Kasus : BPS Kabupaten Jember M. Sonny Aditama ( 221709797 , 4SI1 ) Dosen Pembimbing : Firdaus , MBA Ringkasan— BPS kabupaten / kota dalam melakukan tugasnya membutuhkan tenaga kerja tambahan yang disebut Mitra Statistik , dalam kegiatan tersebut mitra dapat melaksanakan berbagai tugas , diantaranya yaitu menjadi petugas pendataan lapangan , pengolahan data dan pemetaan. Untuk menjaga kualitas data yang dihasilkan , upaya yang dapat dilakukan adalah menggunakan mitra yang berkualitas dan melakukan evaluasi kinerja mitra. Selama ini data mitra di tiap seksi masih belum terintegrasi sehingga terjadi perbedaan data mitra , selain itu ada peraturan baru mengenai keikutsertaan mitra pada suatu kegiatan sehingga diperlukan sistem agar lebih mudah dalam memilih mitra pada suatu kegiatan. Belum ada kriteria yang jelas pada sistem penilaian kinerja sehingga penilaian masih secara subjektif. Berdasarkan permasalahan tersebut , dilakukanlah pembangunan sistem informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. Metode pembangunan sistem yang digunakan adalah SDLC Waterfall serta pengujian dan evaluasi menggunakan Black Box Testing dan System Usability Scale ( SUS ) . Hasil yang didapatkan dari penelitian ini yaitu sistem yang dibangun telah berhasil semua fungsinya sesuai yang diharapkan dan dapat diterima dengan baik oleh pengguna dengan nilai 75,00. Kata Kunci— Mitra statistik , manajemen , penilaian kinerja , SMARTER. I. LATAR BELAKANG Badan Pusat Statistik merupakan lembaga pemerintah non- kementrian yang bertanggungjawab langsung kepada Presiden. Tugas dari Badan Pusat Statistik sendiri adalah melaksanakan tugas pemerintahan di bidang statistik sesuai peraturan perundang-undangan [ 9 ] . Struktur organisasinya terdiri dari kepala Badan Pusat Statistik , Sekretaris Utama , Inspektur Utama , Deputi Bidang Statistik Distribusi , Deputi Bidang Statistik Produksi , Deputi Bidang Statistik Sosial , Deputi Bidang Neraca Wilayah dan Analisis Statistik , Deputi Bidang Metodologi Informasi Statistik , dan Instansi Vertikal yaitu BPS provinsi dan BPS kabupaten / kota yang tersebar di seluruh Indonesia [ 8 ] . Dalam melaksanakan tugas-tugasnya , instansi vertikal yaitu BPS Kabupaten / Kota membutuhkan tenaga kerja tambahan yang biasa disebut dengan Mitra Statistik. Mitra Statistik adalah tenaga kerja yang direkrut oleh BPS untuk menunjang kegiatan statistik di suatu wilayah. Kegiatan tersebut yaitu sensus dan survei. Dalam kegiatan tersebut , mitra dapat tugas , misalnya menjadi petugas melakukan berbagai pendataan lapangan , pengolahan data , dan pemetaan. Untuk pemberian honor kepada mitra , terdapat beberapa satuan yang digunakan , salah satunya yaitu Orang-Bulan ( O-B ) [ 2 ] . Berdasarkan Acuan Anggaran Jawa Timur T.A 2021 , di BPS Kabupaten Jember , satuan tersebut juga berpengaruh pada pemberiaan honor pada mitra yang juga dapat berpengaruh pada keikutsertaan pada suatu kegiatan. Banyaknya kegiatan , terbatasnya jumlah sumber daya manusia yang berkualitas , dan adanya aturan terkait keikutsertaan mitra dalam suatu kegiatan , merupakan suatu tantangan tersendiri bagi BPS Kabupaten Jember untuk tetap menjaga kualitas data yang dihasilkan dari survei dan sensus. Aturan yang dimaksud yaitu jika mitra mengikuti kegiatan yang pembayarannya dalam satuan O-B , maka dalam rentang 1 ( satu ) bulan tidak dapat menerima honor dari kegiatan lainnya [ 4 ] . Satuan O-B tidak harus 1 ( satu ) bulan kalender , periode satu bulan disebutkan tanggalnya di kontrak. Kegiatan yang menggunakan satuan O-B untuk pembayaran yaitu Sakernas , Susenas , dan Sensus Penduduk 2020. Dan untuk kegiatan yang satuannya selain O-B , mitra boleh mengikuti lebih dari 1 ( satu ) kegiatan secara bersamaan [ 4 ] . Kualitas data hasil sensus dan survei ditentukan oleh kualitas pencacah ( atau dalam hal ini mitra yang menjadi pencacah ) [ 3 ] . Untuk mengevaluasi kinerja mitra tentunya membutuhkan sistem penilaian kinerja yang dapat mengukur kualitas dari mitra tersebut [ 6 ] . Selama ini belum tersebut memenuhi terdapat sistem untuk membantu pemilihan mitra yang akan diikutsertakan pada suatu kegiatan yang otomatis mengikuti aturan yang ada , sehingga pemeriksaan terkait kegiatan apa saja yang diikuti oleh mitra , dan apakah mitra syarat untuk diikutsertakan dalam suatu kegiatan , harus dilakukan secara manual. Selain itu , data mitra juga belum terintegrasi antar seksi yang dapat menyebabkan perbedaan data mitra di tiap seksi , contohnya yaitu nama satu mitra tidak sama di tiap seksi. Hal tersebut tentunya akan menambah pekerjaan dalam pemilihan mitra untuk mengikuti suatu kegiatan. Selain itu , terdapat mitra yang terlalu banyak mengikuti kegiatan secara bersamaan tidak menggunakan satuan O-B ) . Terlalu banyak kegiatan yang diikuti secara bersamaan dapat berpengaruh pada kualitas data yang didapatkan. Untuk penilaian kinerja sendiri belum memiliki sistem yang kriterianya jelas , sehingga penilaian yang dilakukan adalah secara subjektif atau kebetulan saja , dan hasilnya pun kurang dapat dipertanggungjawabkan. ini yaitu kegiatan yang ( dalam hal Dari penjelasan di atas , peneliti akan membangun Sistem Informasi Manajemen dan Penilaian Kinerja Mitra. Manajemen akan berfokus pada pengintegrasian data mitra , memberikan daftar mitra yang tersedia dan memenuhi syarat sesuai aturan yang ada untuk diikutsertakan pada suatu kegiatan. Sedangkan 1 / 8 penilaian kinerja dilakukan pada beberapa kriteria penilaian. Selanjutnya akan dilakukan penghitungan hasil penilaian yang dapat menghasilkan ranking dari mitra disuatu kegiatan. Serta terdapat output berupa laporan kinerja mitra. Diharapkan penelitian ini dapat membantu BPS Kabupaten Jember dalam menyelesaikan permasalahan yang berkaitan dengan mitra. II. TUJUAN PENELITIAN Berdasarkan latar belakang , tujuan dilakukannya penelitian yaitu membangun sistem informasi manajemen dan penilaian kinerja mitra statistik yang mampu mengintegrasikan data mitra , memberikan daftar mitra yang tersedia untuk mengikuti kegiatan sesuai aturan , memberikan informasi kegiatan apa saja yang diikuti oleh mitra , mampu melakukan penilaian kinerja mitra berdasarkan kriteria yang telah ditentukan dan menghasilkan laporan penilaian kinerja dan ranking mitra di tiap kegiatan. sistem III. PENELITIAN TERKAIT Terdapat beberapa penelitian terkait , yaitu : 1. Pembangunan Sistem Informasi Penilaian Kinerja dan Rekomendasi Mitra BPS Berbasis Web Menggunakan Metode Analytic Hierarchy Proccess yang dilakukan oleh Raden Rara Nuraziza Rahmadhanty dari Politeknik Statistik STIS pada tahun 2019 [ 7 ] . Sistem informasi yang dihasilkan dapat melakukan penilaian terhadap mitra pencacahan maupun pengolahan dengan indikator yang dapat dipertanggungjawabkan , juga dapat memberikan rekomendasi berdasarkan nilai kualitas kinerja mitra yang dapat digunakan sebagai pertimbangan dalam penentuan alokasi mitra ke kegiatan tertentu. Persamaan dengan penelitian yang dilakukan yaitu sama- sama membuat sistem untuk melakukan penilaian kinerja mitra. Sedangkan perbedaannya yaitu indikator atau kriteria dan sistem penilaian yang lebih disesuaikan , metode yang digunakan , dan output yang akan dihasilkan , penelitian yang dilakukan oleh peneliti akan menghasilkan output berupa laporan kinerja mitra dan ranking mitra di tiap kegiatan. Selain itu juga terdapat history penilaian mitra dan beberapa fitur penunjang yang tidak terdapat pada penelitian terkait. Information System of Performance Assesment on Startup Business using Simple Multi-Attribute Rating Technique Exploiting Ranks ( SMARTER ) yang dilakukan oleh Alen Adriyanti Tangkesalu dan Jatmiko Endro Suseno pada tahun 2018 [ 11 ] . Pada penelitian tersebut dilakukan penilaian kinerja pada bisnis startup menggunakan 4 perspektif balanced scorecard dengan 14 indikator kinerja dan metode Simple Multi-Attribute Rating Technique Exploiting Ranks ( SMARTER ) untuk menghitung bobot penilaian dari setiap indikator. Hasil dari penelitian tersebut yaitu penggunaan instrumen diatas dapat diterapkan pada proses evaluasi bisnis startup karena diperoleh hasil kinerja tertinggi dari perspektif proses tersebut internal dan pelanggan. Penelitian bisnis menunjukkan bahwa metode SMARTER dapat digunakan untuk melakukan penilaian. penghitungan Persamaan dengan penelitian yang dilakukan peneliti yaitu bobot 2. Makalah Skripsi – Program Studi D-IV Komputasi Statistik sama-sama menggunakan metode SMARTER untuk penghitungan bobot hasil penilaian kinerja. Sedangkan perbedaannya yaitu objek yang akan dilakukan penilaian. IV. METODE PENELITIAN A. Ruang Lingkup Penelitian lingkup dari penelitian ini adalah Ruang Ruang pembangunan sistem informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. Mitra statistik yang tercakup yaitu mitra pencacahan. Penelitian ini membangun sistem untuk mengintregasikan data mitra di tiap seksi dan mengalokasikan petugas untuk tiap kegiatan sesuai aturan yang ada. Selain itu juga dilakukan pembangunan sistem untuk melakukan penilaian kinerja mitra statistik yang memiliki output laporan kinerja mitra dan ranking mitra di setiap kegiatan. Penilaian kinerja berdasarkan beberapa kriteria yang dibentuk berdasarkan wawancara dengan staf BPS Kabupaten Jember. B. Metode Pengumpulan Data Metode pengumpulan data yaitu kegiatan yang dilakukan untuk mendapatkan informasi mengenai sistem yang yang akan dibangun. Dari pengumpulan data , informasi yang didapat digunakan untuk mencari solusi dari permasalahan. Metode yang dilakukan yaitu : 1. Studi Pustaka Studi pustaka yaitu metode dalam pengumpulan data dengan melakukan analisis terhadap buku , literatur , catatan , dan laporan yang berkaitan dengan permasalahan. Hasil dari pengumpulan data dengan studi pustaka yaitu landasan teori dan panduan untuk membangun sistem informasi. 2. Wawancara Wawancara merupakan suatu metode pengumpulan data yang dilakukan dengan bertanya kepada narasumber , baik secara langsung maupun secara tidak langsung. Wawancara yang dilakukan yaitu semi terstruktur , pewawancara menanyakan mengenai permasalahan hanya secara garis besar dan banyak mendengarkan pendapat dan ide-ide dari narasumber. dimana 3. Kuesioner Kuesioner yang terdiri dari beberapa pertanyaan. Kuesioner yang diberikan yaitu System Usability Scale ( SUS ) , yang memiliki tujuan untuk mengetahui dan mengevaluasi kelayakan sistem yang dikembangkan. C. Metode Pembangunan Sistem Metode pembangunan sistem informasi yang akan digunakan adalah metode SDLC Waterfall. Metode Waterfall merupakan suatu metode pembangunan sistem yang setiap tahapannya dilakukan secara berurutan , tahapannya dimulai dari requirements analysis , system design , implementation , integration and testing , dan operation and maintenance [ 10 ] . Metode ini dipilih karena subject matter telah menguasai rancangan sistem yang akan 2 / 8 dikembangkan , sehingga kemungkinan perubahan desain ditengah pengerjaan kecil. Makalah Skripsi – Program Studi D-IV Komputasi Statistik Gambar 1. Tahapan metode waterfall 1. Requirement Analysis Pada tahap ini dilakukan pengumpulan kebutuhan dari sistem yang akan dibangunan. Pengumpulan kebutuhan dilakukan dengan studi literatur dan wawancara , wawancara dilakukan terhadap kasub bagian umum , kasi , dan staf BPS Kabupaten Jember. Selanjutnya akan dibentuk dokumen kebutuhan sistem. 2. System Design 3. 4. Pada tahapan ini , dilakukan penerjemahan dari tahap sebelumnya , berfokus pada proses bisnis , aliran data , basis data , dan tampilan antar muka. Implementation Tahap ini merupakan penerjemahan dari tahapan desain , bahasa diterjemahkan menggunakan pemograman yang telah ditentukan. Termasuk implementasi basis data dan tampilan antar muka. Bahasa pemograman utama yang digunakan yaitu PHP dengan framework CodeIgniter. DBMS yang digunakan yaitu MySQL. Template yang digunakan yaitu SB Admin 2. Integration and Testing Selanjutnya dilakukan pengujian terhadap sistem , pada testing. Blackbox testing berdasarkan output yang dihasilkan setelah melakukan input , sehingga tidak melihat itu bisa dihasilkan. bagaimana proses output Pengujian ini dilakukan untuk mengetahui apakah sistem telah berjalan sesuai dengan yang diinginkan. Untuk evaluasi , menggunakan System Usability Scale ( SUS ) , kuesioner SUS akan diberikan kepada pengguna untuk mengetahui kelayakan sistem yang dikembangkan. ini menggunakan blackbox tahap 5. Operation and Maintenance Sistem yang telah dijalankan perlu dilakukan pemeliharaan agar sistem yang dijalankan tetap stabil. V. KERANGKA PIKIR Untuk menjelaskan alur penelitian , dibuatlah kerangka pikir yang dapat digambarkan pada diagram berikut. Gambar 2. Kerangka pikir diawali dilakukan ini dengan Penelitian adanya permasalahan yang berkaitan dengan mitra statistik , yaitu adanya perbedaan data mitra di setiap seksi , berlebihnya beban kerja yang didapatkan oleh satu atau beberapa mitra ( dalam hal ini yang dimaksud yaitu banyaknya kegiatan yang diikuti secara bersamaan ) , belum adanya sistem penilaian kinerja yang memiliki kriteria yang jelas. Solusi dari permasalahan yaitu membangun sistem informasi manajemen dan penilaian kinerja mitra statistik. Penelitian dilakukan dengan pendekatan metode System Development Life Cycle ( SDLC ) Waterfall. Alat-alat yang digunakan yaitu PIECES , Ishikawa Diagram , Data Flow Diagram ( DFD ) , Use Case Diagram , Activity Diagram , Entity- Relationship Diagram ( ERD ) . Hasil yang diharapkan yaitu terbangunnya sistem informasi manajemen dan penilaian kinerja mitra statistik. Dan pada akhir penelitian akan dilakukan evaluasi menggunakan Black Box Testing dan System Usability Scale. VI. HASIL DAN PEMBAHASAN A. Sistem Penilaian Berdasarkan diskusi dengan subject matter , dihasilkan beberapa kriteria untuk penilaian kinerja mitra dan bentuk penilaiannya. Kriteria yang dihasilkan dianggap dapat mewakili dari kinerja dari mitra , dan bentuk penilaian yang digunakan dapat dengan mudah untuk diterapkan , serta output dari hasil penilaian mudah dibaca dan dipahami oleh mitra. Terdapat 10 kriteria yang dihasilkan dengan bentuk penilaian skala 1-5. Selanjutnya untuk memperoleh nilai akhir mitra , akan dilakukan penghitungan dengan pembobotan pada setiap kriteria. Metode yang digunakan yaitu Simple Multi- Attribute Rating Technique Exploiting Rank ( SMARTER ) . Langkah-langkahnya sebagai berikut. a. Mengidentifikasi masalah. b. Menetapkan kriteria dan subkriteria. c. Memberi peringkat untuk masing-masing kriteria dan subkriteria. d. Hitung bobot kriteria dan subkriteria menggunakan bobot Rank Order Centroid ( ROC ) . Secara umum pembobotan ROC dapat dirumuskan pada persamaan : 3 / 8 Makalah Skripsi – Program Studi D-IV Komputasi Statistik C. Analisis Masalah permasalahan. Dalam Berdasarkan analisis sistem berjalan , dapat identifikasi ini , beberapa menggunakan diagram ishikawa atau fishbone untuk memvisualisasikan permasalahan yang akan disajikan pada gambar dibawah ini. Permasalahan dikategorikan menjadi 5 kategori yaitu man , machine , material , method , dan measurement. penelitian 𝑊𝑘 = 1 𝐾 𝐾 ∑ ( 𝑖=𝑘 1 𝑖 ) ( 1 ) Keterangan : Wk : nilai bobot kriteria ke-k K : 1 , 2 , … , K K : jumlah kriteria i : nilai alternatif. e. Untuk mendapatkan nilai akhir , dilakukan penjumlahan dari bobot kriteria dikalikan dengan nilai utility. Dari hasil penjumlahan tersebut , diurutkan dari terbesar ke terkecil untuk mendapatkan ranking mitra. Rumus untuk menghitung bobot akhir dapat dilihat pada persamaan : 𝑈ℎ = ∑ 𝑊𝑘𝑈ℎ ( 𝑋ℎ𝑘 ) 𝐾 𝑘=1 ( 2 ) Keterangan : H K K 𝑈ℎ 𝑊𝑘 𝑈ℎ ( 𝑋ℎ𝑘 ) : indeks untuk mengidentifikasi objek evaluasi ( dalam penelitian ini yaitu mitra ) , dimana h = 1 , 2 , … , H. : jumlah kriteria : indeks untuk mengidentifikasi kriteria , dimana k = 1 , 2 , … , K. : nilai akhir : bobot dari kriteria ke-k : nilai utility kriteria ke k untuk alternatif ke- k Berikut persamaan untuk menghitung nilai utility : 𝑈𝑛 ( 𝑋𝑛𝑘 ) = 100 % 𝑥 ( 𝐶𝑖−𝐶𝑚𝑖𝑛 ) ( 𝐶𝑚𝑎𝑥−𝐶𝑚𝑖𝑛 ) ( 3 ) Dimana , 𝐶𝑖 𝐶𝑚𝑖𝑛 𝐶𝑚𝑎𝑥 : Nilai kriteria ke-i : Nilai kriteria minimal : Nilai kriteria maksimal B. Analisis Sistem Berjalan Secara garis besar , berikut proses bisnis sistem yang berjalan. Penelitian akan berfokus pada tahap yang dibatasi dengan garis berwarna biru. Information Gambar 4. Analisis masalah sistem berjalan D. Analisis Kebutuhan Analisis kebutuhan sistem dilakukan berdasarkan hasil wawancara kepada subject matter. Berdasarkan wawancara terdapat beberapa permintaan mengenai sistem yang akan dikembangkan. Pada penelitian ini , analisis kebutuhan sistem akan menggunakan PIECES , yang terdiri dari Performance , Information , Economy , Control , Efficiency , dan Services. TABEL I TABEL ANALISIS KEBUTUHAN Faktor Sistem berjalan Performance Kinerja mitra tidak terukur dan masih menggunakan mitra sebenarnya yang kurang berkinerja baik. Belum ada informasi berupa laporan / report mengenai kinerja mitra baik di setiap kegiatan maupun secara keseluruhan. Economy Control Efficiency Services Membutuhkan waktu memeriksa untuk boleh atau tidaknya mitra ikut ke suatu kegiatan. Belum terintegrasinya data mitra antar seksi. memeriksa Masih secara manual mengenai boleh atau tidaknya mitra ikut ke suatu kegiatan. - Sistem usulan Adanya sistem informasi penilaian kinerja mitra sehingga mitra yang berkinerja kurang baik dapat terdeteksi. tersedia Kinerja mitra dinilai setiap kegiatan , sehingga akan laporan yang dapat digunakan untuk evaluasi , serta ada informasi tambahan berupa ranking mitra di setiap kegiatan. Sistem sudah otomatis mengikuti peraturan yang ada , sehingga lebih cepat mengetahui ketersediaan mitra. Data mitra antar seksi akan terintegrasi. Sistem secara otomatis memvalidasi mitra yang tersedia berdasarkan peraturan yang berlaku. - Gambar 3. Proses bisnis sistem berjalan E. Proses Bisnis Sistem Usulan Berikut proses bisnis sistem usulan , dimana hanya menggambarkan sistem utama , yaitu manajemen dan penilaian kinerja mitra. Sebenarnya terdapat 4 aktor pada sistem , yaitu Superadmin , Operator Seksi , Pengawas , Mitra , tetapi karena fitur untuk Superadmin tidak berhubungan 4 / 8 dengan sistem utama maka tidak digambarkan pada gambar proses bisnis usulan. Makalah Skripsi – Program Studi D-IV Komputasi Statistik G. Activity Diagram Proses bisnis dari suatu aktivitas digambarkan melalui activity diagram , berikut beberapa activity diagram dari sistem utama. 1. Tambah 2. Tambah master data mitra master data pegawai 3. Tambah kegiatan Gambar 5. Proses bisnis sistem usulan F. Use Case Diagram Use case diagram menggambarkan aktor dan aktivitas yang dapat dilakukannya. Gambar 7. Aktivitas tambah master data mitra Gambar 8. Aktivitas tambah master data mitra Gambar 9. Aktivitas tambah kegiatan 4. Tambah pencacah 5. Tambah pengawas Gambar 10. Aktivitas tambah pencacah Gambar 11. Aktivitas ambah pengawas 6. Plotting pencacah tiap pengawas Gambar 6. Use case diagram Gambar 12. Aktivitas plotting pencacah tiap pengawas 5 / 8 7. Lihat jadwal mitra Makalah Skripsi – Program Studi D-IV Komputasi Statistik Gambar 13. Aktivitas lihat jadwal mitra 8. Mengisi penilaian 9. Lihat ranking mitra tiap kegiatan Gambar 17. Entity relationship diagram I. Implementasi Tampilan 1. Halaman tambah master data mitra lainnya dapat dilakukan oleh tambah master data mitra dan aktivitas Untuk mengelola role superadmin dan operator seksi. Menambahkan data mitra dapat dilakukan secara satu per satu dan batch dengan mengimpor file excel. Template file excel telah disediakan dan dapat diunduh. Gambar 18. Halaman tambah data mitra 2. Halaman tambah master data pegawai Untuk tambah master data pegawai dan aktivitas mengelola role superadmin dan operator seksi. Menambahkan data pegawai hanya bisa dilakukan satu per satu. lainnya dapat dilakukan oleh Gambar 14. Aktivitas mengisi penilaian Gambar 15. Aktivitas lihat ranking mitra tiap kegiatan 10. Unduh hasil penilaian Gambar 16. Aktivitas unduh hasil penilaian H. Rancangan Database Rancangan Relationship Diagram berikut. database digambarkan melalui Entity Gambar 19. Halaman tambah data pegawai 3. Halaman tambah kegiatan Untuk menambahkan kegiatan hanya dapat dilakukan oleh role operator seksi. Kegiatan yang ditambahkan operator seksi tertentu tidak akan muncul pada seksi lainnya. 6 / 8 Makalah Skripsi – Program Studi D-IV Komputasi Statistik Gambar 20. Halaman tambah kegiatan 4. Halaman tambah pencacah Gambar 24. Halaman pengawas terpilih 7. Halaman plotting pencacah tiap pengawas Halaman ini hanya berisi daftar mitra , karena penelitian ini memiliki batasan untuk menilai mitra. Tersedia juga halaman untuk melihat mitra yang terpilih menjadi pencacah. Plotting ini berpengaruh pada role pengawas , sehingga untuk melakukan penilaian , hanya tersedia daftar pencacah yang telah di-plot dengan pengawas tersebut. Tersedia juga halaman untuk melihat pencacah yang terpilih. Gambar 21. Halaman tambah pencacah 5. Halaman lihat jadwal mitra Halaman ini dapat menampilkan jadwal mitra dalam bentuk timeline dan juga tabel. Gambar 25. Halaman plotting pencacah tiap pengawas 8. Halaman isi penilaian Penilaian hanya dapat dilakukan oleh role pengawas , terdiri dari 10 kriteria penilaian dengan skala 1 s / d 5. Gambar 22. Halaman lihat jadwal mitra 6. Halaman tambah pengawas Pengawas dapat berasal dari pegawai dan mitra , tetapi lebih diutamakan pegawai. Sehingga un tuk tambah pengawas , secara default menampilkan daftar pegawai , dan tersedia button untuk menambahkan dari daftar mitra serta disediakan halaman untuk melihat pengawas terpilih. Gambar 26. Halaman isi penilaian 9. Halaman unduh hasil penilaian Halaman ini dapat dilakukan oleh role operator seksi , pengawas dan mitra. Untuk operator seksi dapat mengunduh hasil penilaian dari mitra yang ikut kegiatannya , untuk pengawas hanya dapat mengunduh hasil penilaian pencacah yang dinilainya , dan untuk mitra hanya bisa mengunduh nilai diri sendiri sebagai pencacah. Gambar 23. Halaman tambah pengawas 7 / 8 Gambar 27. Halaman unduh hasil penilaian 10. Halaman lihat ranking mitra di suatu kegiatan Halaman ini hanya dapat diakses oleh role operator seksi. Hasil ranking dapat dilihat jika seluruh penilaian telah dilakukan disuatu kegiatan. Untuk perhi tungan ranking , menggunakan metode SMARTER. Gambar 28. Halaman lihat ranking mitra di suatu kegiatan J. Pengujian Pengujian sistem dilakukan dengan Black box testing dan System Usability Scale ( SUS ) . 1. Black box testing Pengujian dengan black box testing bertujuan untuk menguji fungsi-fungsi yang telah dibuat telah berhasil. Dari pengujian ini didapatkan bahwa setiap fungsi telah berhasil dijalankan dengan hasil sesuai harapan. 2. System Usability Scale ( SUS ) TABEL II TABEL HASIL PENGUJIAN SUS Pertanyaan Responden 1 7,5 10 7,5 7,5 10 5 10 2 7,5 7,5 5 7,5 7,5 7,5 5 3 10 10 10 10 7,5 7,5 7,5 4 7,5 7,5 2,5 7,5 2,5 7,5 2,5 5 7,5 10 7,5 7,5 10 7,5 7,5 6 7,5 10 5 7,5 7,5 7,5 7,5 7 7,5 10 7,5 2,5 7,5 5 7,5 8 10 10 7,5 10 7,5 7,5 10 9 7,5 10 7,5 7,5 7,5 7,5 2,5 10 10 7,5 7,5 10 7,5 5 2,5 1 2 3 4 5 6 7 Total 82,5 92,5 67,5 77,5 75 67,5 62,5 Rata-rata 8,21 6,79 8,93 5,36 8,21 7,50 6,79 8,93 7,14 7,14 75,00 Min Max 5 5 7,5 2,5 7,5 5 2,5 7,5 2,5 2,5 62,5 10 10 10 10 10 10 10 7,5 7,5 92,5 10 Pengujian dengan SUS bertujuan untuk mengetahui kelayakan sistem yang dibangun , apakah dapat diterima oleh pengguna atau tidak. SUS terdiri dari 10 pertanyaan dengan skala jawaban 1 sampai 5. Responden dari SUS ini berjumlah 7 orang [ 1 ] , yang terdiri dari pegawai dan mitra di BPS Kabupaten Jember. Skor yang didapatkan dari SUS ini sebesar 75 , yang berarti di rentang 71,4 – 85,5 , menunjukkan jika sistem yang di rancang masuk kategori good [ 5 ] dan dapat diterima oleh pengguna. Makalah Skripsi – Program Studi D-IV Komputasi Statistik A. Kesimpulan VII. PENUTUP Berdasarkan hasil penelitian yang telah dilakukan , dapat ditarik beberapa kesimpulan sebagai berikut. 1. Telah berhasil dikembangkan informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. sistem 2. Hasil pengujian dengan black box testing , semua fitur atau fungsi pada sistem telah berhasil dijalankan sesuai dengan yang diharapkan. 3. Hasil evaluasi dengan System Usability Scale ( SUS ) mendapatkan nilai rata-rata 75,00 yang berarti sistem dapat diterima dengan baik oleh pengguna B. Saran Dari penelitian yang telah dilakukan , terdapat beberapa saran dari peneliti yang dapat digunakan untuk penelitian selanjutnya. 1. Perlu untuk penelitian menentukan kriteria penilaian kinerja mitra statistik sehingga terdapat standar yang dapat digunakan oleh seluruh BPS kabupaten / kota. dilakukan tersendiri 2. Penilaian kinerja dilakukan tidak hanya pada mitra pencacahan. 3. Berdasarkan pengujian SUS , item pernyataan yang mendapatkan skor terendah yaitu diperlukannya bantuan teknis untuk menggunakan sistem , sehingga diperlukan sosialisasi mengenai sistem sebelum diterapkan. DAFTAR PUSTAKA [ 1 ] Alroobaea , R. , and Mayhew , P. J. ( 2014 ) . How many participants are really enough for usability studies ? . Proceedings of 2014 Science and Information Conference. SAI 2014. 48–56. [ 2 ] Badan Pusat Statistik. Peraturan Kepala Badan Pusat Statistik Nomor 102 Tahun 2020 tentang Harga Satuan Pokok Kegiatan untuk Pegawai Negeri Sipil Tahun Anggaran 2021 Pasal 1 Ayat 12. [ 3 ] Badan Pusat Statistik. Buku 3 Manajemen Lapangan Survei Sosial Ekonomi Nasional ( SUSENAS ) Modul Kesehatan dan Perumahan 2019. Jakarta : Badan Pusat Statistik. [ 4 ] Badan Pusat Statistik Provinsi Jawa Timur. Acuan Anggaran Jawa Timur Tahun Anggaran 2021 : Penjelasan POK Program PPIS Tahun Anggaran 2021. Surabaya : Badan Pusat Statistik Provinsi Jawa Timur. [ 5 ] Bangor , A. , Kortum , P. and Miller , J. ( 2009 ) . Determining What Individual SUS Scores Mean : Adding an Adjective Rating Scale. Journal of Usability Studies , 4 ( 3 ) , hal. 114–123. [ 6 ] Priyono dan Marnis. Manajemen Sumber Daya Manusia. Sidoarjo : Zifatama Publisher. [ 7 ] Rahmadhanty , Raden Rara Nuraziza. ( 2019 ) . Pembangunan Sistem Informasi Penilaian Kinerja dan Rekomendasi Mitra BPS Berbasis Web Menggunakan Metode Analytic Hierarchy Processs [ SKRIPSI ] . Jakarta : Politeknik Statistika STIS. [ 8 ] Republik Indonesia. Peraturan Presiden Nomor 86 Tahun 2007 tentang Badan Pusat Statistik dan Peraturan Kepala Badan Pusat Statistik Nomor 116 Tahun 2014 tentang Organisasi dan Tata Kerja Badan Pusat Statistik. [ 9 ] Republik Indonesia. Undang-Undang Nomor 16 Tahun 1997 tentang Statistik. [ 10 ] Royce , Winson W. Managing The Development of Large Software Systems : Concepts and Techniques. Proceedings of the 9th International Conference on Software Engineering ( pp. 328-338 ) . [ 11 ] Tangkesalu , A. A. , & Suseno , J. E. ( 2018 ) . Information System of Performance Assesment on Startup Business using Simple Multi-Attribute Rating Technique Exploiting Ranks ( SMARTER ) . In E3S Web of Conferences ( Vol. 73 ) . EDP Sciences. 8 / 8
O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN O O O O O O B-METODE I-METODE O O O O O B-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O
Makalah Skripsi – Program Studi D-IV Komputasi Statistik Pembangunan Sistem Informasi Manajemen dan Penilaian Kinerja Mitra Statistik Studi Kasus : BPS Kabupaten Jember M. Sonny Aditama ( 221709797 , 4SI1 ) Dosen Pembimbing : Firdaus , MBA Ringkasan— BPS kabupaten / kota dalam melakukan tugasnya membutuhkan tenaga kerja tambahan yang disebut Mitra Statistik , dalam kegiatan tersebut mitra dapat melaksanakan berbagai tugas , diantaranya yaitu menjadi petugas pendataan lapangan , pengolahan data dan pemetaan. Untuk menjaga kualitas data yang dihasilkan , upaya yang dapat dilakukan adalah menggunakan mitra yang berkualitas dan melakukan evaluasi kinerja mitra. Selama ini data mitra di tiap seksi masih belum terintegrasi sehingga terjadi perbedaan data mitra , selain itu ada peraturan baru mengenai keikutsertaan mitra pada suatu kegiatan sehingga diperlukan sistem agar lebih mudah dalam memilih mitra pada suatu kegiatan. Belum ada kriteria yang jelas pada sistem penilaian kinerja sehingga penilaian masih secara subjektif. Berdasarkan permasalahan tersebut , dilakukanlah pembangunan sistem informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. Metode pembangunan sistem yang digunakan adalah SDLC Waterfall serta pengujian dan evaluasi menggunakan Black Box Testing dan System Usability Scale ( SUS ) . Hasil yang didapatkan dari penelitian ini yaitu sistem yang dibangun telah berhasil semua fungsinya sesuai yang diharapkan dan dapat diterima dengan baik oleh pengguna dengan nilai 75,00. Kata Kunci— Mitra statistik , manajemen , penilaian kinerja , SMARTER.
VII. PENUTUP Berdasarkan hasil penelitian yang telah dilakukan , dapat ditarik beberapa kesimpulan sebagai berikut. 1. Telah berhasil dikembangkan informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. sistem 2. Hasil pengujian dengan black box testing , semua fitur atau fungsi pada sistem telah berhasil dijalankan sesuai dengan yang diharapkan. 3. Hasil evaluasi dengan System Usability Scale ( SUS ) mendapatkan nilai rata-rata 75,00 yang berarti sistem dapat diterima dengan baik oleh pengguna B. Saran Dari penelitian yang telah dilakukan , terdapat beberapa saran dari peneliti yang dapat digunakan untuk penelitian selanjutnya. 1. Perlu untuk penelitian menentukan kriteria penilaian kinerja mitra statistik sehingga terdapat standar yang dapat digunakan oleh seluruh BPS kabupaten / kota. dilakukan tersendiri 2. Penilaian kinerja dilakukan tidak hanya pada mitra pencacahan. 3. Berdasarkan pengujian SUS , item pernyataan yang mendapatkan skor terendah yaitu diperlukannya bantuan teknis untuk menggunakan sistem , sehingga diperlukan sosialisasi mengenai sistem sebelum diterapkan.
suatu kegiatan. Belum ada kriteria yang jelas pada sistem penilaian kinerja sehingga penilaian masih secara subjektif. Berdasarkan permasalahan tersebut , dilakukanlah pembangunan sistem informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. Metode pembangunan sistem yang digunakan adalah SDLC Waterfall serta pengujian dan evaluasi menggunakan Black Box Testing dan System Usability Scale ( SUS ) . Hasil yang didapatkan dari penelitian ini yaitu sistem yang dibangun telah berhasil semua fungsinya sesuai yang diharapkan dan dapat diterima dengan baik oleh pengguna dengan nilai 75,00. Kata Kunci— Mitra statistik , manajemen , penilaian kinerja , SMARTER. VII. PENUTUP Berdasarkan hasil penelitian yang telah dilakukan , dapat beberapa kesimpulan sebagai berikut. 1. Telah berhasil dikembangkan informasi manajemen dan penilaian kinerja mitra statistik di BPS Kabupaten Jember. sistem 2. Hasil pengujian dengan black box testing , semua fitur atau fungsi pada sistem telah berhasil dijalankan sesuai dengan yang diharapkan. 3. Hasil evaluasi dengan System Usability Scale ( SUS ) mendapatkan nilai rata-rata 75,00 yang berarti sistem dapat diterima dengan baik oleh pengguna B. Saran Dari penelitian yang telah dilakukan , terdapat beberapa saran dari peneliti yang dapat digunakan untuk penelitian selanjutnya. 1. Perlu
O O O O O O O O O O O O O O O O O O O O O B-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN I-TUJUAN O O O O O O B-METODE I-METODE O O O O O B-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE I-METODE O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O B-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN I-TEMUAN O O O O O O O O O O O O O O O O O O O O O