Minggu, 02 Juni 2013

EVALUASI


EVALUASI
Evaluasi adalah suatu tes atas tingkat penggunaan dan fungsionalitas system yang dilakukan di dalam laboratorium, di lapangan, atau di dalam kolaborasi dengan pengguna. Yang dievaluasi pada interaksi manusia dan komputer adalah desain dan implementasinya. Evaluasi sebaiknya dilakukan dengan mempertimbangkan semua tahapan siklus hidup desain.

A. Evaluasi Empiris
Empiris adalah segala informasi yang diperoleh melalui eksperimen, penelitian, atau observasi. Evaluasi empiris adalah proses penilaian dengan cara eksperimen, penelitian, atau observasi. Sedangkan data empiris merupakan data yang ditemukan atau disimpulkan dari sebuah eksperimen atau penelitian.

B. Perancangan Eksperimen
Merupakan metode klasik dengan pendekatan statistik. FaktoR eksperimental seperti :
             1.  Subjects : siapa merepresentasikan, ketercukupan contoh.
a)      Pemilihan subjek
b)      Harus setepat mungkin dengan keinginan user.
c)      Subjek yang dipilih harus sama usia dan tingkat pendidikannya sesuai dengan kelompok user yang dimaksud.
d)      Ukuran sample yang dipilih kebanyakan ditentukan dengan pertimbangan pragmatis, kehandalan user yang terbatas juga harus cukup besar untuk mewakili populasi yang diambil dalam eksperimen perancangan dan metode statistika yang dipilih.

2.      Variabel : Sesuatu untuk dimodifikasi dan ukuran
  • Variabel independen : Karakteristik suatu eksperimen manipulasi untuk menghasilkan kondisi yang berbeda sebagai perbandingan. Contoh : Jenis interface, level dari help, jumlah item menu dan perancangan ikon.
  • Variabel dependen : Variabel yang dapat diukur dalam eksperimen. Contoh variable independen adalah kecepatan dari pemilihan menu.

3.      Hipotesis : apa yang ingin ditunjukkan
  • Merupakan prediksi yang dihasilkan dalam eksperimen.
  • Masih menggunakan variable independen dan dependen akan menyebabkan perbedaan pada variable dependen.
  • Untuk menunjukkan bahwa perkiraan benar dengan menyangkal adanya hipotesis null yang menyatakan bahwa tidak ada perbedaan dalam variable.
  • Nilai hasil dapat dibandingkan dengan tingkat kepercayaan.
          
4.      Desain eksperimental : bagaimana cara melakukannya.
A. Between-Groups (Randomized)
  • Masing-masing subjek diberi kondisi yang berbeda
  • Keuntungan perancangan ini adalah setiap user menghasilkan satu kondisi
  • Kerugiannya adalah dengan semakin banyaknya jumlah subjek yang tersedia maka akan menyebabkan hasilnya berkurang dan perbedaan antar setiap individu akan membuat hasilnya menjadi bias.

B. Within-Groups
  • Setiap user akan menampilkan kondisi yang berbeda
  • Jumlah user yang tersedi lebih sedikit.


C. Partisipasi, IRB, & Etika

1. Partisipasi
Partisipasi dalam evaluasi berarti keikutsertaan dalam melakukan proses penilaian. Bentuk partisipasi yang nyata yaitu :

  • Partisipasi uang adalah bentuk partisipasi untuk memperlancar usaha-usaha bagi pencapaian kebutuhan penilaian yang memerlukan bantuan
  • Partisipasi harta benda adalah partisipasi dalam bentuk menyumbang harta benda, biasanya berupa alat-alat kerja atau perkakas
  • Partisipasi tenaga adalah partisipasi yang diberikan dalam bentuk tenaga untuk pelaksanaan usaha-usaha yang dapat menunjang keberhasilan suatu penilaian
  • Partisipasi keterampilan, yaitu memberikan dorongan melalui keterampilan yang dimilikinya kepada anggota masyarakat lain yang membutuhkannya


 2. IRB (Institutional Review Board)
Sebuah kelembagaan dewan peninjau ( IRB ), juga dikenal sebagai komite etika independen atau dewan peninjau etik , adalah panitia yang telah ditunjuk secara resmi untuk menyetujui, memantau, dan meninjau biomedis dan perilaku penelitian yang melibatkan manusia . Mereka sering melakukan beberapa bentuk analisis risiko dan manfaat dalam upaya untuk menentukan benar atau tidak penelitian harus dilakukan. Nomor satu prioritas IRB adalah untuk melindungi subyek manusia dari bahaya fisik atau psikologis.

3. Etika
Etika evaluasi terdiri dari 4 hal, yaitu:
a. Kerahasiaan hasil evaluasi
b. Keamanan evaluasi
c. Intepretasi hasil evaluasi
d. Penggunaan evaluasi

D. Pengumpulan Data
Pengumpulan data primer membutuhkan perancangan alat dan metode pengumpulan data
Metode pengumpulan data penelitian:
a. Observasi
b. Wawancara
c. Kuesioner (Daftar Pertanyaan)
d. Pengukuran Fisik
e. Percobaan Laboratorium

Semua metode mensyaratkan pencatatan yang detail, lengkap, teliti dan jelas

Untuk mencapai kelengkapan, ketelitian dan kejelasan data, pencatatan data harus dilengkapi dengan:
• Nama pengumpul data
• Tanggal dan waktu pengumpulan data
• Lokasi pengumpulan data
• Keterangan-keterangan tambahan data/istilah/responden


Tidak ada komentar:

Posting Komentar