CHAPTER I.

INTRODUCTION LITERATURE REVIEW, RESEARCH SYNTHESES, AND

META ANALYSES

Cooper 2016, research synthesis and meta analysis

A step by step approach., applied social research methode series vol 2. Sage

Nilai suatu studi akan ditentukan dari sebanyak apa studi itu menyediakan arah untuk penelitian masa
depan (bagaimana kontribusi untuk mengidentifikasi potongan puzzle yang dibutuhkan berikutnya)
sebagai dari temuan sendiri.

Kebutuhan untuk Perhatian pada Sintesis Penelitian

Dalam rangka memberikan kontribusi untuk pemahaman kita tentang fenomena sosial dan perilaku,
peneliti harus mengetahui terlebih dulu apa yang sudah diketahui, dengan apa yang pasti, dan apa yang
tetap tidak terjelaskan. Namun, sampai empat dekade yang lalu, ilmuwan sosial tidak terlalu
memperhatikan bagaimana mereka melakukan tinjauan literatur yang menutupi temuan empiris, dan
bagaimana diletakkannya, dievaluasi, diringkas,dan ditafsirkan penelitian terdahulu. Seruan untuk
penggunaan pengambilan keputusan berbasis bukti telah menempatkan penekanan baru pada pentingnya
pemahaman bagaimana penelitian dilakukan, apa yang ditemukan, dan apa bukti kumulatif yang
ditunjukkan adalah praktek terbaik.

Tujuan dan Premis dari Buku

Dalam sistematika penelitian ilmu sosial adalah sama, baik peneliti sedang melakukan
pengumpulan data baru (studi primer) atau sintesis penelitian. Namun,dua jenis penyelidikan
membutuhkan teknik khusus untuk tujuan mereka. Ada satu premis penting yang mendasari metode yang
dijelaskan dalam teks ini, yakni bahwa mengintegrasikan proyek penelitian yang terpisah menjadi gambar
yang koheren melibatkan kesimpulan sebagai pusat validitas pengetahuan sebagai kesimpulan yang
terlibat dalam menarik kesimpulan dari analisis data primer. Oleh karena itu, jika pengetahuan ilmu sosial
yang terkandung dalam sintesis penelitian adalah untuk menjadi layak percaya, synthesists penelitian
harus memenuhi standar metodologis rigor yang sama yang diperlukan dari peneliti utama.

Definisi dari Tinjauan Literatur

Ruang lingkup kajian literatur yang memperkenalkan studi primer baru biasanya cukup sempit: itu
akan dibatasi kepada karya-karya teoritis dan studi empiris yang berkaitan dengan isu tertentu ditujukan
oleh studi baru.Tinjauan literature dapat memiliki satu atau lebih tujuan: (a) untuk mengintegrasikan
(membandingkan dan kontras) apa yang telah dilakukan orang lain dan berkata,(b) untuk mengkritik
karya-karya ilmiah sebelumnya, (c) untuk membangun jembatan antara daerah topik terkait, dan/atau (d)
untuk mengidentifikasi isu sentral di lapangan.
Istilah meta-analisis sering digunakan sebagai sinonim untuk sintesis penelitian, review penelitian,
atau tinjauan sistematis. Dsini meta-analisis akan digunakan semata-mata untuk menunjukkan prosedur
kuantitatif yang menggunakan statistik untuk menggabungkan hasil penelitian.

Mengapa Kita Perlu Sintesis Penelitian Berdasarkan Prinsip Ilmiah

Sintesis penelitian yang dilakukan dengan cara narasi tradisional telah banyak dikritik. Penentang
sintesis penelitian tradisional telah menyarankan bahwa metode adalah tidak tepat dalam proses dan
hasil.sintesis narasi tradisional, dengan sifatnya, gagal menghasilkan pernyataan mengenai besarnya
keseluruhan hubungan yang diselidiki.
Saat ini, state-of-the-art sintesis penelitian menggunakan koleksi teknik metodologis dan statistik
dimaksudkan untuk mengurangi bias dalam akun penelitian, dan untuk membakukan dan membuat
eksplisit prosedur yang digunakan untuk mengumpulkan, katalog, dan menggabungkan penelitian
utama.Temuan dalam buku ini menunjukkan bahwa synthesists diminta untuk menggunakan teknik
statistik juga cenderung melihat replikasi ke depan menjadi kurang diperlukan daripada synthesists
lainnya, meskipun perbedaan antara statistik dan lainnya synthesists tidak bermakna secara statistik.

Hasil utama dari Sintesis Penelitian

Selain menggunakan pendekatan yang rigor dan transparan untuk menugmpulkan penelitian, state-
of-the-art sintesis penelitian diharapkan dapat memberikan informasi tentang beberapa jenis temuan yang
berkaitan dengan hasil kumulatif dari penelitian cakupannya. Dalam hal ini pembaca berharap untuk
diberitahu apakah hasil penelitian dalam sintesis Anda bervariasi secara sistematis sesuai dengan
karakteristik dari manipulasi atau intervensi, pengaturan dan waktu di mana penelitian dilakukan,
perbedaan antara partisipan, karakteristik alat ukur, dan sebagainya.

Sejarah Singkat Sintesis Penelitian dan Analisis Meta

Sejak pertengahan 1980-an, sejumlah besar dan berkembang dari buku telah muncul di sintesis
penelitian dan meta-analisis. Beberapa ini memperlakukan topik umum (misalnya, teks ini, Kartu, 2012;
Lipsey & Wilson, 2001; Petticrew & Roberts, 2006; Schmidt & Hunter, 2015), beberapa
memperlakukannya dari perspektif desain penelitian tertentu (misalnya, Bohning , Kuhnert, & Rattanasiri,
2008; Eddy, Hassleblad, & Schachter, 1992), dan beberapa terikat dengan paket perangkat lunak tertentu
(misalnya, Arthur, Bennett, & Huffcutt, 2001; Chen & Perdamaian, 2013; Komprehensif Meta-Analisis,
2015 ). Pada tahun 1994, edisi pertama The Handbook of Research Synthesis diterbitkan, dan edisi kedua
muncul pada tahun 2009 (Cooper et al., 2009).

Tahapan dari Sintesis Penelitian

Serupa dengan penelitian utama, sintesis penelitian melibatkan lima tahap yang berbeda (Cooper,
1982). Tahapan tersebut mencakup tugas-tugas pokok yang perlu dilakukan sehingga synthesists
menghasilkan deskripsi berisi bagian dari kumulatif bukti masalah penelitian atau hipotesis.Yang
terpenting adalah setiap keputusan metodologis pada setiap tahap sintesis dapat meningkatkan atau
melemahkan kepercayaan dari kesimpulan atau, kesamaan bahasa ilmu sosial, dapat membuat ancaman
terhadap validitas kesimpulannya.
Dalam model terbaru, proses sintesis penelitian dibagi menjadi tujuh langkah:
Langkah 1: Merumuskan masalah
Langkah 2 : Mencari literature
Langkah 3: Mengumpulkan Informasi dari studi
Langkah 4: Evaluasi kualitas penelitian
Langkah 5: Menganalisis dan mengintegrasikan hasil studi
Langkah 6: Menafsirkan bukti
Langkah 7: Menyajikan hasil

CHAPTER II. STEP 1 FORMULATING THE PROBLEM

Semua penelitian empiris dimulai dengan pertimbangan cermat dari masalah yang akan menjadi
fokus penelitian. Dalam bentuk yang paling dasar, masalah penelitian meliputi definisi dua variabel dan
alasan untuk mempelajari hubungan mereka.Pilihan masalah studi dalam penelitian primer dipengaruhi
oleh kepentingan dan kondisi sosial yang mengelilingi peneliti
Sebagai synthesist, peneliti mungkin menemukan sedikit petunjuk tentang bagaimana variasi ini
harus bermakna dikelompokkan untuk menentukan apakah mereka mempengaruhi hubungan antara
pilihan dan motivasi.Maka, kapasitas peneliti adalah untuk mengungkap variabel yang menjelaskan
mengapa hasil berbeda dalam studi yang berbeda dan kemampuan untuk menghasilkan penjelasan atas
hubungan ini yang merupakan aspek kreatif dan menantang dari proses sintesis penelitian.

Definisi Variabel dalam Penelitian Ilmu Sosial

 Persamaan dalam Konsep dan Operasional dalam Penelitian Dasar dan Sintesis Penelitian
 Variabel yang terlibat dalam penelitian ilmu sosial harus didefinisikan dalam dua cara. Pertama,
variabel harus diberi definisi konseptual. Definisi konseptual menggambarkan kualitas dari variabel
yang independen terhadap ruang dan waktu tetapi dapat digunakan untuk membedakan peristiwa
yang diamati dan tidak relevan dengan konsep. Ketika suatu konsep lebih luas, kita juga dapat
mengatakan mereka lebih abstrak. Baik peneliti utama dan synthesists penelitian harus merincikan
secara operasional termasuk dalam definisi konseptual mereka.
 Perbedaan dalam Konsep dan Operasional dalam Penelitian Dasar dan Sintesis Penelitian
Perbedaan bagaimana variabel didefinisikan juga dapat ditemukan antara kedua jenis penelitian.
peneliti utama memiliki sedikit pilihan selain untuk menentukan konsep-konsep mereka secara
operasional sebelum mereka memulai studi mereka. Mereka tidak bisa mulai mengumpulkan data
sampai variabel dalam penelitian ini telah diberikan realitas empiris. Peneliti utama mempelajari
pilihan harus menentukan bagaimana pilihan akan dimanipulasi atau diukur sebelum mereka dapat
menjalankan partisipan pertama mereka.

Di sisi lain, synthesists penelitian tidak begitu perlu operasional yang tepat, setidaknya tidak pada
awalnya. Bagi mereka, pencarian literatur dapat dimulai dengan hanya definisi konseptual dan
beberapa operasional yang dikenal relevan dengan itu. Kemudian, operasional terkait dapat diisi
sebagai synthesists menjadi lebih mengenal literatur penelitian. Sebagai synthesist penelitian,
peneliti memiliki kemewahan komparatif untuk bisa mengevaluasi relevansi konseptual operasi yang
berbeda seperti yang ditemukan dalam literatur. Peneliti bahkan dapat mengubah definisi
konseptualnya tergantung pada definisi operasional yang relevan secara potensial, konsep peneliti
mungkin membahasnya, yang tidak terjadi ketika penelitian dimulai.

Perbedaan lain antara kedua jenis penyelidikan adalah bahwa studi utama biasanya hanya melibatkan
satu atau beberapa definisi operasional atas konstruk yang sama.Sebaliknya, sintesis penelitian
biasanya melibatkan banyak realisasi empiris untuk setiap variabel yang diteliti.

Multiple Operations di Sintesis Penelitian

Synthesists penelitian harus menyadari dua ketidakselarasan potensial yang dapat timbul karena
berbagai operasional yang mereka hadapi dalam literatur. Ketika keadaan seperti ini muncul, peneliti
harus mempersempit landasan konseptual sintesis untuk lebih kongruen dengan operasi yang ada. Jika
tidak, kesimpulan mungkin tampak lebih umum daripada yang dibenarkan oleh data. Serta kebalikan
masalah, dimulai dengan konsep sempit tapi kemudian menghadapi definisi operasional yang
menyarankan konsep yang diminati harus diperluas.
Pastikan bahwa keputusan peneliti untuk memasukkan studi tertentu definisi belum diperluas atau
bahwa operasional yang hilang dalam literatur tidak menyarankan bahwa definisi konseptual perlu
dipersempit. Dalam penelitian utama, terumuskannya masalah sebagai hasil studi adalah disukai. Dalam
sintesis penelitian, tampak bahwa beberapa fleksibilitas mungkin diperlukan, dan hal ini memang
menguntungkan.

Multiple Operationism dan Concept-to-Operation Correspondence

Istilah multiple operationism didefinisikan sebagai penggunaan banyak langkah-langkah yang
membagi definisi konseptual, tetapi memiliki pola yang berbeda dari komponen yang tidak
relevan.Multiple operationism mampu meningkatkan Concept-to-Operation jika operasional yang
dicakup dalam sintesis penelitian secara individual setidaknya minimal terkait dengan konstruk.
Multiple operationism melakukan lebih dari memperkenalkan potensi kesimpulan lebih bernuansa
tentang variabel konseptual. Mereka juga merupakan sumber yang paling penting dari varians dalam
kesimpulan dari sintesis yang berbeda dimaksudkan untuk mengatasi topik yang sama. multiple
operationism dapat mempengaruhi hasil sintesis dalam dua cara: (1) perbedaan definisi operasional yang
disertakan, (2) perbedaan dalam detail operasional.
Mendefinisikan Hubungan Ketertarikan
Agar dapat menentukan kesesuaian desain penelitian yang berbeda, ada tiga pertanyaan yang perlu
ditanyakan tentang masalah yang memotivasi sintesis penelitian: (1) Apakah hasil penelitian akan
dinyatakan dalam angka atau narasi? (2) Apakah masalah yang sedang dikaji merupakan deskripsi dari
suatu peristiwa, hubungan antara peristiwa, atau penjelasan kausal dari suatu peristiwa? (3) Apakah
masalah atau hipotesis berusaha untuk memahami (a) bagaimana proses terungkap pada individual
partisipan dari waktu ke waktu, atau (b) apa yang dikaitkan dengan atau menjelaskan variasi antara
partisipan atau kelompok partisipan?

Penelitian Kuantitatif atau Kuailtatif?

Berkenaan dengan pertanyaan, "Apakah hasil penelitian akan dinyatakan dalam angka atau narasi?"
Itu harus jelas bahwa untuk jenis sintesis penelitian yang fokus di sini, jawabannya adalah "angka."
Namun, ini tidak berarti narasi atau penelitian kualitatif tidak akan memainkan peran dalam sintesis
penelitian kuantitatif. Penelitian kualitatif juga digunakan untuk membantu mengidentifikasi
kemungkinan moderator dan mediator dari efek pekerjaan ini.

Deskripsi, Asosiasi, atau Hubungan kausal?

Pada pertanyaan kedua“Apakah masalah yang sedang dikaji merupakan deskripsi dari suatu
peristiwa, hubungan antara peristiwa, atau penjelasan kausal dari suatu peristiwa?” hal ini membagi
masalah penelitian menjadi 3 kelompok. Dalam prakteknya, tiga jenis desain penelitian yang paling
sering digunakan untuk membantu membuat kesimpulan kausal.Yang pertama disebut modelling
research, dibutuhkan penelitian korelasional yang lebih jauh dengan menguji co-occurrence dalam
kerangka multivariat. Pendekatan kedua, quasi-experimental research. Yang ketiga adalah experimental
research.

Proses Within-Participant atau Between-Participant?

Sintesis dari penelitian time series masih jarang dan metodologinya masih cukup baru, sehingga
sisa buku ini berfokus pada sintesis dari penelitian antara-partisipan (between-participant). Semua contoh
sintesis disini melibatkan penelitian yang berusaha untuk menemukan hubungan yang melibatkan variasi
antara-partisipan.

Menilai Relevansi Konseptual dari Studi

Peneliti harus mulai pencarian literatur dengan pemikiran definisi konseptual yang luas. Dalam
menentukan penerimaan operasional untuk dimasukkan dalam konsep yang luas, peneliti harus tetap
seterbuka mungkin dalam penafsirannya. Pada tahap akhir dari sintesis, terutama selama evaluasi data,
adalah mungkin untuk mengecualikan operasional tertentu karena kurangnya relevansi.

Bukti dari Study-Generated dan Synthesis-Generated

Terdapat dua sumber berbeda yang terkait bukti tentang hubungan yang terkandung dalam sintesis
penelitian.Jenis pertama disebut bukti studi yang dihasilkan (study-generated). Bukti study-generated
hadir ketika studi tunggal berisi hasil yang langsung menguji hubungan yang dipertimbangkan. Sintesis
penelitian juga mengandung bukti yang menunjukkan bahwa tidak berasal dari studi tunggal, melainkan
dari variasi dalam prosedur dalam seluruh penelitian. Jenis bukti, disebut bukti sintesis yang dihasilkan
(synthesis-generated), hadir ketika hasil penelitian menggunakan prosedur yang berbeda untuk menguji
hipotesis yang sama dibandingkan dengan satu sama lain.
Hal ini penting bagi synthesists untuk menjaga perbedaan antara bukti studi yang dihasilkan dan
sintesis yang dihasilkan dalam pikiran. Hanya bukti yang berasal dari manipulasi eksperimental dalam
studi tunggal dapat mendukung pernyataan mengenai kausalitas.

Pengaruh Konteks pada Sintesis Hasil

 Perbedaan dalam bagaimana masalah ditempatkan dalam konteks teoritis atau praktis
mempengaruhi hasil sintesis dengan mengarahkan perbedaan dalam cara operasional studi diperlakukan
setelah literatur yang relevan telah diidentifikasi.Synthesists dapat bervariasi dalam memfokuskan
perhatian kepada perbedaan teoritis dan praktis dalam literatur. Dengan demikian, dua sintesis penelitian
yang dilakukan dengan menggunakan definisi konseptual identik dan set penelitian yang sama masih
dapat mencapai perbedaan yang jelas.
.

CHAPTER II. STEP 2 SEARCHING THE LITERATURE

Dalam penelitian ilmu sosial, partisipan diperoleh melalui kolam subjek, iklan, situs internet,
sekolah, kantor dokter, dan sebagainya. Dalam sintesis penelitian, ketrtarikan studi ditemukan dengan
melakukan pencarian laporan penelitian yang relevan. Terlepas dari apakah ilmuwan social
mengumpulkan data baru atau hasil sintesis dari penelitian sebelumnya, yang terpenting keputusan yang
mereka buat ketika menemukan sumber data yang relevan melibatkan target populasi yang akan menjadi
rujukan penelitian (Fowler, 2014). Populasi sasaran mencakup individu atau kelompok yang diharapkan
mewakili dalam penelitian ini. Dalam sintesis penelitian, target populasi mencakup semua studi yang
menguji hipotesis atau mengatasi masalah.

Populasi dalam Penelitian Ilmu Sosial

Penelitian primer dan sintesis melibatkan menentukan populasi sasaran dan sampling frame. Selain
itu, kedua jenis penyelidikan membutuhkan peneliti untuk mempertimbangkan bagaimana populasi
sasaran dan kerangka sampling mungkin berbeda dari satu lain. Populasi target yang paling umum untuk
penelitian ilmu sosial dan perilaku dapat dicirikan sebagai "semua manusia," baik sebagai individu atau
dalam kelompok.
Sampel dalam penelitian ilmu sosial dan perilaku biasanya jauh lebih dibatasi dari target. Jadi,
partisipan dalam intervensi latihan mungkin akan diambil dari wilayah geografis yang sama. Kebanyakan
peneliti menyadari kesenjangan antara keragaman partisipan dan mereka berharap hasil penelitiannya
menjadi acuan yang benar bagi orang lain. Untuk alasan ini, mereka membahas batas generalisasi dalam
hasil studi/penelitian.

Metode Studi Lokasi

Teknik ini telah mengalami perubahan besar dalam beberapa tahun terakhir. Dengan kata lian, cara
ilmuwan mengirimkan karya mereka satu sama lain telah berubah dalam tiga dekade terakhir
dibandingkan pada tiga abad sebelumnya, kemudian muncul kembali pada abad ke-17, ketika jurnal
ilmiah pertama kali muncul. Perubahan ini terutama disebabkan oleh penggunaan komputer dan internet
untuk memfasilitasi komunikasi manusia.

Nasib Studi dari Inisiasi ke Publikasi

Survei terhadap 33 peneliti yang telah beberapa tahun sebelumnya diusulkan 159 studi untuk
dewan review di universitas mereka. Survei tersebut meminta para peneliti seberapa jauh setiap studi
sudah dalam proses dari inisiasi publikasi. Dari 159 studi, 4 tidak pernah dimulai, 4 yang dimulai tetapi
pengumpulan data tidak pernah selesai, dan 30 telah diselesaikan namun data tidak pernah dianalisis.
Dari sudut pandang penelitian synthesists, 38 penelitian ini sedikit menarik karena hipotesis tidak
pernah diuji. Namun, setelah data penelitian ini telah dianalisis (seperti yang terjadi sekitar 76% dari studi
yang diusulkan) maka hasilnya adalah kepentingan karena itu merupakan uji hipotesis penelitian.

Beberapa Cara Mencari Saluran Berbeda

Terdapat data empiris yang terbatas berkaitan dengan perbedaan informasi ilmiah yang diperoleh
dengan menggunakan teknik pencarian yang berbeda, sehingga banyak dari perbandingan melibatkan
beberapa spekulasi. Masalahnya begitu rumit, lebih lanjut adanya fakta bahwa efek dari karakteristik
teknik pencarian mungkin bervariasi dari topik ke topik.
Mekanisme komunikasi telah muncul secara serampangan, sehingga tidak ada dimensi deskriptif
sempurna untuk menangkap semua fitur penting. Namun, ada beberapa fitur yang berguna dalam
menggambarkan teknik pencarian yang berbeda. Salah satu fitur penting yang membedakan teknik
komunikasi ilmiah berkaitan dengan bagaimana penelitian masuk ke saluran.
Yang paling penting dari persyaratan ini adalah penggunaan peer review di jurnal ilmiah untuk
memastikan bahwa penelitian memenuhi standar tertentu berkaitan dengan relevansi, kualitas, dan
pentingnya. Bahkan, semua saluran memiliki beberapa pembatasan entri, tetapi jenis dan keketatan
berbeda dari saluran ke saluran. Ini adalah pembatasan yang langsung mempengaruhi bagaimana
penelitian di saluran berbeda dari semua penelitian yang relevan.
Fitur penting yang kedua dari teknik pencarian yaitu menyangkut bagaimana pencari memperoleh
informasi dari saluran. Saluran memiliki persyaratan yang lebih atau kurang terbuka atau dibatasi tentang
bagaimana untuk mengakses konten mereka. Saluran lebih terbatas jika memerlukan pencari (orang
mencari informasi dari saluran) untuk mengidentifikasi sangat spesifik apa atau dokumen yang mereka
inginkan. Saluran lebih terbuka jika pencari dapat lebih luas atau umum dalam permintaan informasi.
persyaratan akses juga dapat mempengaruhi jenis penelitian pencari dalam menemukan saluran.

Reseacher to Reseacher Chanel

Teknik peneliti ke peneliti untuk memperoleh laporan studi ditunjukkan oleh fakta bahwa pencari
sedang berusaha mencari simpatisan yang mungkin atau mungkin tidak memiliki studi yang relevan
daripada untuk menemukan laporan sendiri. Tidak ada pembatasan resmi pada jenis permintaan yang
dapat dilakukan melalui kontak pertukaran informasi tersebut. Bentuk-bentuk utama komunikasi peneliti
ke peneliti melibatkan kontak pribadi, permohonan masal, perguruan tinggi yang tak terlihat secara
tradisional, dan perguruan tinggi yang tak terlihat secara elektronik.

Kontak Personal
Kontak antara yang satu dengan satu lainnya adalah orang yang anda hubungi langsung atau yang
menghubungi anda untuk berbagi pekerjaannya karena mereka tahu hal-hal yang bagi anda menarik
sehingga membawa anda keluar laboratorium, tapi mungkin tidak jauh di luar. Mahasiswa dan profesor
mereka berbagi ide dan menyampaikan satu makalah dan artikel untuk kepentingan bersama.

Keterbatasan informasi yang diperoleh melalui kontak personal

Kontak pribadi umumnya merupakan saluran komunikasi terbatas. Peneliti lanjutan harus
mengetahui dan menghubungi peneliti utama secara individual untuk memperoleh informasi yang
relevan. Peneliti utama harus tahu bahwa peneliti lanjutan tertarik pada apa yang mereka lakukan dalam
rangka untuk memulai pertukaran informasi.

Mass Solicitation
Mengirim ajakan umum untuk sekelompok peneliti dapat menghasilkan sampel yang kurang bias
informasi. Kontak ini mengharuskan Anda pertama mengidentifikasi kelompok yang anggotanya individu
yang memiliki akses ke laporan penelitian yang relevan. Kemudian, Anda mendapatkan daftar anggota
kelompok dan menghubungi anggota individual biasanya melalui e-mail jika anda tidak mengenal mereka
secara pribadi.

Keterbatasan informasi yang diperoleh melalui Mass Solicitation

Permohonan massa dapat mengungkapkan sampel penelitian yang lebih heterogen daripada kontak
pribadi dan tergantung pada teknik yang digunakan untuk menghasilkan milis. Sebagai contoh, sulit untuk
melihat bagaimana strategi menghubungi dekan, dekan asosiasi, dan pengelola departemen akan
menyebabkan sampel sangat bias.
Traditional Invisible Colleges
Karakteristik struktural dari perguruan tinggi yang tak terlihat tradisional tergantung pada fakta
bahwa di masa lalu transmisi informasi informal antara ilmuwan terjadi satu lawan satu, terutama melalui
surat cetak dan melalui telepon. Media yang diperlukan hanya dua orang pada satu waktu bisa bertukar
informasi (meskipun beberapa komunikasi dua arah mungkin terjadi secara paralel melalui, misalnya,
surat massal). Selain itu, dua komunikator harus mengetahui dan memilih untuk berbicara satu sama lain.
Dengan demikian, peneliti berpengaruh bertindak sebagai pusat, baik membatasi masukan (entry) dan
mengarahkan output dari (akses ke) informasi kepada sekelompok peneliti.

Keterbatasan informasi yang diperoleh melalui traditional Invisible Colleges

Pengaruh peneliti terkemuka atas informasi yang dikomunikasikan melalui perguruan tinggi yang
tak terlihat tradisional memegang kunci untuk menilai bias dalam informasi yang dikirimkan melalui
saluran ini. Synthesists mengumpulkan penelitian semata-mata dengan menghubungi peneliti terkemuka
mungkin akan menemukan studi yang lebih seragam untuk mendukung keyakinan yang dipegang oleh ini
peneliti dari studi yang dikumpulkan dari semua sumber.

Electronic Invisible Colleges

Dengan Internet, memungkinkan pencari untuk mengirim permintaan informasi yang sama secara
bersamaan untuk kelompok yang anggotanya dapat berbagi minat tetapi kemungkinan sebagian besar
anggotanya tidak diketahui satu sama lain. Elektronik perguruan tinggi yang tak terlihat beroperasi
melalui penggunaan program manajemen daftar komputerisasi. Program-program ini mempertahankan
mailing list dan secara otomatis mengirim pesan e-mail ke anggota.
Kadang-kadang kelompok peneliti tidak dapat dikaitkan dengan daftar distribusi resmi yang
dikelola oleh sebuah organisasi melainkan berkomunikasi melalui daftar informal. Dalam kasus lain,
peneliti mungkin anggota dari pertumbuhan jumlah media internet yang memungkinkan individu dapat
berpikiran untuk berbagi informasi.

Keterbatasan informasi yang diperoleh melalui Electronic Invisible Colleges

Sebagian besar pelanggan dalam daftar distribusi atau kelompok diskusi yang menerima pesan meminta
bantuan untuk mengidentifikasi studi yang relevan dengan topik tertentu mungkin tidak bisa membantu
anda menemukan studi yang sesuai dengan keinginan dan bahkan mereka tidak merespon pesan anda.

CHAPTER IV, Tahap 3 MENGUMPULKAN INFORMASI DARI STUDI SEBELUMNYA

Sebelum memulai membuat acuan dan melakukan koding penelitian sebelumnya. Sebaiknya
dilakukan penentuan kriteria yang akan digunakan dalam suatu penelitian. Misal, desain penelitiannya,
jangka waktu penelitian, penulis, sumber temuan data, sampel partisipan (umur, jenis kelamin, status
ekonomi, lokasi geografi) dan outcome nya (jenis ukuran dan karekteristiknya). Beberapa informasi yang
penting untuk diketahui atau menjadi panduan dalam membuat acuan dan melakukan koding adalah
sebagai berikut:
1. Laporan (artikel penelitian),
umumnya informasi terkait laporan atau artikel penelitian tersebut dibuat dalam format tabel untuk
memudahkan proses pengkodingannya.
2. Varibel yang digunakan dalam penelitian tersebut
a. Jika laporan penelitian mendeskripsikan manipulasi eksperimental (variabel intervention),
informasi tentang kondisi yang termanipulasi
b. Jika laporan penelitaan menjelaskan variabel independen (prediktor), informasi tentang
bagaimana variabel tersebut diukur dan diperoleh
3. Setting penelitian tersebut dilakukan,
4. Karekteristik sampel dan partisipannya
5. Variabe dependen dan bagaimana variabel tersebut diukur
6. Jenis desain penelitian
7. Hasil statistiknya
sebagaimana contoh tabel sebelumnya dalam menilai setting penelitian, peneliti juga menggunakan
tabel untuk memudahkan proses pengkodingannya.
8. Karekteristik kode dan proses pengkodingannya
a. Dikenal dengan Low-Inference codes, atau karekteristik kode sederhana, seperti sebelumnya
hanya menggunakan tabel kode
b. Namun terdapat juga jenis kedua yakni High-Inference Codes atau penelaian dari orang yang
dianggap ahli terkait kumpulan temuan kode

Melatih coders
Setelah diketahui cara melakukan pengkodean, tugas peneliti selanjutnya adalah memilih dan
melatih para coders (yang akan mengkode) untuk meminimalisir kesalahan yang mugkin terjadi jika
mengkode hanya dilakukan oleh peneliti seorang diri. Beberapa langkah yang kemudian mungkin
dilakukan untuk melatih coders
1. Pilih coders dari latar belakang pengetahuan dan pengaaman yang sama
2. Buat dan lampirkan petunjuk bagimana cara melakukan koding yang benar
3. Lakukan bekerja bersama dan diskusi yang intensif dan sesekali melakukan pilot test atas pekerjaan
coders
4. Coders harus mengambil informasi berbasis penelitian yang sama sehingga diskusi menjadi wajib
dilakukan secara berulang-ulang.
Empat langkah itu menjadi penting agar reliabilitas data dapat terjaga.

Masalah-masalah dalam mengumpulkan data dari laporan penelitian

Bebrapa masalah yang ditenggarai menjadi masalah inti dalam proses pengumpulan data adalah
sebagai berikut:
1. Ketidaktelitiaan dalam melaporkan
a. Kesalahan atau tidak lengkapnya dalam melaporkan hasil statistik
b. Kesalahan atau tidak lengkapnya dalam melaporkan karekteristik penelitian
c. Seringkali terjadi kehilangan data
2. Melakukan perbandingan identifikasi independen yang kurang tepat, solusinya:
a. Menggunakan tim peneliti dapat mengurangi kekeliruannya
b. Melakukan pengkodingan berbasis unit sampel penelitian
c. Perbandingan dianggap sebagai suatu unit penelitian
d. Merubah unit analisanya
e. Melakukan penyesuaiaan statistik

Efek pengumpulan data terhadap hasil sintesis

Variasi yang berbeda yang digunakan dalam pengambilan informasi dari penelitian sebelumnya
dapat menyebabka perbedaan bagaimana data akan disajikan nantinya dan kualitas representasi data itu
sendiri. Beberapa perbedaan yang mungkin muncul adalah sebagai berikut:
1. Jika sintesis data hanya berfokus kepada bagaimana operasi suatu penelitian, kesimpulannya mungkin
akan kelihatan menjauhi hasil utama dari tujuan penelitian itu
2. Sintesis dapat menghadirkan kesimpulan yang berbeda tentang literatur penelitan dikarenakan
perbedaan akurasi pengkodingan
3. Kesimpulan dapat berbeda-beda sebab peneliti mungkin menggunkan pola atau cara berbeda dalam
melakukan pengambilan kesimpulan dari suatu hasil studi.
 CHAPTER V. TAHAP 4 MENGEVALUASI KUALITAS STUDI SEBELUMNYA

Mengevaluasi kualitas studi-studi sebelumnya sangat penting untuk melangkah llebih lanjut dala
melakukan sintesis penelitian. Beberapa hal kemudian ditenggarai sebagai masalah dalam menghakimi
kualitas penelitian.
1. Kecendrungan untuk menghakimi terlebih dahulu (atau) terdapat bias awal sebelum membaca
penelitian itu secara keseluruhan. Sehingga cara yang dapat ditempuh untuk mencegahnya
mempengaruhi kualitas penelitan adalah (a) membuat kriteria koding yang eksplisit sebelum koding
dimulai (b) libatkan peneliti lain yang bekerja secara independen.
2. Perbedaan pandang tentang kualitas penelitian antar peneliti, sama dengan solusi pertama jika masalah
ini ditemui sebaiknya menambah jumlah peneliti atau meminta salah satu peneliti untuk menengahi
3. Perbedaan melihat skala kualitas dari penelitian
4. Berdasar hanya pada satu skor untuk menampilkan kualitas penelitan, misal hanya menggunakan skala
baik dan buruk. Sehingga sebaiknyameghadirkan skala yang tidak dikotomikal
Different approaches to describing the design and implementation of studies

Pendekatan-pendekatan untuk melakukan kategorisasi metode penelitian

Dalam melakukan kategorisasi metode penelitian, peneliti sebaiknya mnentukan apa saja yang
penting untuk dikategorikan. Namun, hal ini tentu sangat bergantung dengan tujuan dari penelitian itu
sediri. Ada dua pendekatan metode yang seringkali digunakan yakni: threats-to-validity approach dan
Methods-description Approach.

Threats-To-Validity Approach
Pendekatan ini berpijak pada, asumsi bahwa perbedaan desain penelitian dapat diidentifikasikan
memiliki perbedaan ancaman atau hambatan yang terkait dengan validitas penelitiannya. Masing-masing
desain penelitian dapat dibandingkan berdasarkan kapabilitas inferentialnya. Atau dengan kata lain
menggunakan metode trianggulasi dengan penelitian lain sehingga hasilnya dapat lebih berkualitas

Methods-description Approach
Melampaui penjelasan sebelumnya, Methods-description Approach mengasumsikan bahwa
metodelah yang berperan penting dalam mengahsilkan hasil dan mempertahankan kualitas penelitian.
Sehingga yang menjadi fokus untuk dilakukan pengkategorisasian adalah metode penelitian yang dipilih
digunakan dipeneltitin sebelumnya.

A Mixed-Criteria Approach: The Study DIAD

Di tengah pro dan kontra pendekatan yang sebaiknya digunakan dalam penelitian meta analysis.
Terdapat metode poros tengah yang dikembangkan oleh beberapa ahli yang dikenaldengan nama A
Mixed-Criteria Approach: The Study DIAD (Design and Implementation Assessment Device). Metode ini
memiliki kekhasan yakni mewajibkan pengguna untuk (a) mendetailkan dan mengeksplesitkan kriteria
yang dipilih (b) mendefenisikan kriteria tersebut sebelum melakuakan studi evaluasi dan (c)
mengimplementasikan kriteria tersebut secara konsisten dalam seluruh proses studi.