Metode & Standar Bukti

Pengetahuan di sini bukan sesuatu yang harus Anda percaya begitu saja.

TheCompanipedia adalah perpustakaan pengetahuan di balik cara The Companion memahami pengalaman manusia dan memilih cara untuk meresponsnya. Ia bukan kumpulan pembenaran untuk keputusan yang sudah dibuat.

Kami berusaha membedakan apa yang cukup diketahui, apa yang masih belum pasti, apa yang sedang diperdebatkan, dan apa yang merupakan pilihan desain The Companion sendiri.

Klaim empiris harus dapat diperiksa, diperdebatkan, dan jika bukti menuntutnya, direvisi atau ditinggalkan.

Tidak semua sumber mempunyai bobot yang sama.

Satu paper tidak otomatis menjadi fakta. Kami melihat badan bukti secara lebih luas, termasuk desain penelitian, karakteristik partisipan, risiko bias, kualitas pengukuran, konsistensi antarpenelitian, ketepatan estimasi, kemungkinan publication bias (bias publikasi), replikasi, dan seberapa jauh hasil dapat diterapkan pada konteks yang berbeda.

Cochrane menggunakan GRADE untuk menilai kepastian badan bukti melalui domain seperti risk of bias (risiko bias), inconsistency (inkonsistensi), indirectness (ketidaklangsungan), imprecision (ketidakpresisian), dan publication bias. TheCompanipedia tidak mengklaim memakai GRADE secara formal, tetapi prinsip transparansinya membantu kami menghindari penilaian yang hanya berdasarkan kesan.

Korelasi bukan penyebab.

Jika dua hal sering muncul bersama, itu belum berarti salah satunya menyebabkan yang lain. Bahasa kausal membutuhkan desain penelitian yang lebih mampu membedakan sebab dan akibat, seperti eksperimen, intervensi, desain longitudinal tertentu, eksperimen alami, atau kombinasi bukti yang saling menguatkan.

Jika bukti hanya menunjukkan hubungan, kami akan menyebutnya hubungan.

Neurosains tidak mendapat perlakuan istimewa.

Penjelasan tidak menjadi lebih benar hanya karena menyebut otak. Data pencitraan otak dapat memberi informasi penting, tetapi interpretasinya mempunyai batas. Salah satu risiko adalah reverse inference (inferensi terbalik), yaitu menyimpulkan proses psikologis tertentu hanya dari aktivasi wilayah atau jaringan otak tertentu.

Eksperimen juga menunjukkan bahwa informasi neurosains yang tidak relevan tetap dapat membuat sebuah penjelasan terasa lebih memuaskan. Karena itu, neurosains hanya dimasukkan ketika benar-benar menambah daya penjelasan.

Filsafat bukan eksperimen.

Pertanyaan tentang makna, tanggung jawab, agency (kemampuan bertindak dan memilih), penderitaan, kebebasan, penerimaan, atau kehidupan yang baik tidak selalu dapat diselesaikan melalui eksperimen. Ketika suatu gagasan berasal dari filsafat, kami akan mengatakannya sebagai filsafat.

Sebuah argumen filosofis dapat sangat bernilai tanpa berpura-pura menjadi hasil laboratorium.

Yang ditemukan penelitian dan yang dipilih The Companion adalah dua hal berbeda.

Sebuah penelitian dapat menunjukkan bahwa proses psikologis tertentu berkaitan dengan outcome tertentu. Itu tidak otomatis membuktikan bahwa satu desain percakapan tertentu merupakan respons terbaik.

Yang cukup diketahui

Apa yang relatif dapat dipertanggungjawabkan berdasarkan bukti.

Yang belum diketahui

Apa yang masih belum dapat disimpulkan, masih diperdebatkan, atau belum diuji.

Yang dipilih The Companion

Bagaimana pengetahuan tersebut diterjemahkan menjadi keputusan desain produk. Bagian ini tetap terbuka untuk diuji dan dikritik.

Kami mencari bukti yang dapat membantah, bukan hanya membenarkan.

Jika kami sudah menyukai suatu cara kerja, sangat mudah mencari paper yang membuat keputusan itu terlihat benar. Karena itu pertanyaannya bukan hanya “apa yang mendukung gagasan ini?”, tetapi juga “apa bukti terbaik yang menentangnya?”

Artikel harus berusaha menemukan hasil negatif, kegagalan replikasi, kritik metodologis, teori alternatif, dan batas generalisasi. Kalau bukti yang berlawanan cukup kuat, kesimpulannya harus berubah.

Apa yang dapat membuat kami berubah pikiran?

Setiap artikel mempunyai bagian yang menjelaskan kondisi apa yang dapat melemahkan atau membatalkan kesimpulannya. Sebuah klaim yang dapat menyesuaikan diri dengan semua kemungkinan hasil hampir tidak dapat diuji.

Ilmu perilaku dan pengalaman manusia sering kompleks. Namun harus tetap mungkin untuk mengatakan: jika pola bukti tertentu ditemukan secara konsisten, kesimpulan kami harus berubah.

Penelitian asli The Companion mempunyai standar yang berbeda.

Jika suatu hari The Companion meneliti sistemnya sendiri, bukti dari literatur lain tidak boleh dipakai sebagai pengganti pengujian produk. Jika sesuai, hipotesis dan analisis utama akan ditetapkan sebelum data dianalisis melalui preregistration (prapendaftaran rencana penelitian).

Center for Open Science menjelaskan preregistration sebagai cara membuat rencana penelitian lebih transparan dan membantu membedakan analisis yang direncanakan dari eksplorasi setelah hasil diketahui. Hasil positif, negatif, nol, atau tidak meyakinkan tetap merupakan hasil.

Koreksi adalah bagian dari perpustakaan.

Artikel ilmiah dapat menerima correction (koreksi), corrigendum (koreksi resmi), expression of concern (pernyataan keprihatinan), atau retraction (pencabutan). Referensi penting akan diperiksa kembali secara berkala.

Retraction Watch sendiri menjelaskan bahwa basis datanya sangat luas untuk retraction, tetapi tidak dimaksudkan lengkap untuk seluruh correction atau expression of concern. Karena itu pengecekan tidak boleh bergantung pada satu basis data saja.

Jika sumber penting berubah status, kami akan menilai kembali dampaknya terhadap artikel.

Riwayat perubahan dan kritik publik.

Setiap artikel memiliki tanggal diterbitkan, tanggal terakhir ditinjau, versi, dan riwayat perubahan untuk revisi substantif. Koreksi ejaan tidak memerlukan sejarah panjang. Perubahan pada klaim, kekuatan bukti, interpretasi, atau referensi penting memerlukannya.

TheCompanipedia tidak dibangun untuk membuat The Companion terlihat benar. Ia dibangun agar ada cara untuk mengetahui ketika The Companion salah.

Kritik yang menunjukkan paper terlewat, salah interpretasi, kesalahan statistik, konflik bukti, atau masalah logika dipersilakan.

Sumber untuk halaman metode