Program Studi S1 Administrasi Kesehatan
BAB X — EVALUASI, AUDIT, DAN PELAPORAN PROYEK KESEHATAN
Modul Ajar Pertemuan 10 | Administrasi Proyek Kesehatan (MAIK1025142)
Program Studi S1 Administrasi Kesehatan — Fakultas Ilmu Kesehatan
Universitas Muhammadiyah Sidenreng Rappang
Dosen pengampu: Sunandar Said, S.Kep., Ns., M.Kes.
Gambar 10.1. Ilustrasi aktivitas evaluasi proyek kesehatan berbasis sekolah (ilustrasi orisinal untuk bahan ajar).
Posisi dalam RPS. RPS Administrasi Proyek Kesehatan mengelompokkan pertemuan 9–10 dalam rangkaian monitoring, pengendalian, evaluasi, audit, dan pelaporan proyek. Bab IX membahas pemantauan kemajuan serta tindakan korektif. Bab X memusatkan pembahasan pada cara menilai keberhasilan proyek, memeriksa bukti pelaksanaan, menyusun laporan akhir, dan menggunakan temuan sebagai dasar keputusan. Materi tambahan dari CDC (2024) dan OECD digunakan sebagai pengayaan konseptual, bukan sebagai pengganti ketentuan RPS.
A. Deskripsi dan orientasi pembelajaran
Proyek kesehatan dibentuk untuk menghasilkan perubahan nyata: meningkatkan akses terhadap pelayanan, memperbaiki mutu layanan, membangun sarana, atau membantu masyarakat menerapkan perilaku hidup sehat. Karena itu, berakhirnya seluruh jadwal kegiatan belum otomatis berarti proyek berhasil. Manajer proyek harus dapat menjawab apakah keluaran yang dijanjikan benar-benar dihasilkan, apakah sumber daya digunakan secara dapat dipertanggungjawabkan, apakah kelompok sasaran memperoleh manfaat, dan apakah hasil kegiatan dapat dipertahankan setelah dukungan proyek berakhir.
Pertanyaan tersebut dijawab melalui evaluasi proyek. Evaluasi mengubah catatan pelaksanaan menjadi penilaian yang beralasan dan dapat diuji. Dalam proses ini, data monitoring menjadi bahan penting, tetapi tidak cukup jika tidak dibandingkan dengan tujuan, indikator, standar, dan konteks kegiatan. Evaluator perlu melihat seluruh rangkaian proyek: kebutuhan awal, perencanaan, pelaksanaan, hasil, hambatan, dan konsekuensi yang muncul.
Evaluasi juga perlu dilengkapi dengan audit proyek. Audit memeriksa apakah pelaksanaan dan pelaporan proyek didukung bukti yang sah serta mematuhi kriteria, prosedur, dan persyaratan yang berlaku. Temuan audit dapat berkaitan dengan dokumen yang belum lengkap, pengendalian internal yang lemah, ketidakpatuhan prosedur, ataupun ketidaksesuaian antara laporan dan kondisi lapangan. Audit bukan semata pencarian kesalahan individu; fungsi pembelajarannya ialah meningkatkan keandalan informasi serta mencegah pengulangan masalah.
Hasil evaluasi dan audit harus dikomunikasikan melalui laporan akhir proyek yang jelas, objektif, dan berorientasi tindakan. Dalam administrasi kesehatan, laporan akhir membantu pimpinan Puskesmas, rumah sakit, dinas kesehatan, mitra sekolah, atau pemberi dana memutuskan apakah program perlu dilanjutkan, disesuaikan, diperluas, atau dihentikan.
Capaian pembelajaran khusus
Setelah mempelajari Bab X, mahasiswa diharapkan mampu menjelaskan pengertian dan tujuan evaluasi proyek, membedakan penilaian proses, keluaran, hasil, serta dampak; menyusun pertanyaan dan indikator evaluasi; menjelaskan prosedur audit proyek; menganalisis data capaian, biaya, dan mutu; merumuskan kesimpulan beserta keterbatasannya; serta menyusun laporan akhir berikut rencana tindak lanjut yang terukur.
Kata kunci: evaluasi proyek, output, outcome, dampak, efisiensi, efektivitas, audit, bukti, tindak lanjut, laporan akhir, keberlanjutan.
B. Dari monitoring menuju evaluasi
Pada pertemuan sebelumnya, monitoring digunakan untuk membandingkan target dengan realisasi dan menemukan penyimpangan selama proyek berlangsung. Ketika pemantauan menunjukkan keterlambatan, manajer proyek dapat mengubah jadwal, mengatur ulang tenaga, atau memperbaiki koordinasi. Pengendalian berorientasi pada tindakan agar pelaksanaan kembali sesuai rencana.
Evaluasi memiliki pertanyaan yang lebih luas. Evaluasi menilai apakah pilihan kegiatan memang tepat untuk masalah kesehatan yang ingin ditangani, apakah pelaksanaannya bermutu, hasil apa yang timbul, siapa yang menerima manfaat, dan apakah perbaikan yang teramati layak dikaitkan dengan proyek. Dengan demikian, proyek dapat selesai secara administratif tetapi belum sepenuhnya berhasil secara substantif. Sebaliknya, proyek yang tidak mencapai seluruh angka target mungkin tetap menghasilkan pembelajaran penting dan perubahan positif, meskipun hal itu tidak menghapus kekurangan pelaksanaannya.
| Proses | Pertanyaan utama | Contoh bukti | Keputusan yang dihasilkan |
|---|---|---|---|
| Monitoring | Sejauh mana kegiatan berjalan sesuai rencana? | Dashboard mingguan, daftar hadir, jadwal | Menentukan aspek yang perlu diawasi |
| Pengendalian | Apa penyimpangan yang harus diperbaiki sekarang? | Catatan risiko, rapat koordinasi | Menetapkan tindakan korektif |
| Evaluasi | Apakah proyek relevan, berhasil, efisien, dan bermanfaat? | Data hasil, survei, observasi, wawancara | Menilai capaian dan menyusun rekomendasi |
| Audit | Apakah bukti dan proses memenuhi kriteria yang ditetapkan? | Kuitansi, kontrak, berita acara, log kegiatan | Menetapkan temuan dan perbaikan kepatuhan |
| Pelaporan akhir | Bagaimana hasil dan tindak lanjut dikomunikasikan? | Ringkasan temuan, tabel, lampiran | Persetujuan, penutupan, kelanjutan |
Perbedaan tersebut penting agar mahasiswa tidak keliru menganggap laporan jumlah peserta sebagai bukti perubahan perilaku. Jumlah peserta adalah keluaran kegiatan, sementara perubahan kebiasaan memerlukan pengukuran hasil yang berbeda.
C. Konsep dan tujuan evaluasi proyek kesehatan
Evaluasi proyek kesehatan adalah proses penilaian yang sistematis terhadap rancangan, pelaksanaan, keluaran, dan hasil suatu proyek berdasarkan pertanyaan serta kriteria yang disepakati. Penilaian yang baik menjelaskan bukan hanya berapa capaian yang diperoleh, melainkan juga mengapa hasil itu terjadi, siapa yang diuntungkan atau belum terjangkau, dan apa yang perlu dilakukan setelah proyek selesai.
Tujuan evaluasi dapat bersifat pertanggungjawaban, pembelajaran, maupun pengambilan keputusan. Dalam fungsi pertanggungjawaban, evaluasi menunjukkan apakah kegiatan dilaksanakan sesuai mandat dan apakah dana menghasilkan keluaran yang wajar. Dalam fungsi pembelajaran, evaluasi mengidentifikasi bagian proyek yang efektif serta hambatan yang perlu diperbaiki. Dalam fungsi keputusan, evaluasi menyediakan dasar untuk kelanjutan proyek atau penyusunan intervensi berikutnya.
Evaluasi hendaknya dilakukan dengan memperhatikan objektivitas, keterbukaan metode, kelayakan pengukuran, keselamatan peserta, dan pemanfaatan temuan. Kerangka CDC Program Evaluation Framework 2024 menempatkan enam tahapan yang saling terkait, mulai dari memahami konteks hingga menggunakan hasil untuk tindakan. Kerangka tersebut juga menekankan kolaborasi, keadilan, kualitas bukti, transparansi, dan etika.[1]
Gambar 10.2. Alur enam tahap evaluasi proyek kesehatan, disederhanakan untuk pembelajaran dari CDC (2024).
D. Model logika: menghubungkan kegiatan dengan hasil
Sebelum mengukur keberhasilan, pengelola perlu menjelaskan bagaimana proyek diharapkan menghasilkan perubahan. Alat yang membantu proses tersebut adalah model logika (logic model). Model ini memetakan hubungan antara masukan, aktivitas, keluaran, hasil, dan dampak. Urutan tersebut membantu evaluator memilih indikator yang sesuai dengan tingkat perubahan yang ingin dinilai.
Masukan (input) mencakup anggaran, tenaga, sarana, bahan, waktu, dan dukungan mitra. Aktivitas (activities) adalah tindakan yang dilakukan, misalnya pelatihan guru atau edukasi siswa. Keluaran (output) merupakan produk langsung kegiatan, misalnya jumlah sekolah terjangkau dan sarana cuci tangan terpasang. Hasil (outcome) menggambarkan perubahan yang lebih dekat dengan penerima manfaat, seperti meningkatnya pengetahuan atau praktik CTPS. Dampak (impact) merujuk pada perubahan jangka panjang yang lebih luas, misalnya penurunan kejadian penyakit yang berhubungan dengan higiene.
Gambar 10.3. Model logika sederhana proyek edukasi CTPS di sekolah.
Hubungan dalam model logika adalah hipotesis program, bukan bukti bahwa setiap perubahan disebabkan oleh proyek. Pengetahuan yang meningkat setelah penyuluhan, misalnya, mungkin juga dipengaruhi kurikulum sekolah, kampanye media, atau kegiatan lain. Untuk menyatakan pengaruh kausal diperlukan rancangan evaluasi yang sesuai, seperti kelompok pembanding atau pendekatan lain yang dapat mengurangi penjelasan alternatif.
Memilih indikator yang benar
Penyusunan indikator harus mengikuti tujuan yang akan dinilai. Jika pertanyaannya adalah apakah proyek terlaksana, indikator output dapat mencukupi. Jika pertanyaannya apakah perilaku siswa membaik, evaluator memerlukan indikator outcome. Jika pertanyaannya apakah penyakit menurun karena proyek, pengukuran harus mempertimbangkan lama pengamatan, pembanding, dan faktor perancu.
| Tingkat model logika | Contoh indikator CTPS | Sumber data | Batasan interpretasi |
|---|---|---|---|
| Input | Rupiah anggaran, jumlah fasilitator | RAB, daftar penugasan | Tidak menunjukkan mutu kegiatan |
| Proses | Persentase sesi terlaksana sesuai prosedur | Checklist observasi | Tidak otomatis menunjukkan perubahan perilaku |
| Output | Jumlah siswa teredukasi; sarana terpasang | Daftar hadir, berita acara | Mengukur keluaran langsung |
| Outcome | Proporsi siswa mempraktikkan CTPS dengan benar | Observasi terstruktur | Perlu metode pengamatan konsisten |
| Dampak | Tren kejadian diare terkait higiene | Sistem surveilans, studi | Tidak dapat diatribusikan dari data sederhana |
E. Jenis dan waktu evaluasi
Jenis evaluasi dapat dibedakan berdasarkan kapan penilaian dilakukan dan aspek apa yang dikaji. Evaluasi awal atau formatif membantu memperbaiki rancangan sebelum implementasi penuh. Dalam proyek CTPS, penilaian formatif dapat menanyakan apakah sekolah memiliki sumber air, apakah materi sesuai usia siswa, dan apakah jadwal kegiatan sesuai kalender akademik.
Evaluasi proses dilaksanakan ketika atau setelah kegiatan berlangsung untuk menilai kesesuaian metode, mutu implementasi, jangkauan peserta, dan hambatan. Evaluasi proses penting karena dua proyek yang memiliki jumlah peserta sama dapat berbeda dalam kualitas pelaksanaan. Penyuluhan satu arah tanpa praktik langsung, misalnya, mungkin memiliki keluaran administrasi serupa dengan kegiatan demonstrasi, tetapi pengalaman belajarnya berbeda.
Evaluasi akhir atau sumatif digunakan untuk menilai capaian proyek secara keseluruhan. Evaluasi ini meninjau output, hasil yang telah dapat diukur, biaya, dan keberlanjutan. Namun, tidak semua perubahan dapat dinilai tepat pada hari proyek berakhir. Perilaku yang bertahan dan dampak kesehatan jangka panjang mungkin memerlukan evaluasi tindak lanjut setelah beberapa bulan.
Karena itu, evaluasi outcome dan dampak bukan sekadar tahapan waktu. Keduanya dibedakan terutama berdasarkan jenis perubahan yang diukur. Evaluasi outcome bisa dilakukan saat proyek berakhir atau setelahnya; evaluasi dampak sering memerlukan waktu dan desain penelitian yang lebih kuat.
F. Kriteria keberhasilan proyek kesehatan
Keberhasilan tidak cukup dinilai dari satu angka. Suatu proyek mungkin mencapai seluruh target jumlah peserta tetapi tidak menjangkau sekolah terpencil, atau berhasil menghemat total anggaran namun menghasilkan biaya per penerima manfaat yang lebih tinggi. Penilaian memerlukan beberapa sudut pandang.
Sebagai pengayaan, OECD mengembangkan enam kriteria evaluasi yang dapat digunakan secara selektif menurut kebutuhan: relevansi, koherensi, efektivitas, efisiensi, dampak, dan keberlanjutan.[2] Kriteria tersebut tidak harus diterapkan secara mekanis pada setiap proyek; evaluator memilih pertanyaan yang paling bermanfaat untuk keputusan yang dihadapi.
Relevansi menilai kesesuaian proyek dengan kebutuhan sasaran. Edukasi CTPS relevan apabila terdapat masalah perilaku higiene dan fasilitas pendukung yang dapat diatasi. Koherensi menilai kesesuaian proyek dengan kebijakan serta kegiatan lain agar tidak terjadi tumpang tindih atau pertentangan. Efektivitas menilai tercapai atau tidaknya tujuan. Efisiensi mengkaji hubungan antara sumber daya dan hasil yang diperoleh. Dampak memeriksa perubahan yang lebih luas, termasuk yang tidak direncanakan. Keberlanjutan menilai kemungkinan manfaat tetap berlangsung setelah proyek selesai.
Dalam pelayanan kesehatan, evaluasi juga memperhatikan pemerataan manfaat, keamanan, dan mutu. Sebagai contoh, rata-rata capaian 90% belum cukup menggambarkan apakah kelompok paling rentan menerima layanan secara adil. Pencapaian siswa di sekolah pusat kota sebaiknya dibandingkan dengan sekolah yang sulit dijangkau bila data tersedia.
Menetapkan standar dan batas keberhasilan
Standar keberhasilan harus ditetapkan sebelum atau setidaknya dijelaskan secara transparan saat evaluasi, bukan dipilih setelah melihat hasil agar proyek tampak berhasil. Untuk latihan mahasiswa, dapat digunakan ambang ilustratif: tercapainya sekurang-kurangnya 95% target keluaran, kesesuaian standar mutu, dokumentasi utama lengkap, dan tindak lanjut disetujui. Angka 95% ini hanya contoh kriteria kelas, bukan standar resmi RPS atau ketentuan nasional. Pada proyek sebenarnya, ambang harus mengikuti dokumen perencanaan, kebutuhan layanan, kontrak, dan risiko.
G. Prosedur melakukan evaluasi proyek
Evaluasi dapat dilakukan melalui enam rangkaian pekerjaan yang berulang. Pertama, mengenali konteks proyek: alasan program dibentuk, karakteristik sasaran, penanggung jawab, ketersediaan bukti, serta faktor yang memengaruhi implementasi. Kedua, mendeskripsikan intervensi, termasuk input, kegiatan, keluaran, outcome yang diharapkan, dan keterkaitan antarbagian. Model logika dipakai untuk memeriksa apakah tujuan realistis terhadap kegiatan yang direncanakan.
Ketiga, evaluator merumuskan pertanyaan evaluasi dan rancangan pengumpulan bukti. Pertanyaan harus jelas, misalnya: “Berapa persen sekolah sasaran yang terjangkau?”, “Apakah semua fasilitas CTPS berfungsi?”, “Apakah praktik CTPS siswa lebih baik setelah intervensi?”, atau “Apa hambatan implementasi di sekolah pinggiran?”. Setiap pertanyaan memerlukan indikator, sumber data, metode, waktu, dan batasan analisis.
Keempat, evaluator mengumpulkan bukti yang dapat dipercaya melalui pemeriksaan dokumen, observasi, survei, wawancara, dan diskusi. Data administrasi harus diverifikasi, pengukuran dilakukan dengan prosedur konsisten, serta keamanan informasi siswa dijaga. Kelima, evaluator menganalisis dan menafsirkan hasil dengan menghubungkan angka, konteks, dan kualitas data. Persentase capaian, perbandingan kelompok, temuan mutu, dan penjelasan pelaksana perlu dipertimbangkan bersama.
Keenam, evaluator menggunakan hasil untuk membuat rekomendasi dengan penanggung jawab dan tenggat. Temuan yang hanya berhenti menjadi dokumen tidak cukup. Sekolah atau Puskesmas perlu mengetahui tindakan yang harus dilakukan, sumber daya yang tersedia, dan bagaimana perbaikan akan diverifikasi.
Contoh matriks rencana evaluasi
| Pertanyaan evaluasi | Indikator | Sumber & metode | Waktu | Penanggung jawab |
|---|---|---|---|---|
| Apakah jangkauan sekolah tercapai? | Sekolah terjangkau / target | Laporan, verifikasi sekolah | Akhir proyek | Koordinator lapangan |
| Apakah sarana berfungsi? | Sarana berfungsi / target | Observasi checklist | Akhir dan tindak lanjut | Tim teknis |
| Apakah praktik CTPS meningkat? | Proporsi praktik benar | Observasi terstruktur | Awal dan akhir | Tim evaluasi |
| Apakah dana dapat dipertanggungjawabkan? | Dokumen lengkap / diuji | Audit berkas & rekonsiliasi | Akhir proyek | Tim administrasi/audit |
| Apakah manfaat berlanjut? | Guru penanggung jawab dan rencana perawatan | Wawancara, surat komitmen | Pasca-proyek | Puskesmas & sekolah |
H. Metode, mutu data, dan etika evaluasi
Metode kuantitatif berguna untuk menghitung capaian, perbedaan nilai, dan tren. Daftar hadir dapat menjawab jumlah peserta; instrumen observasi dapat memperkirakan proporsi praktik CTPS benar. Metode kualitatif membantu menjelaskan alasan di balik angka melalui pengalaman guru, siswa, petugas, dan pengelola. Kombinasi keduanya sering lebih informatif karena angka menunjukkan pola, sedangkan wawancara membantu menafsirkan mekanismenya.
Dalam menyusun kesimpulan, evaluator perlu menilai validitas indikator, kelengkapan rekaman, konsistensi pelaksanaan survei, serta potensi bias. Misalnya, peningkatan hasil pengamatan dapat disebabkan siswa mengetahui sedang diamati (Hawthorne effect), perbedaan sampel sebelum dan sesudah, perubahan musim, atau kegiatan kesehatan lain. Jika evaluasi hanya menggunakan desain sebelum–sesudah tanpa pembanding, kesimpulan yang tepat adalah “terdapat peningkatan teramati”, bukan “proyek terbukti menyebabkan peningkatan”.
Etika penting terutama apabila evaluasi melibatkan anak. Tim perlu memperoleh izin sesuai prosedur yang berlaku, menyampaikan tujuan pengumpulan informasi, membatasi data pribadi, dan melaporkan hasil secara agregat. Foto siswa, informasi kesehatan personal, atau identitas lain tidak boleh disebarluaskan tanpa dasar izin yang sesuai. Data kelompok rentan tidak boleh digunakan untuk memberi stigma terhadap sekolah atau masyarakat.
I. Audit proyek: memastikan kepatuhan dan keandalan bukti
Audit proyek adalah pemeriksaan sistematis terhadap kegiatan, catatan, dan pengendalian berdasarkan kriteria yang telah ditentukan. Dalam praktik proyek kesehatan, audit dapat berfokus pada administrasi, kepatuhan prosedur, keuangan, pengadaan, pelaksanaan teknis, atau mutu bukti. Kebutuhan auditor dan kewenangannya mengikuti tata kelola institusi; tidak setiap pemeriksaan kelas setara dengan audit resmi oleh auditor berwenang.
Audit berbeda dari evaluasi. Evaluasi menilai nilai guna dan keberhasilan intervensi; audit terutama menguji kesesuaian bukti dan proses dengan kriteria. Keduanya dapat saling melengkapi. Evaluasi mungkin menemukan bahwa cakupan edukasi tinggi, sedangkan audit menemukan bahwa beberapa daftar hadir tidak memiliki bukti yang memadai. Kedua informasi harus diungkapkan agar kesimpulan tidak melebihi kekuatan data.
Audit dilaksanakan melalui penetapan ruang lingkup, penyusunan daftar kriteria, pengumpulan dan pengujian bukti, penyampaian temuan, permintaan tanggapan pengelola, serta verifikasi tindak lanjut. Kriteria audit harus eksplisit, misalnya ketentuan dokumen pertanggungjawaban, prosedur pengadaan, atau persyaratan berita acara serah terima. Temuan tidak boleh menyatakan “pelanggaran” bila kriteria belum jelas atau bukti tidak mencukupi.
Gambar 10.4. Alur praktis audit, respons, dan verifikasi tindak lanjut.
Cara menulis temuan audit
Temuan yang dapat ditindaklanjuti sebaiknya memuat kriteria (apa yang dipersyaratkan), kondisi (apa yang ditemukan), sebab (mengapa masalah terjadi, bila terkonfirmasi), akibat/risiko (mengapa hal ini penting), dan rekomendasi (perbaikan yang diperlukan). Sebab yang belum diverifikasi harus disebut sebagai kemungkinan, bukan fakta.
Contoh: dalam simulasi terdapat 40 dokumen pengeluaran yang menjadi sampel audit, tetapi 3 dokumen belum memiliki bukti pendukung lengkap. Kondisi ini menunjukkan kelengkapan dokumen 37/40 = 92,5%. Auditor perlu memastikan persyaratan bukti yang berlaku, meminta dokumen yang kurang, dan memeriksa kembali sebelum menutup temuan. Angka 92,5% tidak serta-merta membuktikan adanya penyalahgunaan dana; angka tersebut menggambarkan kelengkapan bukti pada sampel yang diuji.
Daftar periksa audit sederhana
| Area pemeriksaan | Pertanyaan uji | Bukti minimum yang diperiksa |
|---|---|---|
| Perencanaan | Apakah tujuan, target, dan jadwal disetujui? | Dokumen rencana, RAB, surat tugas |
| Pelaksanaan | Apakah kegiatan dilaksanakan dan diverifikasi? | Daftar hadir, log kegiatan, dokumentasi sah |
| Pengeluaran | Apakah transaksi didukung bukti memadai? | Kuitansi, invoice, bukti pembayaran |
| Pengadaan | Apakah barang sesuai kebutuhan dan spesifikasi? | Kontrak/pesanan, berita acara, pemeriksaan fisik |
| Mutu | Apakah hasil memenuhi standar teknis? | Checklist mutu, hasil uji, catatan keluhan |
| Penutupan | Apakah aset, dokumen, dan kewajiban diserahterimakan? | BAST, daftar aset, laporan akhir |
J. Studi kasus terintegrasi: evaluasi akhir proyek CTPS
Studi kasus ini melanjutkan proyek edukasi CTPS di sekolah pada Bab IX. Proyek dirancang selama delapan minggu untuk menjangkau sepuluh sekolah, seribu siswa, empat puluh guru, dan memasang sepuluh sarana CTPS dengan anggaran Rp50.000.000. Pada minggu keempat, hasil monitoring menunjukkan keterlambatan beberapa indikator dan pengeluaran melebihi rencana kumulatif saat itu. Tim kemudian melakukan koordinasi ulang dan menyesuaikan jadwal kegiatan.
Saat penutupan, tim memperoleh data berikut. Semua angka bersifat simulatif untuk pembelajaran, bukan data penelitian atau laporan institusi yang sebenarnya.
| Indikator akhir | Target | Realisasi | Tingkat capaian |
|---|---|---|---|
| Sekolah mendapatkan kegiatan | 10 | 9 | 90% |
| Siswa mengikuti edukasi | 1.000 | 930 | 93% |
| Guru mengikuti pelatihan | 40 | 38 | 95% |
| Sarana CTPS terpasang | 10 | 9 | 90% |
| Sarana CTPS yang berfungsi saat pemeriksaan | 10 | 8 | 80% |
| Lama proyek | 8 minggu | 9 minggu | 1 minggu terlambat |
| Total pengeluaran | Rp50.000.000 (pagu) | Rp48.000.000 | 96% dari pagu |
Gambar 10.5. Ilustrasi tingkat pencapaian empat keluaran utama proyek CTPS.
1. Analisis efektivitas keluaran
Empat keluaran utama tidak semuanya memenuhi target 100%. Sekolah yang dijangkau baru sembilan dari sepuluh, artinya satu sekolah belum mendapat layanan. Jumlah siswa teredukasi mencapai 93%; guru terlatih 95%; dan sarana terpasang 90%. Jika menggunakan ambang latihan 95%, hanya indikator guru terlatih yang memenuhi ambang tersebut, sedangkan lainnya memerlukan tindak lanjut. Kesimpulan ini bergantung pada ambang latihan, bukan standar yang ditetapkan RPS.
Mutu keluaran perlu diperiksa lebih jauh. Dari sembilan sarana yang terpasang, hanya delapan berfungsi saat pemeriksaan. Dengan demikian, tingkat fungsi di antara sarana terpasang ialah 8/9 × 100% = 88,9%, sedangkan tingkat fungsi terhadap target awal adalah 8/10 × 100% = 80%. Kedua angka sama-sama benar tetapi menjawab pertanyaan berbeda. Laporan harus selalu menyebutkan penyebut (denominator) yang dipakai.
2. Analisis waktu dan biaya
Durasi proyek mencapai sembilan minggu dibandingkan rencana delapan minggu, sehingga terjadi keterlambatan satu minggu, setara dengan 12,5% dari durasi rencana. Total pengeluaran sebesar Rp48.000.000 berada di bawah pagu Rp50.000.000. Hal ini berarti terdapat sisa pagu Rp2.000.000, tetapi belum membuktikan bahwa proyek efisien.
Perhitungan biaya per siswa yang benar-benar teredukasi adalah Rp48.000.000 ÷ 930 = sekitar Rp51.613 per siswa. Biaya rencana adalah Rp50.000.000 ÷ 1.000 = Rp50.000 per siswa. Karena keluaran lebih rendah daripada target, biaya aktual per siswa justru sekitar 3,2% lebih tinggi daripada rencana, meskipun total pengeluaran lebih rendah. Contoh ini menunjukkan pentingnya menilai biaya bersama keluaran dan mutu layanan.
Perhitungan sederhana tersebut belum memasukkan perbedaan intensitas layanan, biaya sarana, waktu guru, maupun manfaat yang mungkin berlanjut. Karena itu, ia lebih tepat disebut biaya rata-rata per peserta daripada analisis efektivitas biaya yang lengkap.
3. Analisis hasil (outcome)
Tim melakukan dua pengamatan praktik CTPS pada dua waktu: sebelum kegiatan, sebanyak 156 dari 400 siswa teramati mempraktikkan CTPS dengan benar; setelah kegiatan, sebanyak 260 dari 400 siswa memenuhi kriteria. Proporsi praktik benar meningkat dari 39% menjadi 65%, atau 26 poin persentase. Karena sampel dua pengamatan tidak dijamin identik dan tidak ada kelompok pembanding, temuan tersebut bersifat deskriptif. Data ini mendukung pernyataan adanya peningkatan yang teramati, tetapi tidak cukup untuk menetapkan perubahan sebagai akibat kausal dari proyek.
Untuk menguatkan evaluasi, tim sebaiknya menjelaskan bagaimana sampel dipilih, apakah prosedur observasi sama pada kedua waktu, serta kegiatan lain yang mungkin memengaruhi perilaku siswa. Pengamatan lanjutan setelah beberapa bulan juga bermanfaat untuk mengetahui apakah perilaku CTPS bertahan.
4. Analisis pemerataan dan keberlanjutan
Dari enam sekolah di area mudah dijangkau, seluruhnya memperoleh kegiatan. Dari empat sekolah yang lebih terpencil, baru tiga sekolah mendapat kegiatan. Cakupan sekolah area mudah dijangkau menjadi 100%, sedangkan area terpencil 75%. Perbedaan tersebut menunjukkan prioritas tindak lanjut agar sekolah yang belum terjangkau tidak tertinggal.
Keberlanjutan juga belum dapat dianggap terjamin hanya karena sebagian sarana terpasang. Puskesmas dan sekolah perlu menyepakati siapa yang menyediakan sabun, siapa yang merawat fasilitas, bagaimana guru mengintegrasikan praktik CTPS ke rutinitas, dan bagaimana sekolah melaporkan kerusakan. Tanpa pengelolaan pasca-proyek, hasil yang terlihat pada hari penutupan dapat menurun.
5. Integrasi temuan audit
Simulasi pemeriksaan dokumen menunjukkan 37 dari 40 dokumen pengeluaran yang diperiksa telah lengkap. Tiga dokumen membutuhkan pelengkapan bukti sesuai kriteria yang digunakan. Dengan demikian, tim tidak boleh menyatakan seluruh pertanggungjawaban sudah selesai sebelum tindak lanjut diperiksa. Status yang lebih tepat adalah laporan evaluasi selesai, sedangkan sebagian tindak lanjut administrasi masih terbuka.
6. Kesimpulan studi kasus
Proyek menunjukkan keluaran yang mendekati sebagian besar target dan peningkatan praktik CTPS yang teramati. Namun, terdapat sekolah yang belum terjangkau, sarana yang belum berfungsi, keterlambatan pelaksanaan, biaya per peserta lebih tinggi daripada rencana, serta dokumen audit yang belum lengkap. Kesimpulan yang adil adalah proyek menghasilkan kemajuan, tetapi belum sepenuhnya memenuhi seluruh sasaran dan persyaratan penutupan. Karena itu, perbaikan fasilitas, jangkauan sekolah terpencil, penyelesaian dokumen, serta pemantauan perilaku lanjutan perlu ditetapkan secara tertulis.
K. Menyusun laporan evaluasi dan laporan akhir proyek
Laporan akhir adalah dokumen pengambilan keputusan, bukan sekadar kumpulan foto kegiatan. Pembaca harus dapat mengetahui masalah yang ingin diatasi, apa yang direncanakan, apa yang benar-benar dilakukan, hasil yang diperoleh, bagaimana hasil tersebut diukur, apa keterbatasannya, serta tindak lanjut yang dianjurkan. Laporan yang terlalu panjang tanpa ringkasan kesimpulan dapat menyulitkan pimpinan; laporan yang terlalu singkat tanpa bukti juga dapat mengurangi kredibilitas.
Struktur yang dianjurkan untuk laporan akhir proyek kesehatan adalah sebagai berikut. Ringkasan eksekutif memuat tujuan, metode penilaian, temuan paling penting, masalah yang tersisa, dan keputusan yang diminta. Pendahuluan menjelaskan kebutuhan dan sasaran. Deskripsi proyek menguraikan kegiatan, wilayah, jadwal, anggaran, dan pihak yang terlibat. Metode evaluasi menjelaskan indikator, sumber data, cara analisis, serta keterbatasan. Hasil menyajikan pencapaian, mutu, biaya, pemerataan, dan temuan audit. Pembahasan menafsirkan mengapa pencapaian terjadi dan membandingkannya dengan tujuan. Kesimpulan dan rekomendasi harus dapat ditindaklanjuti. Lampiran memuat instrumen, matriks data, bukti kegiatan, dan daftar aset sesuai kebutuhan.
Contoh ringkasan eksekutif berdasarkan simulasi
Ringkasan eksekutif (contoh). Proyek edukasi CTPS direncanakan berlangsung delapan minggu pada sepuluh sekolah. Pada penutupan minggu kesembilan, kegiatan menjangkau sembilan sekolah dan 930 siswa, melatih 38 guru, serta memasang sembilan sarana CTPS; delapan sarana berfungsi saat diperiksa. Total biaya aktual Rp48.000.000 dari pagu Rp50.000.000. Pengamatan praktik CTPS menunjukkan peningkatan deskriptif dari 39% menjadi 65%, tetapi rancangan pengamatan tidak mendukung klaim kausal. Satu sekolah terpencil belum terjangkau, satu sarana terpasang belum berfungsi, dan tiga dokumen pengeluaran masih memerlukan pelengkapan. Direkomendasikan penuntasan kegiatan tertinggal, perbaikan sarana, verifikasi dokumen, serta evaluasi keberlanjutan bersama sekolah dan Puskesmas.
Perhatikan bahwa ringkasan tersebut memisahkan fakta yang diukur, interpretasi, dan rekomendasi. Tidak terdapat klaim bahwa proyek telah menurunkan penyakit diare karena data yang tersedia belum mengukur hal tersebut.
Matriks rekomendasi yang dapat ditindaklanjuti
| Temuan | Tindakan yang diusulkan | Penanggung jawab | Batas waktu latihan | Bukti verifikasi |
|---|---|---|---|---|
| Satu sekolah belum terjangkau | Susun jadwal dan laksanakan sesi susulan | Koordinator Puskesmas–sekolah | 14 hari | Daftar hadir dan laporan kegiatan |
| Satu sarana belum berfungsi | Periksa dan perbaiki sarana | Tim teknis | 7 hari | Checklist fungsi pascaperbaikan |
| Tiga dokumen belum lengkap | Lengkapi dan verifikasi bukti | Bendahara/tim administrasi | 7 hari | Dokumen yang dinyatakan memadai |
| Belum ada rencana pemeliharaan | Tetapkan penanggung jawab sabun dan sarana | Kepala sekolah/UKS | 21 hari | Surat tugas/rencana pemeliharaan |
| Outcome belum diuji keberlanjutannya | Lakukan observasi tindak lanjut | Tim evaluasi | 3 bulan | Laporan pengamatan lanjutan |
Batas waktu pada matriks adalah contoh tugas kelas, bukan jadwal yang telah disepakati oleh institusi tertentu.
L. Penutupan proyek dan serah terima
Penutupan proyek merupakan proses administratif dan substantif untuk memastikan pekerjaan yang diwajibkan telah diperiksa, keluaran diserahkan kepada pihak penerima, dokumen diarsipkan, kewajiban diselesaikan, serta rencana keberlanjutan ditetapkan. Penutupan tidak berarti seluruh persoalan hilang; temuan yang belum tuntas tetap dapat tercatat dalam daftar tindak lanjut dengan penanggung jawab dan tenggat yang jelas.
Serah terima perlu menjelaskan secara rinci apa yang diserahkan, kepada siapa, kondisi barang atau layanan, dokumen pendukung, dan tanggung jawab pemeliharaan setelah proyek selesai. Misalnya, pemasangan sarana CTPS disertai daftar lokasi, hasil uji fungsi, petunjuk penggunaan, serta kesepakatan mengenai suplai air dan sabun. Tanpa serah terima yang jelas, sarana yang dibangun berisiko tidak dipelihara.
Dalam rapat penutupan, tim juga perlu merekam pembelajaran proyek (lessons learned). Pertanyaan yang dapat diajukan antara lain kegiatan apa yang paling efektif, mengapa jadwal meleset, risiko apa yang terlewat saat perencanaan, dan mekanisme koordinasi mana yang perlu dipertahankan. Hasil refleksi menjadi sumber pengetahuan untuk proyek berikutnya, khususnya dalam pelayanan kesehatan yang sering melibatkan banyak lembaga dan profesi.
M. Simulasi kelas dan evaluasi berbasis proyek
Proyek kelompok: “Project Review Board — Layakkah Proyek Ditutup?”
Mahasiswa bekerja dalam kelompok 4–5 orang dan bertindak sebagai tim penilai independen. Kelompok menerima data akhir proyek CTPS pada bagian J, menyusun evaluasi, melakukan audit dokumen simulatif, serta menyampaikan keputusan kepada “pimpinan proyek” yang diperankan oleh dosen atau kelompok lain. Fokus tugas bukan membuat proyek terlihat baik, melainkan menghasilkan keputusan yang jujur, proporsional, dapat dibuktikan, dan berorientasi perbaikan.
Tahap kerja. Pertama, kelompok menyusun model logika dan minimal lima pertanyaan evaluasi. Kedua, kelompok mengembangkan matriks indikator dengan target, realisasi, sumber, dan keterbatasan. Ketiga, kelompok menghitung capaian output, biaya per peserta, keterlambatan, mutu fungsi sarana, dan perubahan deskriptif perilaku. Keempat, kelompok menulis minimal dua temuan audit simulatif dengan format kriteria–kondisi–risiko–rekomendasi, tanpa mengarang pelanggaran. Kelima, kelompok menyusun laporan akhir serta rencana tindak lanjut terukur dan mempresentasikan keputusan.
Luaran. (1) Laporan evaluasi dan penutupan 6–10 halaman di luar lampiran; (2) satu halaman ringkasan eksekutif; (3) matriks rekomendasi; (4) visualisasi minimal dua indikator; serta (5) presentasi 8–10 menit. Tim yang memiliki waktu dapat menambahkan dashboard atau checklist audit digital. Tenggat pengumpulan mengikuti ketetapan dosen pengampu.
Rubrik proyek kelompok
| Aspek penilaian | Bobot | Indikator kinerja tinggi |
|---|---|---|
| Ketepatan model logika dan pertanyaan evaluasi | 15% | Hubungan input–output–outcome tepat; pertanyaan terukur |
| Matriks indikator dan validitas bukti | 20% | Sumber data, penyebut, mutu data, dan keterbatasan jelas |
| Ketepatan analisis capaian serta biaya | 20% | Perhitungan benar dan interpretasi tidak berlebihan |
| Temuan audit dan verifikasi | 15% | Temuan memakai kriteria dan bukti, bukan asumsi |
| Laporan, rekomendasi, dan rencana tindak lanjut | 20% | Ringkas, argumentatif, ada PIC, tenggat, dan bukti ukur |
| Presentasi, pembagian kerja, serta respons diskusi | 10% | Komunikatif dan seluruh anggota berkontribusi |
| Jumlah | 100% | Rubrik latihan; bukan bobot resmi penilaian RPS |
Pertanyaan diskusi di kelas
- Apakah proyek dapat disebut berhasil jika 93% siswa telah teredukasi tetapi sekolah terpencil belum seluruhnya terjangkau? Jelaskan dari sudut efektivitas dan pemerataan.
- Apa perbedaan antara mengatakan “praktik CTPS meningkat 26 poin persentase” dan “proyek menyebabkan praktik CTPS meningkat 26 poin persentase”?
- Mengapa pengeluaran di bawah pagu tidak selalu berarti biaya pelaksanaan lebih efisien?
- Bukti apa yang diperlukan sebelum menyatakan temuan dokumen audit sudah ditutup?
- Apa keputusan Anda: menutup proyek dengan daftar tindak lanjut, memperpanjang proyek, atau meminta verifikasi lebih lanjut? Nyatakan kriteria yang digunakan.
N. Latihan individual dan kunci pembahasan ringkas
Soal 1. Dalam evaluasi CTPS, 8 dari 9 sarana yang terpasang berfungsi. Berapa persen sarana berfungsi dari yang terpasang dan dari target awal 10 unit? Jelaskan mengapa jawabannya berbeda.
Soal 2. Proyek menghabiskan Rp48.000.000 untuk menjangkau 930 siswa. Hitung biaya rata-rata per siswa, bandingkan dengan biaya rencana Rp50.000 per siswa, dan jelaskan keterbatasan pengukuran ini.
Soal 3. Sebutkan tiga elemen yang wajib ada ketika mahasiswa menulis temuan audit yang dapat dipertanggungjawabkan.
Soal 4. Hasil observasi CTPS sebelum dan sesudah menunjukkan 39% dan 65%. Apa kesimpulan yang boleh dan tidak boleh dibuat tanpa kelompok pembanding?
Soal 5. Buat satu rekomendasi SMART untuk fasilitas CTPS yang belum berfungsi.
Pembahasan ringkas. Soal 1: 8/9 = 88,9% dan 8/10 = 80%; penyebut berbeda. Soal 2: sekitar Rp51.613/siswa, kurang lebih 3,2% lebih tinggi daripada rencana; belum mencerminkan mutu dan dampak. Soal 3: setidaknya kriteria, kondisi, serta bukti/risiko dan rekomendasi; format lengkap dapat mencakup sebab yang sudah terverifikasi. Soal 4: terjadi peningkatan yang teramati 26 poin persentase, tetapi atribusi kausal belum dapat dibuat. Soal 5: contoh “Tim teknis memperbaiki satu sarana dalam tujuh hari dan mendokumentasikan hasil uji fungsi menggunakan checklist.”
O. Rangkuman dan refleksi
Evaluasi menghubungkan pelaksanaan proyek dengan tujuan, bukti hasil, dan kebutuhan pengambilan keputusan. Model logika membantu membedakan input, aktivitas, output, outcome, dan dampak. Kriteria relevansi, koherensi, efektivitas, efisiensi, dampak, serta keberlanjutan membuat penilaian lebih menyeluruh. Namun, setiap kesimpulan harus mengikuti kualitas dan ruang lingkup data yang tersedia.
Audit melengkapi evaluasi dengan pemeriksaan kriteria, proses, dan bukti pertanggungjawaban. Laporan akhir mengubah temuan menjadi informasi yang dapat dipakai pimpinan dan pemangku kepentingan. Penutupan proyek menjadi bermakna ketika keluaran diserahterimakan, masalah yang tersisa dicatat, dan tanggung jawab tindak lanjut ditetapkan dengan jelas.
Refleksi untuk mahasiswa: sebagai calon administrator kesehatan, apakah Anda akan memilih laporan yang terlihat sempurna tetapi tidak sesuai bukti, atau laporan yang mengakui kekurangan sekaligus menyediakan rencana perbaikan? Dalam pengelolaan kesehatan, integritas data dan kemampuan belajar dari kekurangan merupakan bagian dari profesionalisme.
P. Glosarium
Audit: pemeriksaan sistematis terhadap bukti dan proses berdasarkan kriteria yang ditetapkan. Efektivitas: tingkat pencapaian tujuan atau hasil yang diharapkan. Efisiensi: hubungan antara sumber daya yang digunakan dengan hasil, dengan mempertimbangkan konteks dan kualitas. Evaluasi: penilaian sistematis terhadap rancangan, pelaksanaan, serta hasil proyek. Impact (dampak): perubahan luas atau jangka panjang yang perlu dianalisis secara hati-hati. Monitoring: pemantauan berkala atas kemajuan dibanding rencana. Outcome (hasil): perubahan pada penerima manfaat setelah kegiatan. Output (keluaran): produk langsung dari pelaksanaan kegiatan. Tindak lanjut: tindakan yang ditetapkan sebagai respons atas temuan disertai tanggung jawab dan batas waktu.
Q. Daftar pustaka dan bacaan lanjut
- Centers for Disease Control and Prevention. (2024). CDC Program Evaluation Framework. https://www.cdc.gov/evaluation/php/evaluation-framework/index.html
- Organisation for Economic Co-operation and Development. Evaluation Criteria. https://www.oecd.org/en/topics/sub-issues/development-co-operation-evaluation-and-effectiveness/evaluation-criteria.html
- Project Management Institute. (2021). A Guide to the Project Management Body of Knowledge (PMBOK® Guide) (7th ed.). Project Management Institute. (Rujukan sebagaimana tercantum pada RPS.)
- Kerzner, H. (2022). Project Management: A Systems Approach to Planning, Scheduling, and Controlling (13th ed.). Wiley. (Rujukan sebagaimana tercantum pada RPS.)
- Lewis, J. P. (2020). Fundamentals of Project Management (6th ed.). AMACOM. (Rujukan sebagaimana tercantum pada RPS.)
- Program Studi S1 Administrasi Kesehatan, Fakultas Ilmu Kesehatan, Universitas Muhammadiyah Sidenreng Rappang. (2024). Rencana Pembelajaran Semester: Administrasi Proyek Kesehatan (MAIK1025142). Dokumen internal mata kuliah.
Catatan akademik: Angka, indikator, rubrik, ambang keberhasilan, dan keputusan dalam studi kasus merupakan simulasi pembelajaran. Detail bibliografi buku yang mengikuti RPS perlu diverifikasi terhadap eksemplar asli sebelum publikasi ilmiah formal.
Komentar
Posting Komentar
Terima kasih atas komentarnya