Berapa Sebenarnya “Untung” dari Sebuah Pelatihan?

Kisah Piloting ROTI di Pusdiklat Bea dan Cukai

Oleh Mardial dan Immanuel Tambunan

Pertanyaan yang Jarang Dijawab

Setiap tahun, organisasi mengalokasikan anggaran yang tidak sedikit untuk pelatihan pegawai. Pesertanya puas, nilai ujiannya bagus, dan sertifikat dibagikan. Namun, pertanyaan yang lebih tajam jarang terjawab: setelah semua biaya itu, seberapa besar manfaat yang benar-benar kembali ke organisasi?

Pertanyaan inilah yang dijawab oleh Return on Training Investment (ROTI), yaitu ukuran imbal hasil atas investasi pelatihan. Pada 2023, Pusdiklat Bea dan Cukai (Badan Pendidikan dan Pelatihan Keuangan/BPPK, Kementerian Keuangan) mencobanya melalui program penugasan sementara pegawai (secondment) berupa piloting perhitungan ROTI. Objek yang dipilih adalah pelatihan Pawang Anjing Pelacak (K-9) Direktorat Jenderal Bea dan Cukai (DJBC).

ROTI dalam Satu Menit

ROTI adalah tahap terakhir dari rantai evaluasi pelatihan, yang lazim dikenal dari model Kirkpatrick dan perluasannya oleh Phillips. Jenjangnya terdiri atas lima level, dari yang paling mudah diukur hingga yang paling menuntut data:

1. Level 1 (Reaksi): apakah peserta puas dengan penyelenggaraan dan pengajar? Level ini merupakan lapisan paling dasar dan paling mudah diukur.
2. Level 2 (Pembelajaran): apakah peserta benar-benar menguasai materi? Penguasaan ini biasanya diukur melalui ujian atau penilaian praktik.
3. Level 3 (Perilaku): apakah ilmunya dipakai di tempat kerja? Pengukurannya dilakukan setelah peserta kembali bertugas.
4. Level 4 (Dampak): apakah kinerja organisasi membaik? Pada level ini, hasil pelatihan mulai dikaitkan dengan indikator kinerja unit.
5. Level 5 (ROTI): jika dampak itu diubah menjadi rupiah, seberapa besar dibanding biaya pelatihannya? Hasilnya dinyatakan dalam persentase.

Rumusnya sederhana, yaitu membandingkan manfaat bersih dengan biaya yang dikeluarkan:

Pelatihan dianggap efektif jika ROTI di atas 100%. Artinya, setiap Rp1 yang diinvestasikan menghasilkan manfaat bersih lebih dari Rp1. Adapun ROTI sebesar 0% berarti titik impas, yaitu manfaat hanya cukup menutup biaya.

Mengapa Pawang Anjing Pelacak?

Tidak semua pelatihan cocok diukur ROTI-nya. Pelatihan Teknis Pembentukan Pawang Anjing Pelacak (PPAP) Angkatan II Tahun 2022 dipilih karena memenuhi empat syarat berikut:

• Kompetensinya benar-benar baru. Para peserta belum pernah bertugas sebagai pawang, sehingga perubahan kemampuan terlihat jelas, dari “belum bisa” menjadi “bisa”.
• Hasil kerjanya bisa dinilai dengan uang. Penindakan narkotika, psikotropika, dan prekursor (NPP) dicatat secara rutin. Nilai pasarnya pun dapat dihitung.
• Datanya tersedia. Evaluasi sampai Level 3 sudah dilakukan. Para alumni juga tidak dimutasi selama setahun sehingga kinerjanya dapat dipantau.
• Strategis. Narkotika termasuk kejahatan luar biasa. Pengawasannya pun menjadi salah satu fungsi utama DJBC.

Pelatihan ini diikuti oleh 10 peserta dan dirancang untuk membentuk pawang yang siap bertugas. Materinya mencakup kesiapan fisik dan mental, pengetahuan dasar pengawasan narkotika, perawatan anjing pelacak, hingga teknik pelacakan di bandara, pelabuhan, kendaraan, dan gedung.

Fondasi: Pelatihannya Sudah Efektif

Sebelum menghitung uang, tim memastikan terlebih dahulu bahwa pelatihannya memang berjalan baik. Pemeriksaan ini mengacu pada hasil evaluasi Level 1 sampai Level 3:

• Level 1: penyelenggaraan dan pengajar sama-sama berkategori Sangat Baik, dengan indeks masing-masing 4,62 dan 4,74. Artinya, peserta menilai pelaksanaan pelatihan sangat memuaskan.
• Level 2: seluruh 10 peserta dinyatakan lulus. Dengan demikian, penguasaan materi tercapai pada semua peserta.
• Level 3: evaluasi pascapembelajaran menyimpulkan bahwa pelatihan efektif meningkatkan kompetensi alumni. Semua peserta juga menyatakan percaya diri dan berkomitmen menerapkan ilmunya.

Berapa Biayanya?

Total biaya yang dapat diperhitungkan adalah Rp907.069.452. Angka ini mencakup biaya nyata maupun asumsi, mulai dari analisis kebutuhan, desain, penyelenggaraan, hingga evaluasi. Dua komponen terbesarnya disajikan pada tabel berikut:

Menariknya, tim juga memasukkan gaji dan tunjangan peserta yang tetap dibayarkan selama mereka belajar sebagai biaya peluang (opportunity cost). Dengan cara ini, biaya pelatihan tidak hanya dilihat dari uang yang keluar dari anggaran penyelenggaraan, tetapi juga dari waktu kerja pegawai yang dipakai untuk belajar. Perhitungan pun menjadi lebih lengkap dan konservatif.

Berapa Manfaatnya? Di Sinilah Tantangannya

Selama Januari sampai Juni 2023, para alumni menjalankan 57 penugasan, dan 26,32% di antaranya (sekitar 15 penugasan) berhasil menindak NPP. Hasil tangkapan itu dikonversi menjadi rupiah berdasarkan harga pasar, dengan dua skenario harga, yaitu terendah dan tertinggi.

Perlu dicatat bahwa nilai pasar tangkapan berfungsi sebagai pendekatan untuk menaksir manfaat, bukan sebagai penerimaan negara. Karena itu, istilah “untung” dalam judul tulisan ini dimaknai sebagai nilai manfaat yang dikembalikan oleh pelatihan, bukan uang yang masuk ke kas negara.

Data nilai pasar NPP dimaksud dilakukan konversi ke nilai moneter (rupiah) menggunakan harga pasar yang ditetapkan BNN dan dasar harga pasar sesuai sumber terpercaya untuk NPP yang tidak ditetapkan secara langsung oleh BNN.

Menghitung seluruh nilai tangkapan sebagai “hasil pelatihan” tentu tidak adil. Keberhasilan penindakan juga dipengaruhi oleh anjing pelacak, intelijen, metode, dan faktor lain. Karena itu, tim melakukan isolasi dampak, yaitu memisahkan kontribusi pelatihan dari faktor-faktor lain, dalam tiga lapis:

1. Kontribusi pawang vs anjing pelacak. Tersedia dua skenario, yaitu 60:40 dan 70:30 (pawang : K-9). Angka ini berdasarkan kesepakatan dengan Subdirektorat (Subdit) Unit Anjing Pelacak K-9 sebagai ahli.
2. Survei persepsi. Instruktur, rekan kerja, atasan langsung, dan Kepala Subdirektorat (Kasubdit) K-9 menilai seberapa besar kontribusi pelatihan dibanding faktor lain, yaitu metode, mesin/anjing pelacak, uang, dan material. Hasilnya, 37,5% dikaitkan dengan pelatihan.
3. Pembelajaran terintegrasi (versi konservatif). Menurut model 70:20:10, hanya sekitar 10% pembelajaran berasal dari kelas formal, sedangkan sisanya datang dari pengalaman kerja dan interaksi dengan orang lain. Lapis ini diterapkan sebagai tambahan atas dua lapis sebelumnya.

Pada tabel hasil di bawah, Versi 1 memakai isolasi dampak isolasi survei persepsi 37,5%, dan Versi 2 yang selain menggunakan survei persepsi 37,5%, juga menggunakan isolasi pembelajaran terintegrasi 10% (10:20:70) menambahkan sehingga isolasinya lebih ketat dan perkiraan manfaatnya lebih konservatif.

Hasilnya: Rentang yang Lebar, Pelajaran yang Kaya

Hasil perhitungan disajikan dalam empat skenario. Rentang pada setiap baris mencerminkan perbedaan skenario kontribusi pawang terhadap anjing pelacak yang telah dipublikasikan melalui laporan hasil secondment piloting perhitungan ROTI pada Pelatihan Teknis Pembentukan Pawang Anjing Pelacak kepada BPPK dan DJBC, serta sudah dipublikasikan pada KMS Kemenkeu Learning Center.

Ada beberapa hal yang patut digarisbawahi dari hasil tersebut:

• Pada tiga dari empat skenario, pelatihan ini mengembalikan nilai yang jauh melebihi biayanya. Dalam Versi 1 yang menggunakan isolasi survei persepsi 37,5%, rata-rata biaya pelatihan per peserta sekitar Rp90,7 juta, sedangkan manfaat per peserta berkisar dari sekitar Rp0,9 miliar hingga hampir Rp4 miliar.
• Angka ROTI sangat bergantung pada asumsi. Pada skenario paling konservatif (Versi 2 yang selain menggunakan survei persepsi 37,5%, juga menggunakan isolasi pembelajaran terintegrasi 10% (10:20:70), harga terendah, kontribusi 60:40), manfaat hanya melampaui biaya dengan selisih tipis, sehingga ROTI belum mencapai ambang efektif 100%. Rentang yang lebar ini bukan kelemahan, melainkan pengingat bahwa ROTI sebaiknya dibaca sebagai rentang, bukan satu angka mutlak.
• Distribusi manfaat tidak merata. Sebagian kecil penugasan menyumbang nilai tangkapan yang sangat besar. Akibatnya, ROTI mudah naik turun tergantung ada atau tidaknya penindakan berskala besar.

Pembaca juga perlu mengingat beberapa keterbatasan lain. Periode pengamatan hanya enam bulan dengan 10 alumni, dan survei persepsi pada dasarnya bersifat subjektif. Selain itu, model 70:20:10 merupakan kerangka acuan umum, bukan hasil pengukuran langsung terhadap pelatihan ini.

Manfaat yang Tak Bisa Dirupiahkan

Tidak semua nilai muat dalam angka. Laporan ini juga mencatat manfaat tak berwujud (intangible) yang tetap penting:

• Melindungi generasi muda dari kerusakan fisik, mental, dan psikologis akibat narkotika. Perlindungan ini sekaligus mencegah dampak lanjutannya pada pendidikan, kriminalitas, dan pengangguran.
• Mencegah pencucian uang yang bersumber dari perdagangan gelap NPP. Aliran dana hasil kejahatan ikut terhambat ketika peredaran barangnya berhasil dihentikan.
• Memberi efek gentar bagi calon pelaku penyelundupan. Semakin besar peluang tertangkap, semakin kecil pula dorongan untuk mencoba.

Semua ini tidak dipaksakan menjadi angka rupiah. Namun, manfaat tersebut tetap dilaporkan agar gambaran nilai pelatihan menjadi utuh.

Apa yang Bisa Kita Pelajari?

Hal penting yang perlu dipahami juga adalah terdapat keterbatasan penelitian yang hanya mencakup periode enam bulan, 10 alumni, terdapat unsur subjektivitas berupa survei persepsi yang bersifat subjektif dan pembelajajaran terintegrasi 10% pada komponen 70:20:10.

Piloting ini bukan sekadar menjawab “untung atau rugi”. Ia menawarkan peta jalan bagi unit lain yang ingin mengukur dampak pelatihannya, dengan lima rekomendasi utama berikut:

1. Naikkan standar evaluasi. Desain pelatihan PPAP sebaiknya secara formal ditingkatkan ke evaluasi Level 4. Datanya sudah cukup untuk dihitung sampai ROTI.
2. Siapkan indikator sejak awal. Indikator Level 3 dan 4 sebaiknya langsung mengarah pada dampak finansial yang bisa dihitung. Indikator itu juga perlu dibahas bersama pemilik keahlian (Skill Group Owner) saat rapat evaluasi pascapembelajaran.
3. Telusuri biaya lebih rinci. Rincian yang lebih baik membuat hasil lebih presisi. Ketergantungan pada asumsi pun berkurang.
4. Jadikan alur piloting ini acuan. Prosesnya dapat ditiru oleh pelatihan lain. Dengan begitu, hasil ROTI antarpelatihan lebih mudah dibandingkan.
5. Perluas ke pelatihan lain. Pelatihan Intelijen Analis, yang menghasilkan informasi bagi pawang di lapangan, serta Post Clearance Audit (PCA) menjadi kandidat berikutnya.

Penutup: Dari Anggaran Menjadi Bukti

Di tengah tuntutan penggunaan APBN yang efisien dan terukur, ROTI membantu kita bergeser dari pertanyaan “berapa yang dihabiskan untuk pelatihan?” menjadi “apa yang dikembalikan oleh pelatihan?”. Pergeseran ini penting karena pelatihan, seperti belanja lainnya, perlu dapat dipertanggungjawabkan hasilnya.

Kisah sepuluh pawang dan anjing pelacak mereka menunjukkan bahwa investasi pada manusia bisa diukur, dipertanggungjawabkan, dan dipelajari. Dengan metode yang transparan tentang asumsi dan keterbatasannya, setiap pelatihan punya kesempatan membuktikan nilainya, dan tidak berhenti pada daftar hadir dan sertifikat.