Level 4 · Profesional · Rumpun K · Capstone
Membela Mandat di Depan Panel
Bayangkan ujian akhir yang sengaja tidak melihat untung-ruginya portofoliomu. Yang dinilai justru kejujuranmu pada angka sendiri, keteraturan dokumenmu, dan caramu menjawab pertanyaan yang tidak bisa dihafal. Aneh? Di modul ini kamu akan melihat bahwa aturan itu lahir dari matematika, bukan dari selera.
Ujian yang tidak menanyakan untung
Setelah modul ini, kamu bisa
- menjelaskan kenapa imbal hasil tidak dinilai pada capstone, dengan angka 16 tahun sebagai alasannya;
- membedakan kalibrasi dari daya pembeda, dan membaca skor Brier;
- menghitung reliabilitas panel dengan rumus Spearman-Brown dan memahami kenapa penilai harus menilai sendiri-sendiri;
- memeriksa konsistensi enam dokumen, terutama pra-mortem yang sering cuma formalitas;
- menjelaskan kenapa pertanyaan lanjutan di pembelaan lisan sulit dipalsukan, dan cara kerja dimensi knockout.
Kak, portofolio simulasiku naik 12% dalam 12 minggu! Panel pasti terkesan.
Nah, itu baru jago! Yang untung paling besar, dialah juaranya. Gampang, kan?
Angka itu akan dihapus sebelum panel membaca dokumenmu. Dalam 12 minggu, yang buruk mengalahkan yang baik hampir 4 dari 10 kali.
Lho, terus aku dinilai dari apa?
HAPUS!Dari hal yang bisa diukur dalam waktu sesingkat ini: prosesmu, kejujuran keyakinanmu, dan jawabanmu saat didesak.
Berarti aku harus siap ditanya habis-habisan.
Selamat datang di puncak Level 4. Modul ini adalah capstone, yaitu proyek akhir yang menyatukan semua pelajaran sebelumnya. Isinya tidak mengajarkan materi baru. Kamu diminta menyusun satu mandat investasi yang utuh, lalu mempertahankannya di depan panel yang berusaha menemukan celahnya.
Satu prinsip memandu seluruh capstone: yang tidak bisa diukur tidak dinilai. Yang dinilai adalah hal yang benar-benar bisa diukur dalam 12 minggu: proses, kalibrasi, dan kemampuan menjaga penalaran saat ditekan.
Di platform Invesmentpedia, modul ini dinilai seperti modul lain: lewat kuis modul, butir analisis, dan butir ujian tentang prinsip capstone. Sertifikat Level 4 ditentukan asesmen otomatis. Capstone lengkap dengan pembelaan lisan diselenggarakan sebagai program kelompok (kohort) yang sangat dianjurkan. Hasilnya dicatat terpisah sebagai Catatan Pembelaan Mandat.
Kenapa untung-rugi tidak dinilai?
Pertanyaan ini wajar. Bukankah tujuan investasi memang mencari hasil? Betul. Masalahnya, dalam waktu singkat, hasil investasi lebih banyak ditentukan keberuntungan daripada keterampilan.
Untuk mengukur keterampilan, para profesional memakai rasio Sharpe, yaitu kelebihan hasil dibagi besarnya naik-turun. Anggap pengelola yang benar-benar terampil punya Sharpe 0,50. Pengelola tanpa keterampilan punya Sharpe nol. Berapa lama data yang dibutuhkan untuk membedakan keduanya dengan cukup yakin?
- \(t\)
- skor keyakinan. Biasanya baru dianggap meyakinkan bila mencapai sekitar 2
- \(SE\)
- standard error: seberapa goyah perkiraan Sharpe kita
- \(T\)
- lamanya data, dalam tahun
makin panjang datanya, makin kecil goyangannya, dan makin tinggi skor keyakinannya. Untuk Sharpe 0,50: setelah 1 tahun \(t = 0{,}50\). Setelah 16 tahun, \(t = 0{,}50 \times 4 = 2{,}00\).
Butuh 16 tahun untuk membedakan pengelola terampil dari yang tidak. Capstone berlangsung 12 minggu. Kalau imbal hasil 12 minggu itu dipakai untuk menilai, inilah yang terjadi:
| Kejadian dalam 12 minggu | Peluang |
|---|---|
| Kandidat terampil (Sharpe 0,50) justru mencatat hasil negatif | 40,5% |
| Kandidat buruk (Sharpe −0,30) mengalahkan kandidat yang baik | 39,3% |
Menilai dari hasil 12 minggu akan salah hampir empat dari sepuluh kali. Itu sedikit lebih baik daripada melempar koin. Karena itu capstone memakai aturan tegas: semua angka imbal hasil dihapus dari dokumen sebelum diserahkan. Panel tidak melihatnya, tidak menanyakannya, dan tidak menimbangnya.
Imbal hasil tidak dinilai bukan karena tidak penting. Ia tidak dinilai karena tidak bisa diukur dalam waktu yang tersedia. Membedakan Sharpe 0,50 dari nol butuh sekitar 16 tahun data, sedangkan capstone hanya 12 minggu.
Hal lain yang juga tidak terukur dalam waktu singkat
| Yang ingin diukur | Waktu yang dibutuhkan |
|---|---|
| Membedakan Sharpe 0,50 dari nol | 16,0 tahun |
| Membuktikan pengajaran menaikkan imbal hasil (L4K.1) | 44,4 tahun |
| Memvalidasi 274 keputusan makro (L4.1) | 45,7 tahun |
| Memvalidasi satu sistem perdagangan (L3T.4) | 234–923 transaksi |
Peluang kandidat terampil merugi dihitung dengan menganggap hasil 12 minggu menyebar normal dengan rata-rata \(0{,}50 \times T\) dan simpangan baku \(\sqrt{T}\), dengan \(T = 12/52\) tahun. Peluang kandidat buruk mengalahkan yang baik memakai selisih keduanya: rata-rata \(0{,}80 \times T\) dan simpangan baku \(\sqrt{2T}\). Hasilnya 39,3%.
Kalibrasi: jujur pada keyakinan sendiri
Kalau hasil tidak bisa diukur, apa yang bisa? Jawaban pertama: kalibrasi. Orang yang terkalibrasi baik, saat berkata "aku 80% yakin", memang benar sekitar 80% dari waktu.
Inilah kelebihan kalibrasi: ia bisa diperiksa dengan cepat. Kandidat menulis sejumlah klaim yang bisa dicek benar-salahnya, masing-masing dengan persen keyakinannya. Panel lalu menghitung berapa yang benar.
Berapa klaim yang dibutuhkan? Misalkan seorang kandidat selalu berkata "90% yakin", padahal sebenarnya ia hanya benar 72% dari waktu. Angka 72% ini pola yang biasa ditemukan pada modul L4.4.
Bandingkan dua angka ini: 16 tahun untuk menilai hasil, versus 29 klaim untuk menilai kalibrasi. Inilah alasan kalibrasi dinilai, sedangkan imbal hasil tidak.
Jebakan: terkalibrasi tapi tidak berguna
Kalibrasi saja tidak cukup. Bayangkan kandidat yang malas. Ia tahu kira-kira 70% klaim di bidangnya benar. Maka ia menulis "70% yakin" untuk setiap klaim. Hasilnya, 70% klaimnya benar. Ia terkalibrasi sempurna! Tetapi ia tidak memberi informasi apa pun, karena ia tidak membedakan klaim yang mudah dari yang sulit.
Angka "rata-rata yang biasa terjadi" itu disebut frekuensi dasar. Yang kita cari adalah daya pembeda: apakah kandidat memberi keyakinan berbeda untuk kasus yang berbeda, dan apakah perbedaan itu tepat.
Terkalibrasi, tidak berguna
Menulis 70% untuk semua klaim, dan 70% benar. Cocok dengan kenyataan, tetapi sama saja dengan menebak frekuensi dasar.
Terkalibrasi dan berguna
Menulis 95% untuk klaim yang memang kuat dan 60% untuk yang meragukan, dan proporsi benarnya cocok di tiap kelompok.
Skor Brier: satu angka untuk keduanya
Untuk menilai kalibrasi dan daya pembeda sekaligus, dipakai skor Brier. Caranya: untuk tiap klaim, hitung selisih antara keyakinanmu dan kenyataan (1 kalau benar, 0 kalau salah). Kuadratkan, lalu rata-ratakan.
- \(p_i\)
- keyakinan yang dinyatakan untuk klaim ke-\(i\), ditulis desimal (80% = 0,80)
- \(o_i\)
- hasilnya: 1 bila klaim benar, 0 bila salah
- \(n\)
- banyaknya klaim
skor Brier adalah rata-rata "seberapa jauh meleset", dikuadratkan. Makin kecil makin baik. Contoh: selalu yakin 0,70 dan memang 70% benar → 0,70 × (0,30)² + 0,30 × (0,70)² = 0,063 + 0,147 = 0,2100.
| Perilaku (kenyataan: 70% klaim benar) | Skor Brier |
|---|---|
| Selalu menyatakan 0,70 (terkalibrasi sempurna) | 0,2100 |
| Selalu menyatakan 0,90 (terlalu percaya diri) | 0,2500 |
| Selalu menyatakan 0,50 (terlalu berhati-hati) | 0,2500 |
| Acuan: selalu menyatakan frekuensi dasar | 0,2100 |
Lihat baris pertama dan terakhir: sama persis. Kandidat yang selalu menyebut frekuensi dasar memang terkalibrasi, tetapi skornya hanya setara "acuan malas". Untuk benar-benar unggul, skor Brier kandidat harus lebih kecil daripada acuan itu. Itu hanya mungkin bila ia punya daya pembeda.
Coba geser keyakinan ke 80% dan proporsi benar ke 60%. Skornya 0,2800, lebih buruk daripada acuan 0,2400. Lalu samakan keduanya di 60%. Skornya turun ke acuan, tetapi tidak pernah di bawahnya. Untuk menembus acuan, kandidat harus memberi keyakinan yang berbeda-beda dan tepat.
Kalibrasi dinilai bersama daya pembeda. Kandidat yang selalu menyatakan frekuensi dasar terkalibrasi sempurna tetapi tidak memberi informasi apa pun. Skor Brier makin kecil makin baik. Skor di bawah acuan frekuensi dasar (misalnya 0,19 dibanding 0,21) berarti kandidat benar-benar menambah informasi.
Berapa penilai yang dibutuhkan?
Jawaban kedua untuk "apa yang bisa diukur" adalah proses. Masalahnya, menilai proses itu subjektif. Dua penilai bisa memberi nilai berbeda untuk dokumen yang sama. Maka keandalannya harus dihitung, bukan dianggap beres begitu saja.
Ukuran keandalan penilai disebut reliabilitas. Nilainya dari 0 (acak) sampai 1 (selalu sama). Kalau satu penilai punya reliabilitas \(r\), gabungan beberapa penilai lebih andal. Seberapa naik? Rumus Spearman-Brown menjawabnya.
- \(R_k\)
- reliabilitas panel berisi \(k\) penilai
- \(r_1\)
- reliabilitas satu penilai
- \(k\)
- banyaknya penilai
kalikan reliabilitas satu penilai dengan jumlah penilai, lalu bagi dengan 1 ditambah (jumlah penilai − 1) × reliabilitas satu penilai. Untuk \(r_1 = 0{,}60\) dan 3 penilai: \(1{,}80 \div 2{,}20 = 0{,}818\).
| \(r_1\) | 1 penilai | 2 | 3 | 4 | 5 |
|---|---|---|---|---|---|
| 0,45 | 0,450 | 0,621 | 0,711 | 0,766 | 0,804 |
| 0,60 | 0,600 | 0,750 | 0,818 | 0,857 | 0,882 |
| 0,75 | 0,750 | 0,857 | 0,900 | 0,923 | 0,938 |
Sasaran yang lazim adalah reliabilitas panel minimal 0,80. Untuk rubrik yang tersusun rapi, satu penilai biasanya punya \(r_1 \approx 0{,}60\). Dengan angka itu, tiga penilai menghasilkan 0,818 dan sudah lolos. Jadi panel capstone berisi tiga orang bukan karena kebiasaan, tetapi karena hitungan.
Rumusnya juga bisa dibalik untuk mencari berapa penilai yang dibutuhkan:
masukkan reliabilitas sasaran \(R\) dan reliabilitas satu penilai \(r_1\), lalu bulatkan ke atas. Untuk \(R = 0{,}80\) dan \(r_1 = 0{,}60\): \(0{,}32 \div 0{,}12 = 2{,}67\), dibulatkan menjadi 3 penilai. Bila \(r_1\) hanya 0,45, hasilnya 4,89, jadi butuh 5 penilai.
Coba \(r_1\) = 0,50 dengan 3 penilai: hasilnya 0,750, masih kurang, sehingga butuh penilai keempat. Lalu coba \(r_1\) = 0,40: kamu butuh 6 penilai. Makin rendah keandalan satu penilai, makin besar panel yang dibutuhkan.
Syarat yang tidak bisa ditawar: menilai sendiri-sendiri
Rumus Spearman-Brown punya satu syarat diam-diam: setiap penilai menilai secara independen. Kalau tiga penilai mengobrol dulu, menyepakati "kesan umum", lalu baru mengisi nilai, yang terjadi adalah satu penilaian yang terdengar seperti tiga. Reliabilitas 0,818 tadi tidak berlaku lagi.
Tiga penilai memberi nilai terpisah, tanpa berunding.
Semua nilai dikumpulkan sebelum perundingan dimulai.
Bila ada selisih 2 tingkat atau lebih pada satu dimensi, selisih itu wajib dibahas.
Nilai akhir adalah rata-rata ketiganya.
Untuk dimensi knockout, kandidat gagal bila mayoritas (minimal 2 dari 3) menilainya di bawah 2.
Kandidat menerima nilai per dimensi beserta alasannya, tertulis.
Panel capstone berisi tiga penilai karena \(r_1 \approx 0{,}60\) menghasilkan reliabilitas panel 0,818. Angka itu hanya sah bila penilai menilai dulu, baru berunding. Minimal satu penilai harus tidak pernah membimbing kandidat.
Komposisi panel
| Penilai | Peran |
|---|---|
| 1 | Pembimbing kandidat (boleh) |
| 2 | Penilai rumpun: menguasai rumpun yang diambil kandidat |
| 3 | Penilai independen: tidak pernah membimbing kandidat |
Penilai dilarang menilai kandidat yang punya hubungan keluarga, bisnis, atau keuangan dengannya. Hubungan semacam itu wajib dinyatakan sebelum panel dibentuk. Penilai juga dilarang menerima imbalan apa pun dari kandidat, keluarganya, atau pemberi kerjanya.
Enam dokumen, satu cerita
Kandidat menyerahkan enam dokumen. Kabar baiknya, hampir semuanya sudah kamu isi sepanjang Level 4 sebagai templat. Capstone menuntut satu hal baru: keenamnya harus saling cocok.
| # | Dokumen | Isinya, singkatnya |
|---|---|---|
| 1 | Mandat dan Pernyataan Kebijakan Investasi (IPS) | Profil risiko pemberi mandat (kapasitas, toleransi, kebutuhan), modal manusia, volatilitas dan penurunan yang tersirat, batas eksposur |
| 2 | Memo Investasi | Tesis, alokasi, sumber, pra-mortem |
| 3 | Protokol Riset Sinyal atau Kerangka Kustodi | Sesuai rumpun pilihan (Q atau D) |
| 4 | Kerangka Eksekusi atau Protokol Analitik On-Chain | Sesuai rumpun pilihan (Q atau D) |
| 5 | Piagam Praktik Edukasi | Etika, batas edukasi, konflik kepentingan; ditandatangani |
| 6 | Pra-mortem dan Lembar Kalibrasi | Cerita kegagalan + 29 klaim berkeyakinan |
Empat uji konsistensi
| # | Uji | Bentuk kegagalannya |
|---|---|---|
| 1 | Batas risiko di Dokumen 1 = batas yang dipakai di Dokumen 2 | Angkanya berbeda tanpa penjelasan |
| 2 | Kapasitas di Dokumen 3/4 ≥ modal di Dokumen 1 | Mandat melampaui kapasitas yang dihitung sendiri |
| 3 | Konflik di Dokumen 5 = konflik yang diungkap di Dokumen 2 | Konflik hanya muncul di satu dokumen |
| 4 | Pra-mortem di Dokumen 6 menyebut kelemahan nyata di Dokumen 2 | Pra-mortem tidak menyentuh dokumen sendiri |
Uji 4 paling sering gagal. Kegagalan ini menandakan pra-mortem ditulis sebagai formalitas, bukan sebagai pemeriksaan diri yang sungguh-sungguh.
Apa itu pra-mortem?
Pra-mortem adalah kebalikan dari otopsi. Otopsi mencari penyebab setelah sesuatu mati. Pra-mortem membayangkan rencanamu sudah gagal, lalu bertanya "kenapa?", sebelum apa pun terjadi. Ia ditulis dalam bentuk lampau: "Tiga tahun kemudian mandat ini gagal. Inilah yang terjadi..."
- Wajib memuat minimal 5 jalur kegagalan yang berbeda.
- Minimal satu harus berupa kesalahan penulis sendiri, bukan peristiwa pasar atau tindakan pihak lain.
- Kegagalan yang ditulis harus menyentuh kelemahan nyata di dokumen sendiri (Uji 4).
Lembar Kalibrasi: 29 klaim
Bagian kedua Dokumen 6 berisi 29 klaim yang bisa dicek benar-salahnya oleh panel. Setiap klaim diberi persen keyakinan. Satu syarat penting: keyakinan wajib bervariasi. Klaim tidak boleh semuanya pada tingkat yang sama.
Contoh
Seorang kandidat menulis 29 klaim, semuanya "80% yakin". Ternyata 23 benar, atau 79,3%. Kalibrasinya bagus, karena 79,3% dekat dengan 80%. Tetapi ia melanggar syarat variasi dan tidak menunjukkan daya pembeda. Ia tidak membedakan kasus mudah dari kasus sulit.
| Ukuran | Cara panel menilainya |
|---|---|
| Kalibrasi | Proporsi benar di tiap tingkat keyakinan, dibandingkan dengan tingkat yang dinyatakan |
| Daya pembeda | Apakah klaim berkeyakinan tinggi lebih sering benar daripada yang rendah |
| Skor Brier | Dibandingkan dengan acuan frekuensi dasar (0,2100) |
Keenam dokumen dinilai sebagai satu kesatuan. Uji yang paling sering gagal adalah pra-mortem yang tidak menyentuh kelemahan nyata dokumen sendiri. Pra-mortem yang baik memuat minimal lima jalur kegagalan, dan setidaknya satu adalah kesalahanmu sendiri.
Syarat yang paling sering gagal di Dokumen 2 dan 3/4
| Syarat | Kegagalan yang umum |
|---|---|
| Klaim tanpa sumber yang bisa ditelusuri dihapus, bukan diberi catatan | Klaim dipertahankan dengan catatan "perlu diverifikasi" |
| Pra-mortem memuat ≥ 5 jalur, termasuk kesalahan penulis | Lima jalur yang semuanya eksternal |
| Setiap angka bisa direproduksi dari angka lain dalam dokumen | Angka ringkasan tidak cocok dengan rinciannya |
| Rumpun Q: \(N\) pengujian yang sebenarnya; kapasitas dari modal/ADV; biaya diukur dari harga keputusan | Bagian ini dibiarkan kosong |
| Rumpun D: kustodian yang benar-benar independen; uji kepunahan token; skema \(m\)-dari-\(n\) | Bagian ini dibiarkan kosong |
Pada Dokumen 5 (Piagam), bagian 7.1 tentang jumlah calon peserta yang ditunda wajib diisi angka. Angka nol wajib disertai penjelasan.
Pembelaan lisan: pertanyaan yang tidak bisa dihafal
Dokumen bisa disiapkan berminggu-minggu. Bisa juga disalin, atau dibantu orang lain. Yang tidak bisa disiapkan adalah jawaban atas pertanyaan yang tidak terduga. Karena itu capstone punya pembelaan lisan.
Dokumen saja hanya membedakan 55% kasus, nyaris seperti lemparan koin. Dengan pembelaan penuh, angkanya naik ke 93%. Apa yang membuatnya bekerja? Bukan pertanyaan pertamanya, melainkan pertanyaan lanjutannya: "Kenapa bukan cara X?", "Apa yang akan mengubah pendapatmu?", "Bagian mana yang paling lemah?"
Lima tahap dalam 90 menit
| Tahap | Waktu | Isi |
|---|---|---|
| 1 | 10 menit | Kandidat memaparkan mandat, tanpa slide dan tanpa catatan |
| 2 | 40 menit | Delapan pertanyaan wajib |
| 3 | 20 menit | Pertanyaan lanjutan bebas dari panel |
| 4 | 10 menit | Pembelaan balik: kandidat menyatakan di mana panel keliru |
| 5 | 10 menit | Panel berunding tanpa kandidat |
Tahap 4 bukan basa-basi. Kandidat yang tidak pernah menyatakan ketidaksetujuan selama 60 menit menunjukkan sesuatu yang ikut dinilai. Panel justru tidak boleh menghukum ketidaksetujuan yang beralasan.
Delapan pertanyaan wajib
| # | Pertanyaan | Yang diuji |
|---|---|---|
| 1 | Angka mana di dokumenmu yang paling mungkin salah, dan bagaimana kamu tahu? | Kejujuran pada keterbatasan sendiri |
| 2 | Berapa banyak pengujian yang benar-benar kamu lakukan, termasuk yang gagal? | Disiplin riset |
| 3 | Apa yang akan mengubah pendirianmu atas tesis utama? | Apakah tesisnya bisa dibuktikan salah |
| 4 | Kenapa bukan pendekatan X? | Penalaran, bukan hafalan |
| 5 | Di mana kepentinganmu berbeda dari kepentingan pemberi mandat? | Konflik kepentingan |
| 6 | Bila mandat ini gagal karena kesalahanmu sendiri, kesalahan apa itu? | Pra-mortem yang nyata |
| 7 | Apa yang tidak kamu ketahui dan tidak bisa kamu ketahui di sini? | Batas kompetensi |
| 8 | Bagaimana kamu menyampaikan kerugian 25% kepada pemberi mandat? | Komunikasi saat buruk |
Simulasi pembelaan. Pertanyaan enam: bila mandat ini gagal karena kesalahanmu sendiri, kesalahan apa itu?
Hmm... kalau gagal, pasti karena pasar anjlok, Kak. Itu di luar kendaliku.
Itu menjawab pertanyaan lain. Aku bertanya tentang kesalahanmu, bukan kesalahan pasar.
JLEB!Oke. Kapasitas strategiku kuhitung dengan korelasi yang terlalu rendah. Kalau ternyata lebih tinggi, aku menerima modal melebihi kapasitas.
Nah, itu jawaban yang bisa dinilai.
Pertanyaan 1 dan 6 paling membedakan. Jawaban "saya rasa semuanya sudah benar" atau "kegagalannya akan datang dari pasar" sebenarnya menjawab pertanyaan yang berbeda. Pertanyaan 7 juga penting. Panel tidak boleh melewatinya hanya karena kandidat tampak menguasai materi. Justru pada kandidat yang kuat, pertanyaan 7 paling membedakan.
Panel dilarang menanyakan imbal hasil portofolio simulasi (angkanya sudah dihapus). Panel juga dilarang menanyakan "apakah aset X akan naik", karena itu melanggar batas edukasi. Pertanyaan hukum, pajak, dan perizinan juga dilarang, karena di luar batas kompetensi. Kandidat yang tetap menjawab pertanyaan hukum atau pajak justru melanggar disiplin proses.
Yang dinilai
Kualitas proses dan konsistensi dokumen. Kalibrasi dan daya pembeda. Kemampuan menyatakan batas sendiri. Penalaran saat didesak pertanyaan lanjutan.
Yang tidak dinilai
Imbal hasil. Kecocokan pandangan dengan panel. Kepercayaan diri saat berbicara. Kelancaran bicara.
Kandidat yang bicaranya ragu-ragu tetapi menjawab dengan tepat mendapat nilai lebih tinggi daripada kandidat yang lancar tetapi tidak bisa menjawab pertanyaan 4 dan 6.
Pembelaan lisan bekerja karena pertanyaan lanjutannya tidak bisa dipersiapkan. Dokumen saja membedakan 55% kasus, dokumen plus pembelaan penuh 93%. Pertanyaan yang paling membedakan adalah "angka mana yang paling mungkin salah?" dan "kesalahan apa yang akan kamu buat sendiri?".
Rubrik dan aturan knockout
Panel menilai enam dimensi dengan skala 1 sampai 4. Setiap dimensi punya bobot.
| Dimensi | Bobot | Contoh nilai 4 |
|---|---|---|
| D1 Penguasaan konsep | 15% | Menjelaskan kenapa tiap kerangka dipakai dan di mana ia tidak berlaku |
| D2 Ketepatan kuantitatif | 20% | Semua angka bisa direproduksi; kandidat menemukan sendiri kekeliruannya |
| D3 Penalaran dan kerangka | 20% | Enam dokumen konsisten; menjawab "kenapa bukan X" dengan penalaran |
| D4 Perlakuan risiko (knockout) | 15% | Kapasitas, penurunan nilai, dan kegagalan dihitung; prosedur sudah diuji |
| D5 Disiplin proses (knockout) | 15% | Jumlah pengujian dicatat; batas kompetensi dijaga; konflik diungkap konsisten |
| D6 Komunikasi dan etika | 15% | Menyampaikan kelemahan sendiri tanpa diminta; berani tidak setuju dengan alasan |
Dimensi knockout adalah dimensi yang menggugurkan. Nilai jelek di sana tidak bisa ditutup oleh nilai bagus di tempat lain.
rata-rata tertimbang harus minimal 3, dan perlakuan risiko (D4) minimal 2, dan disiplin proses (D5) minimal 2. Ketiga syarat harus terpenuhi bersamaan.
Kandidat A mendapat 3,5 · 3,0 · 3,5 · 2,0 · 3,0 · 3,5 untuk D1 sampai D6.
Rata-rata tertimbang A: 0,15(3,5) + 0,20(3,0) + 0,20(3,5) + 0,15(2,0) + 0,15(3,0) + 0,15(3,5) = 3,100. D4 = 2, tepat di ambang. Hasil: KOMPETEN.
Kandidat B mendapat 4,0 di semua dimensi, kecuali D4 = 1,0.
Rata-rata tertimbang B: 0,15(4) + 0,20(4) + 0,20(4) + 0,15(1) + 0,15(4) + 0,15(4) = 3,550. Lebih tinggi dari A! Tetapi D4 = 1, di bawah 2. Hasil: BELUM KOMPETEN.
Pelajarannya: keunggulan di dimensi lain tidak menggantikan perlakuan risiko yang tidak memadai.
Kalau gagal, lalu apa?
| Hasil | Ketentuan |
|---|---|
| Rata-rata di bawah 3,00, knockout aman | Perbaiki dokumen; pembelaan ulang minimal 4 minggu kemudian |
| Gagal knockout D4 | Wajib mengulang modul rumpun terkait |
| Gagal knockout D5 | Wajib mengulang L4K.1 (etika praktik) |
| Gagal dua kali | Tinjauan bersama pembimbing; tidak ada batas jumlah pengulangan |
Kenapa gagal D5 harus mengulang modul etika? Karena melanggar batas kompetensi atau mengungkap konflik secara tidak konsisten adalah soal etika praktik, bukan soal teknis.
Lulus capstone butuh tiga syarat sekaligus: rata-rata tertimbang ≥ 3,00, D4 ≥ 2, dan D5 ≥ 2. Kandidat dengan rata-rata 3,55 tetap belum kompeten bila perlakuan risikonya bernilai 1.
Jadwal 12 minggu dan aturan penyerahan
Beban capstone sekitar 88 jam: 15 jam terstruktur (18 JP) ditambah 73 jam mandiri. Dokumen diserahkan pada minggu 11 dengan angka imbal hasil sudah dihapus. Pembelaan berlangsung di minggu 12. Penyerahan bersifat final: dokumen tidak bisa diubah lagi, termasuk untuk memperbaiki kekeliruan yang kamu temukan sendiri.
Tetapi ada sisi baiknya. Kekeliruan yang kamu temukan sendiri dan kamu sampaikan saat pembelaan dinilai pada D2 tingkat 4. Menemukan kesalahan sendiri adalah bukti bahwa proses pemeriksaanmu bekerja.
Sebelum minggu 1, kandidat mengisi Lembar Kesiapan berisi 8 butir. Jawaban "tidak" pada butir mana pun berarti capstone ditunda. Butir terakhir adalah intinya: bersedia menyatakan kelemahan karya sendiri di depan panel.
Apa yang dibuktikan, dan apa yang tidak
Capstone yang dinyatakan kompeten membuktikan beberapa hal. Tetapi ia juga, dengan jujur, tidak membuktikan beberapa hal lain.
| Dibuktikan | Tidak dibuktikan |
|---|---|
| Kandidat bisa menyusun mandat yang konsisten dan bisa dipertahankan | Kandidat akan menghasilkan imbal hasil yang baik |
| Proses kandidat terdokumentasi dan bisa diaudit | Proses itu akan diikuti di bawah tekanan nyata |
| Kalibrasi kandidat terukur pada 29 klaim | Kalibrasi itu bertahan pada keputusan bernilai besar |
| Kandidat tahu batas kompetensinya | Kandidat akan menjaganya saat tidak ada yang mengawasi |
Kolom kanan bukan sekadar rendah hati. Ia kesimpulan langsung dari angka di awal: butuh 16 tahun untuk memisahkan keterampilan dari keberuntungan, sedangkan capstone hanya 12 minggu.
Catatan Pembelaan Mandat dan sertifikat Level 4 adalah bukti menyelesaikan program pendidikan internal. Keduanya bukan izin atau lisensi. Keduanya tidak memberi wewenang untuk mengelola dana orang lain, memberi nasihat investasi, atau kegiatan lain yang butuh izin dari otoritas berwenang. Portofolio dalam capstone bersifat simulasi dan dilarang dijalankan dengan dana nyata sebagai bagian dari tugas.
Pemegang sertifikat wajib menyampaikan pembedaan ini kepada siapa pun yang bertanya: sertifikat menyatakan bahwa ia sudah menunjukkan proses yang bisa dipertahankan, bukan bahwa ia pasti akan berhasil.
Mitos atau fakta?
Ketuk setiap kartu untuk membaliknya.
"Kandidat yang untungnya paling besar pasti paling terampil."
Dalam 12 minggu, kandidat buruk mengalahkan kandidat baik sekitar 39,3% dari waktu. Butuh sekitar 16 tahun untuk membedakan Sharpe 0,50 dari nol.
"Selalu menyatakan keyakinan yang sama itu tanda konsisten dan profesional."
Itu terkalibrasi tetapi tanpa daya pembeda. Skor Brier-nya paling banter sama dengan acuan frekuensi dasar.
"Kalau tiga penilai sepakat setelah berdiskusi, nilainya pasti tepat."
Berunding sebelum menilai menghasilkan satu penilaian yang terdengar seperti tiga. Nilai harus dikumpulkan dulu, baru dibahas.
"Rata-rata nilaiku 3,55, jadi aku pasti lulus."
Belum tentu. Bila D4 atau D5 di bawah 2, kandidat tetap belum kompeten. Itulah arti knockout.
"Jawaban terbaik untuk 'kesalahan apa yang akan kamu buat?' adalah menyalahkan kondisi pasar."
Itu menjawab pertanyaan lain. Panel menanyakan kesalahan kandidat sendiri, dan pra-mortem wajib memuat minimal satu kesalahan penulis.
Cek pemahamanmu
Latihan singkat ini tidak dinilai. Kuis resmi modul ada di bagian akhir halaman.
1. Reliabilitas satu penilai 0,70. Berapa reliabilitas panel dua penilai menurut Spearman-Brown?
- 0,70, karena penilainya sama andal
- Sekitar 0,82
- 1,40, karena dua kali 0,70
- Sekitar 0,49, karena 0,70 × 0,70
2 × 0,70 ÷ (1 + 1 × 0,70) = 1,40 ÷ 1,70 = 0,824. Reliabilitas tidak pernah melebihi 1, dan tambahan penilai menaikkannya, bukan menurunkannya.
2. Kandidat menyatakan 60% yakin untuk setiap klaim, dan ternyata 60% klaimnya benar. Skor Brier-nya 0,24. Apa artinya?
- Kandidat sangat unggul karena skornya rendah
- Kandidat terlalu percaya diri
- Skor Brier tidak berlaku untuk keyakinan di bawah 70%
- Ia hanya setara acuan frekuensi dasar: terkalibrasi, tanpa daya pembeda
Acuan frekuensi dasar = 0,60 × 0,40 = 0,24. Skor kandidat sama dengan acuan, jadi ia tidak menambah informasi.
3. Kenapa Lembar Kalibrasi meminta 29 klaim?
- Agar kandidat yang menyatakan 90% padahal hanya 72% benar punya peluang tertangkap sekitar 89,8%
- Karena 29 adalah jumlah modul di kurikulum
- Agar panel bisa menghitung imbal hasil kandidat
- Karena kurang dari 29 klaim tidak bisa diberi persen keyakinan
Dengan 29 klaim, daya deteksinya 89,8%. Bandingkan dengan 16 tahun untuk menilai imbal hasil.
4. Pra-mortem seorang kandidat memuat lima jalur kegagalan: resesi, kenaikan suku bunga, krisis mata uang, regulasi baru, dan bencana alam. Apa masalahnya?
- Tidak ada masalah, karena jumlahnya sudah lima
- Seharusnya ditulis dalam bentuk masa depan
- Semua jalurnya eksternal; tidak ada kesalahan penulis sendiri dan tidak menyentuh kelemahan dokumennya
- Pra-mortem tidak boleh menyebut peristiwa ekonomi
Pra-mortem wajib memuat minimal satu kesalahan penulis sendiri dan menyentuh kelemahan nyata dokumen. Ini justru uji konsistensi yang paling sering gagal.
5. Mana yang tidak ikut dinilai panel capstone?
- Konsistensi enam dokumen
- Kelancaran dan kepercayaan diri saat berbicara
- Kemampuan menyatakan batas kompetensi sendiri
- Penalaran saat menjawab pertanyaan lanjutan
Kelancaran bicara tidak dinilai. Kandidat yang ragu-ragu tetapi tepat bisa bernilai lebih tinggi daripada yang lancar tetapi tidak bisa menjawab pertanyaan 4 dan 6.
Ringkasan dan kamus mini
1. Yang tidak bisa diukur tidak dinilai. Imbal hasil butuh sekitar 16 tahun untuk dinilai, jadi dihapus dari dokumen.
2. Kalibrasi bisa diukur dengan 29 klaim, tetapi harus dinilai bersama daya pembeda. Skor Brier makin kecil makin baik.
3. Tiga penilai dengan \(r_1 \approx 0{,}60\) memberi reliabilitas 0,818, asalkan mereka menilai sendiri-sendiri dulu.
4. Enam dokumen harus konsisten. Uji yang paling sering gagal: pra-mortem yang tidak menyentuh dokumen sendiri.
5. Pembelaan lisan bekerja lewat pertanyaan lanjutan. Lulus butuh rata-rata ≥ 3,00 dan D4, D5 ≥ 2.
- Capstone
- Proyek akhir yang merangkum seluruh pelajaran satu jenjang.
- Mandat
- Surat tugas tertulis dari pemilik dana kepada pengelola: tujuan, batas risiko, aturan main.
- Rasio Sharpe
- Kelebihan hasil dibagi volatilitas; ukuran hasil per satuan risiko.
- Kalibrasi
- Kecocokan antara keyakinan yang dinyatakan dan proporsi benarnya.
- Frekuensi dasar
- Seberapa sering sesuatu terjadi secara umum, sebelum melihat rincian kasus.
- Daya pembeda
- Kemampuan memberi keyakinan berbeda untuk kasus berbeda, dan tepat.
- Skor Brier
- Rata-rata kuadrat selisih keyakinan dan hasil (1 atau 0). Makin kecil makin baik.
- Reliabilitas
- Konsistensi penilaian bila diulang oleh penilai setara; 0 sampai 1.
- Spearman-Brown
- Rumus reliabilitas gabungan \(k\) penilai: \(k r / [1 + (k-1) r]\).
- Pra-mortem
- Membayangkan rencana sudah gagal, lalu menulis penyebabnya sebelum dijalankan.
- Knockout
- Dimensi yang menggugurkan: nilai di bawah ambang berarti gagal, berapa pun nilai lainnya.
- Pembelaan balik
- Tahap ketika kandidat menyatakan di mana panel keliru.
Materi ini untuk pendidikan, bukan nasihat investasi, nasihat hukum, atau sertifikasi profesi yang diakui otoritas mana pun. Angka daya uji, reliabilitas, dan skor Brier bersifat ilustratif untuk perancangan asesmen, bukan hasil pengukuran atas program tertentu.
Selesai membaca? Mantap!
Uji pemahamanmu dengan kuis modul (4 soal). Skor terbaiknya dihitung 20% dari nilai akhir jenjang. Ingin rincian, rumus lengkap, dan latihan tambahan? Buka naskah lengkap modul ini.