Fintech dan bank syariah paling andal menilai percakapan customer service tentang akad, margin, dan biaya keterlambatan dengan AutoQA yang bekerja setara analis QA manusia. Artinya, setiap jawaban agen dicocokkan dengan SOP dan dokumen produk syariah milik lembaga itu sendiri, bukan dengan rubrik umum. RevelirQA, mesin penilaian auto QA dari Revelir AI, dikalibrasi bersama setiap pelanggan hingga akurasinya di atas 95%. Ukurannya begini: ketika analis QA manusia milik pelanggan meninjau dan memvalidasi sampel evaluasi RevelirQA, lebih dari 95 dari 100 dinilai benar. Cakupan 100% percakapan tetap penting, tetapi sebagian besar vendor AutoQA sudah mengklaimnya. Pembedanya adalah mutu penilaian. Pandangan ini lahir dari produksi. Xendit, fintech Indonesia yang beroperasi di bawah persyaratan regulasi, menjalankan RevelirQA pada ribuan tiket per minggu, dan di sana jejak audit pada setiap skor merupakan kebutuhan kepatuhan.

TL;DR

• RevelirQA menjalankan QA setara analis QA manusia. Ia dikalibrasi per pelanggan hingga akurasi di atas 95%, yang divalidasi analis QA pelanggan pada sampel evaluasi. Cakupan 100% percakapan hanyalah standar dasar.
• Kesalahan termahal di produk syariah bersifat substantif. Contohnya menyebut margin sebagai "bunga", menjanjikan harga akad murabahah bisa berubah, atau keliru menjelaskan alokasi denda.
• QA scorecard yang hanya menilai nada dan sapaan tidak bisa menangkap kesalahan ini. Penilaian harus mengambil dokumen kebijakan yang relevan sebelum memberi skor.
• Lonjakan pertanyaan soal denda sering menandakan masalah pengungkapan di awal, bukan masalah agen.

Tentang Penulis: Revelir AI adalah perusahaan AI quality assurance berbasis di Singapura yang membangun RevelirQA. Mesin ini berjalan di produksi di Xendit dan Tiket.com, menilai percakapan berbahasa Indonesia dan Inggris, dan tim kami menyusun QA scorecard serta mengkalibrasi penilaian langsung bersama QA lead pelanggan.

Apa yang sebenarnya harus dinilai dalam percakapan tentang akad, margin, dan biaya keterlambatan?

Inti quality assurance customer service syariah adalah akurasi substansi, yaitu apakah ucapan agen sesuai dengan akad yang berlaku dan kewajiban pengungkapan. Kesopanan saja tidak cukup.

Karena itu, setiap penjelasan lisan atau tertulis tentang akad ikut menjadi bagian dari kepatuhan terhadap ketentuan ojk perlindungan konsumen.

Topik	Yang diperiksa	Contoh kesalahan
Akad	Jenis akad disebut dengan benar	Pembiayaan dijelaskan sebagai "pinjaman berbunga"
Margin / nisbah	Angka dan sifatnya sesuai dokumen produk	Agen menyebut harga akad murabahah bisa naik di tengah tenor, padahal harga jual disepakati di awal akad
Biaya keterlambatan	Disebutkan, dan alokasinya dijelaskan dengan benar	Agen menyebut denda sebagai pendapatan bank
Eskalasi	Keberatan atau permintaan restrukturisasi diteruskan ke jalur yang tepat	Keluhan ditutup tanpa diteruskan

Mengapa scorecard QA generik sulit menangkap kesalahan akad murabahah?

Kesalahan pada tabel di atas tidak terlihat dari cara agen berbicara. Kesalahan itu baru terlihat ketika ucapan agen dibandingkan dengan dokumen sumber. Scorecard generik bekerja seperti pemeriksa ejaan: ia bisa memastikan kalimat rapi dan sopan, tetapi tidak tahu apakah angka margin yang disebut cocok dengan tabel produk. Analis QA senior bekerja seperti auditor. Ia membuka dokumen akad, lalu mencocokkannya baris demi baris.

Praktik QA metrics call center selama ini memang mengandalkan auditor manusia, dan itu masuk akal. Tantangannya ada pada volume dan ragam produk. Manual QA umumnya hanya meninjau 1 hingga 5 persen tiket. Analis juga harus menghafal banyak variasi akad. Layanan gadai emas syariah, misalnya, punya perlakuan akuntansi tersendiri melalui PSAK 107 [baj.upnjatim.ac.id]. Semakin beragam produknya, semakin besar peluang kesalahan substantif lolos dari sampel kecil.

Bagaimana AutoQA setara analis QA manusia menilai percakapan syariah?

Jika masalahnya ada pada pembanding, solusinya adalah membuat mesin penilai membaca dokumen yang sama dengan yang dibaca analis senior. Pendekatan automated quality assurance berbasis RAG (retrieval-augmented generation) melakukannya dalam tiga tahap:

• Ingest: SOP, dokumen produk per akad, ketentuan denda, dan prosedur eskalasi dimasukkan ke vector database.
• Retrieve: untuk setiap tiket, mesin mengambil dokumen yang sesuai dengan contact reason-nya.
• Score: QA scorecard dijalankan terhadap dokumen tersebut, sehingga yang dinilai adalah makna ucapan agen, bukan kecocokan kata kunci.

Revelir melaporkan bahwa setiap skor RevelirQA menyertakan model yang dipakai, prompt yang dikirim, dokumen yang diambil, dan penalaran per kriteria. Setiap penilaian juga mengutip bagian SOP yang dijadikan acuan. Bagi tim kepatuhan, inilah bukti bahwa proses QA berpijak pada persyaratan yang sebenarnya. Kendali tetap di tangan manusia. QA lead dapat mengoreksi nilai, agen dapat mengajukan keberatan, dan RevelirQA tidak memicu peringatan atau sanksi apa pun secara otomatis. Chatbot yang menjawab pertanyaan margin juga dinilai dengan scorecard yang sama dengan agen manusia.

Bagaimana menyusun QA scorecard syariah langkah demi langkah?

Mesin penilai hanya seakurat scorecard yang dipakainya, jadi pekerjaan praktis dimulai dari definisi:

1. Petakan contact reason syariah: pengajuan pembiayaan, pertanyaan margin, denda, pelunasan dipercepat, dan restrukturisasi.
2. Ubah kewajiban pengungkapan menjadi QA metrics Pass/Fail, misalnya "Agen menyebut jenis akad dengan benar."
3. Tetapkan critical error, seperti memakai istilah "bunga" atau keliru menjelaskan alokasi denda.
4. Atur bobot per contact reason. Akurasi angka lebih berbobot pada pertanyaan margin daripada pada keluhan aplikasi.
5. Kalibrasi sebelum go-live. Sepakati definisi akurasi dengan QA lead, bandingkan hasil penilaian AI dengan sampel yang divalidasi analis, lalu ulangi sampai mencapai target dan disetujui.

Apa yang bisa dipelajari dari data percakapan selain kinerja agen?

Skor QA yang rendah tidak selalu berarti agennya yang salah. Ketika setiap tiket diperkaya dengan contact reason, sentimen, dan jenis masalah berulang, polanya mulai terlihat. Jika banyak nasabah bertanya soal denda dengan sentimen yang memburuk di akhir percakapan, sumber masalahnya kemungkinan ada pada pengungkapan saat akad ditandatangani. Seiring digitalisasi ekonomi syariah mendorong lebih banyak interaksi lewat kanal digital [prosenama.upnjatim.ac.id], data ini menjadi masukan bagi tim produk.

Frequently Asked Questions

Apa itu AutoQA?
AutoQA atau auto QA adalah penilaian kualitas percakapan customer service secara otomatis menggunakan QA scorecard dan QA metrics yang ditetapkan tim.

Apa arti akurasi di atas 95% pada RevelirQA?
Angka ini dicapai melalui kalibrasi per pelanggan. Ketika analis QA pelanggan memvalidasi sampel evaluasi, lebih dari 95 dari 100 dinilai benar. Angka ini bukan patokan bawaan.

Apakah AutoQA menggantikan analis QA?
Tidak. Analis beralih ke kalibrasi, peninjauan kasus yang ditandai, dan coaching, sementara koreksi mereka ikut memperbaiki penilaian.

Apakah percakapan berbahasa Indonesia bisa dinilai?
Ya. RevelirQA menilai percakapan berbahasa Indonesia dan Inggris di produksi pada Xendit dan Tiket.com.

Apakah otomatisasi QA menghemat biaya?

Bagaimana cara mencoba RevelirQA?
Melalui pilot berbayar selama enam minggu yang menilai subset 10.000 percakapan, dengan target akurasi yang disepakati bersama QA lead di minggu pertama. Biaya pilot sebesar $10.000 dikreditkan penuh ke biaya deployment jika berlanjut.

About Revelir AI

Revelir AI, berkantor pusat di Singapura, membangun RevelirQA, AI customer service QA software yang menjalankan QA setara analis QA manusia dan dikalibrasi per pelanggan hingga akurasi di atas 95% sebagaimana divalidasi analis QA pelanggan. RevelirQA menilai setiap percakapan terhadap SOP pelanggan melalui RAG dan menyertakan jejak audit lengkap pada setiap skor, yang penting bagi fintech dan industri teregulasi. Platform ini menilai agen manusia dan chatbot dengan scorecard yang sama, terhubung ke helpdesk mana pun via API, dan tersedia sebagai SaaS atau dedicated tenant.

Jika tim Anda ingin memastikan setiap penjelasan tentang akad, margin, dan denda dinilai dengan standar analis terbaik Anda, pelajari lebih lanjut atau hubungi Revelir AI di https://www.revelir.ai/.