Bagaimana untuk menguji pekerja AI sebelum pelancaran

Sebelum melancarkan pekerja AI, penting untuk tidak hanya membuka chat dan bertanya: "Jadi, adakah ia berfungsi?"

Pemilik perniagaan perlu berpura-pura menjadi pelanggan syarikat mereka sendiri. Bukan sebagai pembangun, bukan sebagai pemilik, dan bukan sebagai orang yang sudah mengetahui segalanya, tetapi sebagai pembeli biasa: dengan soalan, keraguan, ungkapan tidak tepat, dan minat yang sebenar.

Ujian seperti ini membantu melihat sama ada pekerja AI bersedia untuk dialog yang sebenar.

---

Mengapa pemilik perlu menguji pekerja AI sendiri

Tiada siapa yang mengetahui perniagaan lebih baik daripada pemilik atau ketua yang bertanggungjawab.

Pembangun boleh memeriksa bahagian teknikal: adakah bot memberi respons, adakah skrip berfungsi, adakah pangkalan pengetahuan disambungkan, dan adakah butang serta borang berfungsi dengan baik. Tetapi hanya pemilik perniagaan yang memahami jawapan mana yang selamat, mana yang lemah, dan mana yang boleh merubah segalanya ke arah yang tidak baik.

Contohnya, pekerja AI mungkin memberi jawapan yang cantik secara formal, tetapi:

• menjanjikan lebih daripada yang sepatutnya;
• menerangkan harga dengan salah;
• mengelirukan syarat penting;
• tidak melihat risiko;
• terlalu cepat bersetuju dengan diskaun;
• menjawab dengan nada yang tidak sesuai;
• tidak menyerahkan soalan yang sukar kepada manusia.

Oleh itu, ujian bukanlah suatu formaliti. Ini adalah pengesahan sama ada pekerja boleh dikeluarkan kepada pelanggan sebenar.

---

Langkah 1. Berpura-pura menjadi pelanggan biasa

Cara terbaik untuk menguji adalah untuk masuk ke dalam dialog seolah-olah anda melihat syarikat itu buat kali pertama.

Tidak perlu menulis soalan yang sempurna dari arahan. Pelanggan sebenar jarang merumuskan dengan sempurna.

Lebih baik bertanya dengan cara manusia:

• "Berapa harganya?"
• "Apa yang termasuk?"
• "Adakah ini sesuai untuk saya?"
• "Apa yang membezakan anda?"
• "Bolehkah lebih cepat?"
• "Apa jaminan yang ada?"
• "Saya tidak sangat faham, terangkan dengan lebih mudah"
• "Bagaimana jika saya mempunyai tugas yang tidak standard?"

Ini menunjukkan sama ada pekerja AI bukan hanya mampu mengulangi teks dari pangkalan pengetahuan, tetapi juga menjalankan perbualan pelanggan yang normal.

---

Langkah 2. Mulakan dengan soalan yang paling popular

Pertama, perlu memeriksa apa yang sering ditanya oleh pelanggan.

Biasanya ini adalah:

• harga;
• tempoh;
• apa yang termasuk dalam perkhidmatan;
• cara untuk memulakan;
• siapa yang sesuai untuk produk;
• apakah had yang ada;
• bagaimana pembayaran dilakukan;
• apa yang akan berlaku selepas permohonan;
• bagaimana untuk menghubungi seseorang;
• apa yang membezakan produk dari penyelesaian biasa.

Jika pekerja AI membuat kesilapan dalam soalan yang paling biasa, adalah terlalu awal untuk melancarkannya. Pertama, perlu memperbaiki pangkalan pengetahuan, arahan atau skrip jawapan.

---

Langkah 3. Semak soalan penting di mana kesilapan berbahaya

Selepas soalan popular, perlu untuk memeriksa bukan saja apa-apa, tetapi tempat yang paling penting.

Ini adalah soalan di mana jawapan yang salah boleh memberi impak besar pada pelanggan, wang, jangkaan atau reputasi syarikat.

Contohnya:

• harga tepat atau syarat pembayaran;
• diskaun dan syarat individu;
• jaminan hasil;
• ungkapan undang-undang atau kontrak;
• tempoh pelaksanaan;
• pemulangan;
• perkara sensitif seperti perubatan, kewangan atau lain-lain;
• janji yang tidak mampu dipenuhi oleh syarikat;
• situasi di mana keputusan perlu diambil oleh manusia.

Di sini, pekerja AI tidak wajib untuk menjawab secara langsung. Kadang-kadang jawapan terbaik adalah untuk mengumpul konteks dan menyerahkan soalan kepada manusia.

---

Langkah 4. Semak penghantaran kepada manusia

Secara berasingan, perlu memeriksa bahawa pekerja AI tidak bertengkar dengan pelanggan ketika manusia diperlukan.

Frasa ujian boleh menjadi ringkas:

• "Berikan saya pengurus"
• "Saya ingin bercakap dengan seseorang"
• "Saya perlukan syarat individu"
• "Saya mempunyai situasi yang kompleks"
• "Saya tidak berpuas hati"
• "Siapa yang bertanggungjawab atas kontrak?"

Logik yang betul adalah: pekerja AI mengakui soalan, mengumpul maklumat penting, membuat ringkasan dan menghantarnya kepada orang yang bertanggungjawab.

Penghantaran kepada manusia bukanlah kesilapan. Ini adalah bahagian normal dari kerja yang selamat.

---

Langkah 5. Perhatikan bukan hanya fakta, tetapi juga gaya

Jawapan boleh jadi secara faktanya betul, tetapi masih tidak sesuai untuk perniagaan.

Ketika menguji, perlu melihat:

• adakah pekerja AI bercakap dalam bahasa yang jelas;
• adakah ia kedengaran terlalu kering;
• adakah ia memberi tekanan kepada pelanggan;
• adakah ia menjanjikan yang tidak mungkin;
• adakah ia melanjutkan penjelasan ketika jawapan ringkas diperlukan;
• adakah ia mengekalkan gaya jenama;
• adakah ia membantu pelanggan mengambil langkah seterusnya.

Pekerja AI yang baik seharusnya lebih menyerupai kakitangan syarikat anda daripada rangkaian neural secara rawak.

---

Langkah 6. Catat kesilapan secara bertulis

Jika semasa ujian ada sesuatu yang tidak memuaskan, lebih baik tidak menulis kepada pembangun hanya dengan: "bot memberi jawapan yang salah".

Lebih berguna untuk merekod dengan tepat:

• soalan apa yang ditanya;
• apa yang dijawab oleh pekerja AI;
• apakah yang tidak betul;
• bagaimana ia sepatutnya menjawab;
• sejauh mana kesilapan itu penting;
• adakah perlu mengambil tangkapan skrin dialog.

Dengan cara ini, pembetulan dapat dilakukan dengan lebih cepat dan tepat.

---

Bilakah boleh dilancarkan

Pekerja AI boleh dikeluarkan kepada pelanggan apabila ia dengan yakin lulus tiga peringkat ujian:

1. Soalan popular — memberi jawapan yang betul kepada soalan yang sering ditanya.
2. Soalan penting — tidak membuat janji yang berbahaya dan tidak memutarbelitkan syarat.
3. Kes sukar — memahami bila perlu menyerahkan dialog kepada manusia.

Tidak perlu menunggu keadaan yang sempurna, di mana bot mengetahui segala-galanya. Keadaan seperti itu biasanya tidak wujud.

Penting agar ia selamat untuk senario utama, tidak mereka-reka di tempat yang kritikal dan mampu menyerahkan situasi yang dipertikaikan kepada manusia.

---

Selepas pelancaran, ujian diteruskan

Walaupun ujian yang baik tidak akan menunjukkan semua kemungkinan soalan pelanggan.

Selepas pelancaran, tetap akan muncul:

• ungkapan baru;
• bantahan yang tidak dijangka;
• situasi yang jarang berlaku;
• kekosongan dalam pangkalan pengetahuan;
• jawapan yang tidak tepat;
• tugas baru untuk pekerja AI.

Ini adalah normal. Pekerja AI dilatih dalam proses kerja.

Tugas perniagaan adalah untuk menangkap kekosongan, menyampaikan pembetulan dan secara beransur-ansur meningkatkan pekerja. Seperti dengan manusia biasa: pertama dia menjalani latihan pengenalan, kemudian bekerja, menerima maklum balas dan menjadi lebih tepat.

---

Yang paling penting

Sebelum pelancaran, pemilik perlu memainkan peranan seorang pelanggan syarikat mereka sendiri.

Pertama, periksa soalan yang paling sering ditanya. Kemudian — soalan yang paling penting dan berisiko. Kemudian pastikan bahawa situasi yang sukar diserahkan kepada manusia.

Dan selepas pelancaran, terus kumpulkan kekosongan dan ketidaktepatan dari dialog sebenar.

Dengan cara ini, pekerja AI muncul dalam pekerjaan bukan sebagai "rangkaian neural ajaib", tetapi sebagai pekerja yang boleh dikendalikan: dengan peraturan yang jelas, pemeriksaan, tanggungjawab dan peningkatan secara beransur-ansur.