Model churn anda memberi AUC 0.94 pada set ujian. Semua orang teruja dalam mesyuarat. Tiga bulan kemudian ia berprestasi lebih teruk daripada peraturan mudah yang ditulis pasukan operasi — kerana salah satu ciri sebenarnya hanya wujud selepas pelanggan memutuskan untuk berhenti. Tiada siapa perasan, termasuk anda.

Anda minta AI membantu analisis penerokaan. Dalam dua minit ia memulangkan dua puluh carta yang cantik dan satu ringkasan yang yakin. Masalahnya, ringkasan itu tidak menyebut bahawa 18% baris hilang untuk satu wilayah, atau bahawa taburan berubah mendadak selepas sistem sumber ditukar pada bulan Mac. Analisis jadi lebih pantas, tetapi juga lebih cetek.

Pihak perniagaan bertanya "jadi apa yang patut kami buat?" dan anda mempunyai notebook sepanjang 800 baris. Anda tahu jawapannya ada di dalam sana, tetapi menukarnya menjadi satu muka surat yang boleh ditindak mengambil masa lebih lama daripada analisis itu sendiri — dan minggu depan tiada siapa boleh menjalankan semula notebook itu, termasuk anda.