Yang diuji adalah tambahan deskripsi, bukan seluruh toko
Studi Generative AI and Sales Productivity: Field Experiments in Online Retail dilakukan pada satu peritel lintas negara yang tidak disebutkan namanya. Bagian deskripsi produk mencakup lima subeksperimen acak, masing-masing selama satu minggu pada Desember 2023. Bahasa yang digunakan adalah Inggris, Spanyol, Prancis, Portugis, dan Korea; bahasa tersebut tidak menunjukkan negara konsumen.
Analisis mencakup 4.772.937 observasi konsumen setelah mereka mengeklik halaman detail produk terpilih. Ini bukan jumlah pembeli atau seluruh pengunjung situs. Deskripsi AI ditambahkan pada deskripsi manusia yang sudah ada; jika belum ada teks, deskripsi disediakan. Kelompok kontrol mempertahankan kondisi awal. Jadi, ini bukan penggantian tulisan manusia dengan AI untuk mengadu kualitasnya dengan penulis ahli.
Baca studi dan metodenya2,1% bukan kenaikan jumlah pesanan atau laba
Ukuran penjualan di sini adalah total pengeluaran untuk pesanan produk dalam dolar AS per konsumen. Estimasi tambahannya sebesar US$0,0104 per konsumen, dengan galat baku (standard error) US$0,00417 dan p<0,05. Kenaikan relatif 2,05% pada Tabel C5 dibulatkan menjadi 2,1% pada Tabel 4.
Angka itu tidak berarti konversi naik 2,1 poin persentase, jumlah pesanan naik 2,1%, atau nilai pesanan rata-rata di antara pembeli meningkat sebesar itu. Laba juga tidak diukur dengan angka ini. Membaca kenaikan relatif bersama nilai absolut mencegah kesan yang berlebihan; mengalikannya langsung dengan pendapatan tahunan tidak didukung eksperimen.
Baca studi dan metodenyaPerhatikan teks yang tersedia sebelum eksperimen
Hampir separuh produk yang dijual langsung oleh platform sebelumnya tidak memiliki deskripsi atau hanya memiliki sedikit teks. Ini memberi konteks tentang informasi awal, tetapi tidak membuktikan bahwa mengisi kekosongan informasi merupakan satu-satunya penyebab hasil.
Analisis berbahasa Inggris juga membandingkan efek relatif pada deskripsi awal pendek dan panjang. Perbedaannya memiliki p=0,0536, sehingga tidak memenuhi ambang signifikansi 5%. Jangan mengubah temuan ini menjadi klaim bahwa halaman pendek pasti mendapat manfaat lebih besar atau menjadi aturan jumlah kata yang berlaku umum.
Baca studi dan metodenyaTentukan celah informasi sebelum memesan pekerjaan
Pertanyaan awal yang lebih berguna adalah informasi apa yang dibutuhkan calon pelanggan tetapi belum tersedia. Spesifikasi, syarat penggunaan, dan kompatibilitas harus berasal dari bahan produk yang dapat diperiksa, bukan tebakan model. Tentukan pembaca, bahasa, serta penanggung jawab persetujuan konten.
Lalu pilih hasil bisnis yang ingin dinilai dan hitung biaya penyiapan data, pemeriksaan fakta, penyuntingan lokal, pemeliharaan, serta hak penggunaan. Kecepatan membuat draf bukan ukuran biaya konten siap terbit. Nilai pekerjaan dengan cakupan terbatas dari kebutuhan tersebut, bukan dari janji mengulang persentase penelitian.
Bukti yang menjanjikan, dengan jangkauan terbatas
Ini adalah pengujian singkat pada satu peritel dalam konteks 2023. Hasilnya tidak membuktikan peningkatan trafik SEO, kutipan AI, margin, atau pengembalian investasi usaha kecil, dan tidak menjamin efek jangka panjang. Artikel ini merujuk arXiv versi 6 yang direvisi 29 Juni 2026, dengan naskah bertanggal 30 Juni. Statusnya pracetak; artikel ini tidak menyebutnya sebagai penelitian yang sudah ditelaah sejawat.
Penulis mengungkapkan bahwa Fang dan Yuan pernah menjadi konsultan mitra penelitian, sedangkan Zhang merupakan karyawannya. Hubungan itu perlu diketahui saat membaca metode dan hasil. Studi ini dapat mendukung pertimbangan memperbaiki informasi produk, tetapi bukan ramalan kenaikan penjualan toko Anda.
Baca studi dan metodenyaDiskusikan informasi produk yang dapat diverifikasi, pembaca, dan batas pekerjaan melalui layanan MindVerve yang tersedia. Kenaikan yang sama bukan asumsi atau janji.
Lihat layanan konten dan kampanye AISumber
Pengungkapan penelitian: Fang dan Yuan pernah menjadi konsultan mitra, sedangkan Zhang adalah karyawannya. Artikel ini tidak mewakili peneliti atau peritel tersebut.
Baca studi dan metodenyaGenerative AI and Sales Productivity: Field Experiments in Online Retail · Fang, Yuan, Zhang, Donati, Sarvary · arXiv:2510.12049v6CC BY 4.0