Yapay Zeka ile App Store Yorumları Nasıl Analiz Edilir: Uygulama Geliştiriciler İçin Pratik Bir Kılavuz

Dizüstü bilgisayarımda reviews_FINAL_v3.xlsx adında bir tablo var ve ne final ne de 3. versiyon. Baharda, insanların uygulamamız hakkında söylediklerini elle takip etmeye çalışmamın bir sonucuydu. On bir gün sürdü. Onun yerini, çok uzun süre direndiğim bir yapay zeka destekli uygulama yorumu sistemi aldı, çünkü dürüst olmak gerekirse, bundan üstün olduğumu düşünüyordum. Üstün değildim.

Sadece bunu istiyorsanız, kısa cevap: App Store yorumlarını yapay zeka ile analiz etmek için resmi Apple ve Google API'leri üzerinden yorumları çekersiniz, bir dil modeline her birine üç etiket yapıştırmasını (ruh hali, konu, hangi özellik) sağlarsınız, sonra bu etiketleri sıkılmış bir muhasebeci gibi sayarsınız. En büyük, en sinirli yığın sıradaki sprint'inizdir. İşin sırrı bu. Aşağıdaki her şey, morluklar dahil, her parçanın neden önemli olduğunu anlatıyor.

Manuel App Store yorum analizi neden işe yaramıyor

Kızgın yorumlar sorun değil. Pencereden fırlatılan bir tuğla gibi gelirler.

Sorun, çisenti gibi gelenler.

Sürüm 2.4.1'de ana ekran widget'ını bozduk. Dramatik bir şekilde değil. Sessizce yenilenmeyi bıraktı sadece. Bir hafta içinde otuz dört kişi bundan bahsetti. Biliyorum çünkü geri dönüp saydım, midem bulanarak. Hiçbiri "widget" kelimesini yazmadı. "Şu kutu şeyi." "Ana ekran güncellenmiyor." "Güncellemeden sonra bozuldu mu??" Portekizce olan birini ancak bir ay sonra çevirdim.

Fark etmek altı gün sürdü. Ben şahsen o yorumlardan sekizini okumuştum. Bağlantıyı kuramadım. Elle yapılan uygulama yorumu analizi işte böyle bir şey: okumuyorsunuz, duman arıyorsunuz ve çisenti duman çıkarmaz.

Kimsenin açmadığı 3 yıldızlı yorumları (bu arada, işe yarar isteklerin, sakin insanların bulunduğu yer) ve İngilizce olmayan her şeyin sırra kadem basması gerçeğini de ekleyin; yol haritanız, hangi şikayetler yüksek sesle dile getirildiyse onların üzerine kurulu oluyor.

Yapay zeka yorum analizi gerçekte ne yapar

Kaba versiyonu: "yapay zeka yorum analizi" ifadesi, bunu olduğundan daha akıllıca gösteriyor. Dört iş var.

Bir, duygu durumu. Yıldızlar değil. Kelimelerin söylediği. Biri bize beş yıldız verdi ve "her sabah çöküyor ama seviyorum" yazdı. Üzerine kurdele bağlanmış bir hata raporu.

İki, konu. Hata, istek, fiyat şikayeti, giriş sorunu, övgü ve istediğinizden daha büyük olacak "Diğer" adlı bir kova.

Üç, hangi özellik. Hatırlatıcılar. Çevrimdışı mod. Ödeme ekranı. Sizinkiler her neyse.

Dört, gruplama. "Şu kutu şeyi" ile "ana ekran güncellenmiyor"un iki değil, bir şikayet olduğunu anlamak.

Bu etiketleri her yoruma yapıştırın, gerisi aritmetik. Aritmetiği yapabilirim. Yapamadığım şey, soğuk algınlığıyla gece 11'de dokuz yüz yorumu tutarlı bir şekilde etiketlemekti.

App Store yorumları yapay zeka ile nasıl analiz edilir: adım adım

Adım 1: Yorumları konsoldan çıkarın

Kopyala yapıştır yoluyla değil. Ben öyle yaptım. On bir gün. Yukarıdaki tabloya bakın.

Apple'ın App Store Connect API'si yorumları çekip yanıt göndermenize imkan tanır. Google Play'de bunun karşılığı Play Console'da bulunuyor. İkisi de, zaten ödemekte olduğunuz geliştirici hesabının dışında herhangi bir maliyet getirmiyor.

İki yol var. Her gece çalışan küçük bir script yazın, ya da çekme işini yapan bir App Store yorum analizi aracı bağlayın. Araç yolunu seçtiyseniz önce bir şeyi kontrol edin: sadece resmi API'ler, başka bir şey değil mi? İlk denemem bir scraper kullanıyordu. Bir ayda iki kez bozuldu ve listelemimizin işaretleneceğine ikna olmuş halde uzun bir pazar günü geçirdim. Olmadı. Ama ben yaşlandım.

Adım 2: Önce çevirin, sonra analiz edin

Burada benden ders çıkarın. Ham metin üzerinde analiz çalıştırdım ve widget hatası üç ayrı sorun olarak çıktı, çünkü İngilizce, İspanyolca ve Portekizce. Aynı hata, üç kova, hepsi görmezden gelinecek kadar küçük. Tek bir yorum bile etiketlenmeden önce her şeyi bir dile çevirin. Yanıt yazmak için orijinalini de saklayın.

Düzgün bir uygulama yorumu analiz yazılımı bunu sorulmadan yapar. Kendi çözümünüzü kurarsanız bu, işlem hattında bir aşama daha demektir. Can sıkıcı. Atlarsanız sayılarınız yalan söyler.

Adım 3: Her yorumu duygu durumu ve konu için etiketleyin

Modelin işin içine girdiği kısım bu. Demoların gösterdiğinden daha az sihirli. Prompt'um, kabaca:

"Bu uygulama yorumunu oku. Bana duygu durumunu (pozitif, nötr, negatif, karışık), ana konuyu (hata, özellik isteği, övgü, fiyatlandırma, hesap, diğer) ve varsa bahsedilen belirli özelliği ver."

Tüm yorumlar üzerinde çalıştırın. Cevapları metnin yanına kaydedin.

İtiraf: ilk konularım yanlıştı. "Hesap" kategorisi yoktu, bu yüzden bir yığın giriş sorunu hatalar altında sınıflandı ve var olmayan bir çöküşü aramak için bir Perşembe günümü harcadım. İlk turdan sonra kategorilerinizi yeniden yapacaksınız. Herkes yapıyor.

Adım 4: Gruplayın ve sayın

Tablo. Önce konu, sonra özellik. Sayıya göre sıralayın. Ortalama yıldıza göre tekrar sıralayın.

Her iki listenin de en üstü yol haritanız. Çok fazla bahsedilme, düşük puan, bir özellik. Bu bir destek bileti değil. Sprint.

Bu görünümü kendim hiç oluşturmadım. AI Review Sensor içindeki analitik dashboard'da bu zaten vardı: yanıt oranı, duygu durumu dağılımı, mağaza bazlı dağılım; ve işte mağaza bazlı kısım, Android'in sessizce ortalamamızı düşürdüğünü, ben iOS'u suçlarken öğrenmemi sağladı. Kendi başınıza yapmak isterseniz bir pivot tablo işin büyük kısmını halleder. Büyük kısmını. Hepsini değil.

Adım 5: Anlık görüntüyü değil, trendi izleyin

Bir haftalık veri size neyin alev aldığını söyler. Üç ay, suyun işe yarayıp yaramadığını söyler. Ekibiniz sadece ikincisiyle ilgilenir.

Yapacağımı söylediğimin aksine, gerçekte baktığım şeyler:

• Haftalık negatif yorum payı

• Her sürüm için en çok üç şikayet konusu

• Bir yorumun yanıtlanmadan ne kadar beklediği

• Yanıt oranı

Bir konu, bir sürümden sonra ilk üçten düştüğünde, bu sizin kanıtınızdır. Sürüm notlarına ekleyin. Apple hatta sorunu düzelttikten sonra geri dönüp eski yorumlara yanıt vermenizi öneriyor. Gözlerimi devirdim. Sonra aynı hafta içinde iki 1 yıldız, 4 yıldıza dönüştü ve devirmeyi kestim.

Adım 6: Döngüyü yanıtlarla tamamlayın

Kimsenin harekete geçmediği bir grafik, insanları görmezden gelmenin daha maliyetli bir yoludur. Kullanıcıları neyin rahatsız ettiğini bildiğinizde, bunu söyleyin. Apple, yanıt verdiğinizde yorumu yapan kişiye bildirim gönderir ve kişi puanını değiştirebilir. Bazıları değiştiriyor.

Her yanıtı kendiniz yazmanız gerekmez. Yapay zeka bunları sizin tonunuzda, yorumu yapan kişinin dilinde taslak olarak hazırlar ve siz kahvenizle birlikte bir grubu onaylarsınız. Düşük yıldızlı olanlar yine de bir insana gider. Bu benim taviz vermediğim tek konu ve bu yüzden tartışmalar yaşadım. AI Review Sensor, yıldız eşiğinizin altındaki her şeyi varsayılan olarak beklemeye alır ve otomasyon ve onaylar belgesi, bir yanıtın kendiliğinden gönderilmesine izin verilmeden önce karşılaması gereken kuralları listeler.

Bir App Store yorum analizi aracı seçmek

Bunu inşa etmek, elinizde tutmayı tercih edeceğiniz bir hafta sonu gibi geliyorsa, işte bir uygulama yorumu analiz yazılımından istediğim şeyler. Önce yanlış seçerek öğrendim.

• Sadece resmi Apple ve Google API'leri, başka hiçbir şey. (Üçüncü kez. Bırakıyorum.)

• Eklenti değil, yerleşik çeviri.

• Haftalık bir özet e-postası değil, her yorumda duygu durumu ve konu.

• Sürümler arası bir trend görünümü.

• Spam ve sahte yorum işaretleme. Bir bot sürüsü ve grafiğiniz konfetiye dönüşür.

• Otomatikleştirilen her şeyde bir insan onay adımı.

• Dışa aktarma. Verileriniz sizinle birlikte gidebilmeli.

Ve fiyatlandırma. Yorum başına ücretlendirme, iyi iş çıkardığınızda daha fazla ödemeniz demek, bu da mantığa ters. Sabit ücret, kartı elinde tutan kişiyi ikna etmeyi kolaylaştırır. Google'ın puanlama ve yorumlar yardım sayfasına da bakın, Play Console zaten bunun bir kısmını ücretsiz olarak size veriyor.

Kaçınılması gereken yaygın hatalar

Yıldızlara güvenmek. Beş yıldız, "her sabah çöküyor". Bunun gibi onlarcası var.

Sadece bir mağaza. iOS ve Android kullanıcılarımız tamamen farklı şeylerden şikayet ediyordu. Birine bakarsınız, yarısını düzeltirsiniz.

Spam'i saymak. Bir Salı gecesi, o öğleden sonra oluşturulmuş hesaplardan altmış tek satırlık 1 yıldız. Bunları sayarsanız grafiğiniz bir uçurum kenarı olur. Önce işaretleyin. Sonra sayın.

Kimsenin okumadığı rapor. Haftalık şikayet listesi sprint planlamasında yoksa, onu hazırlamayı bırakın. Gerçekten.

Basit bir haftalık rutin

Benimki, aşağı yukarı:

• Pazartesi, on dakika. Trend görünümü, ilk üç, yeni bir şey var mı.

• Her gün, beş dakika. Taslakları onayla. Beklemeye alınan düşük yıldızlıları gerçekten oku.

• Bir sürümden önce, en çok istenenleri çek, hangilerinin dahil edildiğine bak, notlarda adlarını ver.

• Bir sürümden sonra, yeni bir sıçrama için izle. Üç gün.

Sunum yok. Düzenli toplantı yok. Bu kadar.

Son düşünceler

Yapay zeka beni yorum okumaktan vazgeçirmedi. Hepsini okumamdan vazgeçirdi, ki bu aynı şey değil. Neyin yapılacağına ve geri ne söyleyeceğimize hâlâ ben karar veriyorum. Sadece artık, trende geçerken göz gezdirdiğim son yirmi yorum yerine, tüm tabloyla.

Kararsız mısınız? Bir ayı çekin, etiketleyin, sayın. Bilmediğiniz bir şey bulacağınıza gerçek para yatırırım. Biz widget'ı bulduk. O öğleden sonra kendini kat kat ödedi ve reviews_FINAL_v3.xlsx o zamandan beri açılmadı.