Jadval ma’lumotlarida mashinaviy o‘qitish: hisob tizimidan eksport xomashyo sifatida

Biznes ma’lumotlarining asosiy qismi jadval ko‘rinishida: hisob tizimidagi hujjatlar, CRM’dagi bitimlar, Excel’dagi rejalar. Mashinaviy o‘qitish uchun bu ajoyib xomashyo — rasm yoki nutqdan farqli o‘laroq, belgilar tayyor va ularning ma’nosi tushunarli. Lekin eksportdan modelgacha bo‘lgan yo‘lda o‘ziga xos tuzoqlar bor.

Ma’lumotlarni yig‘ish

Odatda bir nechta manba kerak:

• savdo hujjatlari — sana, mijoz, tovar, miqdor, summa;
• ma’lumotnomalar — mijozlar, tovarlar, filiallar;
• CRM — arizalar, aloqalar, bitim bosqichlari;
• tashqi omillar — bayramlar, aksiyalar kalendari.

Ularni birlashtirish uchun yagona identifikatorlar kerak. Agar mijoz CRM’da telefon bo‘yicha, hisob tizimida esa nom bo‘yicha saqlansa, avval moslashtirish ishini bajarish kerak.

Tozalash

• Dublikatlar va sinov yozuvlari
• Qaytarishlar va bekor qilingan hujjatlar
• Turli formatdagi sanalar va summalar
• Bo‘sh maydonlar — tasodifiymi yoki ma’noga egami
• Ma’lumotnomalardagi bir xil tovarning turli nomlari

Belgilar yaratish

Model xom hujjatlarni emas, xulosa ko‘rsatkichlarini ko‘radi. Masalan, mijoz ketishini bashorat qilish uchun:

• oxirgi xariddan beri kunlar;
• so‘nggi davrlardagi xaridlar soni va dinamikasi;
• o‘rtacha chek va uning o‘zgarishi;
• toifalar soni;
• shikoyatlar va qaytarishlar.

Belgilarni soha bilimiga ega xodim bilan birga o‘ylab topish eng yaxshi natija beradi.

Ma’lumot sizib chiqishi — asosiy tuzoq

Agar modelga bashorat qilinayotgan paytda hali ma’lum bo‘lmagan ma’lumot berilsa, sinovda natija ajoyib, amalda esa yomon bo‘ladi. Misollar:

• «bitim yopilganmi» bashoratiga «shartnoma raqami» maydoni kiritilgan;
• keyingi oy savdosini bashorat qilishda shu oyning ma’lumotlari ishlatilgan;
• ma’lumotlar sana bo‘yicha emas, tasodifiy bo‘lingan.

Qoidasi: har bir belgi uchun so‘rang — «bu qiymat bashorat qilinadigan paytda haqiqatan ma’lum bo‘ladimi?»

Model tanlash

Jadval ma’lumotlarida qarorlar daraxtlari asosidagi ansambllar (gradient busting) ko‘pincha kuchli natija beradi. Lekin avval oddiy bazaviy model quring — masalan, logistik regressiya yoki «o‘tgan davr qiymati» qoidasi — va murakkab model undan qancha yaxshiroq ekanini ko‘ring.

Sinov

Vaqt bo‘yicha bo‘ling: eski davrda o‘qiting, keyingi davrda tekshiring. Bu modelning haqiqiy ishlash sharoitiga yaqin. Natijani biznes tilida ifodalang: «ketadigan mijozlarning qancha qismini oldindan topdik va ro‘yxatda qanchasi xato».

Ishga tushirish

Model hisob-kitobi muntazam bajarilishi kerak: masalan, har kecha yangi eksport, hisob, natija CRM maydoniga yoki menejer uchun ro‘yxatga. Eksport formati o‘zgarsa, jarayon buziladi — shuning uchun tekshiruvlar va ogohlantirishlar qo‘shing. Model natijasi ishlatilishini ham kuzating: agar ro‘yxat bo‘yicha hech kim harakat qilmasa, model foyda bermaydi.