Tadqiqot
Tadqiqot — mahsulotning o'zi, marketing emas
Moliyaviy mashinali o'qitishni aldash oson — va o'zingizni ham aldash oson. Backtestda ustunlikka o'xshab ko'ringan narsalarning aksariyati aslida ma'lumot sizib chiqishi, omad yoki sezilmasdan o'zgargan baholash qoidasidir. Bizning tadqiqot jarayonimiz aynan shuni istisno qilish uchun mavjud — biror narsaga ishonishdan oldin.
Nega moliyaviy ML kuchli sizib chiqishga qarshi nazoratga muhtoj
Hatto bilvosita bo'lsa-da, kelajakdan ma'lumot 'ko'rgan' model aslidagidan yaxshiroq ko'rinadi. Bozor ma'lumotlari ketma-ket va o'zaro bog'liq bo'lgani uchun, sizib chiqishni tasodifan kiritish oson — umumiy scaler, oldinga qaragan oyna bilan yaratilgan belgi yoki qaror nuqtasidan naridagi yorliq orqali. Biz sizib chiqishning oldini olishni ikkinchi darajali vazifa emas, birinchi darajali muhandislik talabi deb hisoblaymiz.
Xronologik test
Har bir bo'lish, o'qitish va baholash qadami vaqt tartibiga amal qiladi. Keyingi davrdan hech narsa oldingi qarorga, jumladan oldindan qayta ishlash va giperparametr tanlashga, ta'sir qilmaydi.
Tadqiqot va Production qabuli ajratilgan
Tadqiqotda yaxshi natija ko'rsatgan metod — tadqiqot natijasi, Production haqida da'vo emas. Tadqiqotdan yuqoriroq ishonch maqomiga ilgarilash — avtomatik ravishda yaxshi ko'rsatkichdan xulosa qilinmaydigan, alohida va ochiq qaror.
Salbiy natijalar
Sinovdan o'tkazilgan metodlarning aksariyati saralanmaydi. Biz sababini qayd etamiz: qaysi tekshiruv o'tmadi, qaysi taxmin buzildi, qaysi dalil yetarli bo'lmadi. Tushunilgan salbiy natija tushunilmagan ijobiy natijadan qimmatliroq.
Model va metodlarni solishtirish
Nomzod modellar va metodlar bir xil qotirilgan qoidalar va bir xil ma'lumot chegaralari ostida solishtiriladi, shunda farqlar nomuvofiq baholash sozlamasini emas, metodning o'zini aks ettiradi.
Mustaqil auditlar
Muhim tadqiqot xulosalarini tekshirilayotgan narsani yaratishda ishtirok etmagan kishi ko'rib chiqadi — o'z-o'zini hisobotiga ishonish o'rniga xesh, bo'linish, bashorat va ko'rsatkichlarni tekshiradi.
Barqarorlik va kauzal rekonstruksiya
Qabul qilingan metodlar daraja va masshtab siljishlariga, shovqinga, yetishmayotgan ma'lumotlarga va vaqtinchalik ekstrapolyatsiyaga qarshi sinaladi, belgilar esa har bir vaqt nuqtasida faqat kauzal jihatdan mavjud ma'lumotni aks ettiradigan tarzda qayta quriladi.
Nega muvaffaqiyatsiz tajribalar tizimni yaxshilaydi
Rad etilgan metod baribir bizga ma'lumot, bozor rejimi yoki o'z jarayonimizdagi ko'r nuqta haqida biror narsa o'rgatadi. Bu darsni e'lon qilish Build in Public'ning bir qismi — va qabul qilingan natijalarimizga nega kamroq emas, ko'proq ishonish mumkinligining sababi.
Dalillar zinapoyasi
Natija qiziqarli bo'lgani uchun da'voga aylanmaydi. U ushbu zinapoyadan — bittalab, tartib bilan — ko'tariladi, aks holda ilgarilamaydi.
Gipoteza
Nomzod g'oya yoki metod har qanday ma'lumotga tegishdan oldin aniq, versiyalangan shartnoma ostida formallashtiriladi.
Backtest
G'oya natija ko'rilishidan oldin belgilangan, qotirilgan, sizib chiqishdan xoli baholash qoidalari ostida tarixiy ma'lumotlarda sinaladi.
Sizib chiqishdan xoli walk-forward validatsiya
Xronologik, kauzal qayta qurilgan validatsiya natija baholash sozlamasining o'zi artefakti emasligini tasdiqlaydi.
Mustaqil audit
Metodni yaratmagan taqrizchi xesh, bo'linish, bashorat va ko'rsatkichlarni tekshiradi — o'z-o'zini hisoboti emas.
Yakuniy tasdiq
Alohida, ochiq qaror natijani qabul qiladi, rad etadi yoki qo'shimcha ishga qaytaradi. Hech narsa o'zini o'zi ilgarilatmaydi.
Live-paper kuzatuvi
Faqat qabul qilingandan keyin metod xatti-harakati jonli bozorda kuzatiladi — hamon virtual, hamon ommaga hisobot beriladi.
Bizning pozitsiyamiz
Tantoryn AI mashinali o'qitishni qaytadan kashf qilishga urinmaydi. Biz mavjud kuchli tadqiqotlar va isbotlangan metodlardan foydalanamiz, so'ngra haqiqiy bozor qarorlariga biror narsa ishonib topshirilishidan oldin Tantoryn'ga xos kauzal, sizib chiqishdan xoli validatsiya va moslik testini qo'llaymiz.
Tadqiqot intizomidan tashqari, jonli MAIN/SHADOW hisobotlarini ko'ring →