Aturan penyelesaian dan definisi hit

Mengapa kita perlu mendefinisikannya terlebih dahulu?

Jika laporan kuantitatif olahraga tidak memiliki aturan penyelesaian ex-ante, laporan tersebut dapat dengan mudah menjadi interpretasi sewenang-wenang setelahnya. PitchCopilot akan mengonfirmasi definisi hit dari setiap konfigurasi inti dan konfigurasi sekunder sebelum rilis, dan menyelesaikannya sesuai aturan setelah pertandingan. Hal ini memungkinkan kinerja publik diperiksa dan juga memberi tahu pembaca bahwa hit rate tidak ditulis ulang begitu saja.

Aturan penyelesaian mencakup sumber hasil, rentang waktu, kondisi valid, penundaan atau pembatalan acara, dan metode statistik pada tingkat konfigurasi yang berbeda. Jika Anda baru mulai membaca, disarankan untuk membaca /guides/reading-kinerja-dashboard terlebih dahulu, lalu gunakan artikel ini untuk memahami angka /kinerja.

Cara menentukan pukulan

Pukulannya bukanlah "arahnya hampir sama" yang samar-samar. Jika dilaporkan bahwa konfigurasi inti sesuai dengan hasil pertandingan tertentu, rentang gol atau arah tim, pemeriksaan yang telah ditentukan sebelumnya akan digunakan selama penyelesaian. Jika acara tersebut dibatalkan, sumber datanya tidak normal, atau hasilnya tidak dapat dikonfirmasi, platform harus menandainya sebagai belum terselesaikan atau dikecualikan daripada mengklasifikasikannya secara paksa.

Proses penerbitan tinjauan manual PitchCopilot memeriksa definisi ini sebelum laporan ditayangkan. Administrator perlu memastikan bahwa laporan yang dikeluarkan oleh model dapat diubah menjadi item yang dapat ditagih dan menghindari penggunaan deskripsi yang terlalu kabur. Inilah sebabnya mengapa laporan ini membedakan antara konfigurasi inti, konfigurasi sekunder, dan observasi: tidak semua wawasan cocok untuk penyelesaian.

Sampel, jendela dan versi

Saat membaca hit rate, harap lihat juga jumlah sampel, jangka waktu, dan versi model. Tingkat keberhasilan jangka pendek mudah terpengaruh oleh hasil yang ekstrim; sampel jangka panjang lebih mencerminkan kualitas kalibrasi. Jika ada perubahan besar pada versi, sampel lama dan sampel baru harus ditafsirkan secara terpisah. Bacaan lebih lanjut tersedia di /guides/model-version-transparency.

Poin Brier dan persentase sasaran lapangan saling melengkapi. Tingkat keberhasilan menjawab "apakah definisi terpenuhi", dan skor Brier menjawab "apakah keyakinan probabilitas sesuai". Jika model memiliki banyak hasil dengan tingkat kepercayaan rendah tetapi memiliki performa buruk dalam interval kepercayaan tinggi, ini berarti peringkat model mungkin perlu disesuaikan. Silakan merujuk ke /guides/brier-calibration untuk bagian ini.

Cara menyelesaikan poin virtual

Studi titik virtual mengubah konfigurasi yang berbeda menjadi unit standar, sehingga memudahkan untuk membandingkan kinerja jangka panjang. Itu tidak mewakili aset nyata dan bukan merupakan janji pendapatan apa pun. Selama penyelesaian, sistem akan memperbarui catatan kumpulan dana virtual sesuai dengan tingkat alokasi, bobot, dan aturan sebelumnya, dan menyajikan hasilnya dalam kinerja publik.

Nilai dari pendekatan ini adalah untuk memungkinkan pembaca melihat apakah model tersebut dapat menjaga konsistensi antara risiko dan keyakinan. Jika konfigurasi inti berfluktuasi terlalu banyak dalam waktu lama, atau konfigurasi pilihan kedua lebih stabil, tim perlu kembali ke metodologi untuk memeriksa bobot dan ambang rilis.

Bagaimana menghadapi situasi kelabu

Situasi abu-abu sering terjadi dalam acara olahraga, seperti penundaan pertandingan, penangguhan awal, koreksi resmi pasca pertandingan, perbedaan waktu dalam sumber data, atau perubahan susunan pemain besar setelah laporan dirilis. Prinsip PitchCopilot adalah menangani peraturan terlebih dahulu, bukan mengubah peraturan karena hasil yang menguntungkan atau tidak menguntungkan. Jika aturan tidak dapat mencakupnya, aturan tersebut harus ditandai dan dijelaskan untuk menghindari memasukkan sampel yang tidak pasti ke dalam tingkat keberhasilan.

Tinjauan manual juga memeriksa apakah laporan dapat diselesaikan sebelum diterbitkan. Narasi seperti "bisa bermain sangat terbuka" dapat berfungsi sebagai konteks, namun untuk beralih ke performa, narasi tersebut harus diterjemahkan ke dalam area mencetak gol atau definisi konfigurasi yang jelas. Hal ini membuat laporan tetap dapat dibaca dan diperiksa.

Pembaca juga harus menyadari pengecualian sampel ketika melihat angka kinerja. Pengecualian tidak selalu berarti hasil yang tersembunyi, terkadang karena kondisi peristiwa tidak lagi memenuhi asumsi pada saat dipublikasikan. Platform tepercaya harus dengan jelas menyatakan alasan pengecualian dan memberikan hit, miss, dan non-settlement di tempatnya masing-masing. Transparansi semacam ini lebih penting daripada sekadar mengejar tingkat keberhasilan yang bagus.

Pengingat membaca tambahan

Aturan penyelesaian juga memungkinkan tim untuk belajar. Jika jenis konfigurasi tertentu sering kali berada dalam situasi abu-abu, itu berarti pernyataan rilis mungkin terlalu kabur; jika terdapat terlalu banyak sampel yang dikecualikan dari jenis tertentu, berarti pipeline data atau pemilihan peristiwa perlu ditingkatkan. Penyelesaian bukanlah akhir, namun titik awal untuk revisi metode selanjutnya.

Pemeriksaan terakhir

Kebiasaan terbaik bagi pembaca adalah menuliskan definisi pukulan Anda sendiri sebelum pertandingan. Bandingkan kinerja publik setelah pertandingan, dan jelaskan kembali hanya jika hasil tersebut dapat dihindari. Di sinilah penelitian kuantitatif lebih dapat diperiksa dibandingkan tinjauan subjektif.

Pertanyaan Umum

Apakah observasi akan disertakan dalam tingkat keberhasilan?

Biasanya tidak. Item observasi merupakan pengingat penelitian dan belum tentu memiliki syarat penyelesaian yang jelas.

Bagaimana cara mengatasi penundaan acara?

Ini harus ditandai sebagai hasil yang belum terselesaikan atau menunggu hasil sesuai dengan aturan sebelumnya, dan tidak boleh diubah secara sewenang-wenang menjadi berhasil atau gagal.

Mengapa hit rate harus dibagi menjadi inti dan sekunder?

Karena tingkat kepercayaannya berbeda, menggabungkan keduanya akan mengaburkan kualitas model.

This translation is for convenience only; the Traditional Chinese version prevails.