Nilai Pro Football Focus dapat menjadi topik polarisasi di antara penggemar dan pemain serta eksekutif NFL.
Keakuratan dan relevansi perusahaan analitik olahraga cenderung dipuji oleh mereka yang berkinerja baik dan dijelekkan oleh mereka yang umumnya tidak.
Tapi apa yang benar-benar masuk ke dalam proses?
Direktur Konten PFF Austin Gayle berbicara dengan Heidi Fang dari Review-Journal pada episode baru-baru ini dari podcast Vegas Nation Takeaways dan menarik kembali tirai tentang bagaimana angka-angka itu dibuat.
Gayle juga memberikan wawasan tentang posisi mana yang paling dia dan rekan-rekannya yakini dalam penilaian dan di mana sistem dapat ditingkatkan.
Ini adalah kutipan dari podcast. Ini telah diedit untuk kejelasan.
Hei Fang: PFF selalu membingungkan saya dalam hal angka. Apa dasar bagaimana ia mulai memberi peringkat dan menilai pemain?
Austin Gayle: Semuanya dimulai dengan pendiri kami, Neil Hornsby, yang berasal dari Inggris. Dia adalah penggemar sepak bola Amerika yang besar dan merasa bahwa tidak ada cukup data yang tersedia untuk rata-rata penggemar, atau bahkan untuk tim, yang menilai pemain lebih baik dan lebih prediktif. Dua puluh tahun yang lalu kita tidak berbicara tentang tekel yang meleset, jatuh, tekanan, tingkat tekanan.
Selain itu, Anda ingin menilai setiap pemain di setiap permainan dari skala negatif 2 hingga positif 2 dengan peningkatan 0,05. Dan dari sana, normalkan ke skala nol hingga 100 agar mudah dipahami sehingga orang dapat melihat 90 versus 80 daripada +12,5 versus -1,5. Ini menyebabkan banyak kesuksesan bekerja dengan tim NFL, bekerja dengan tim sepak bola perguruan tinggi dan memberikan data yang sama sehingga mereka dapat mengevaluasi pemain dengan lebih baik dan melakukan perdagangan dengan lebih baik, tetapi juga memberikan data yang sama kepada konsumen.
Orang yang bermain sepak bola fantasi, orang yang bertaruh pada permainan, menginginkan lebih banyak data prediktif daripada touchdown dan yard per carry. Jadi PFF terus berkembang. Sebagian besar yang akan kami lakukan adalah mengumpulkan, menganalisis, dan memanfaatkan data yang kami rasa lebih prediktif dalam memprediksi performa pemain di masa mendatang, performa tim di masa mendatang.
HF: Ketika datang untuk melihat hal-hal, seperti untuk orang-orang yang tidak selalu melempar setiap umpan atau menangkap setiap bola, bagaimana Anda mendapatkan angka untuk, katakanlah, gelandang ofensif?
AG: Untuk tekel ofensif itu dibagi. Hapus pemblokiran proses, pemblokiran layar, lalu berikan perlindungan. Dengan pemblokiran lari, tiga analis melihat setiap pemain dan menciptakan ekspektasi dasar untuk apa yang seharusnya dilakukan tekel pada permainan itu. Jika dia adalah bagian belakang dari suatu zona, itu memotong seorang pria atau apa pun itu, Anda menilai dia dari negatif ke positif 2, nol adalah harapannya. Jika dia hanya mencapai ekspektasi, itu nol. Jika dia mengalahkan seorang pria, itu adalah plus 1. Jika dia melewatkan satu blok dan jatuh, itu mungkin minus 0,05. Dan Anda melakukannya untuk setiap permainan pemblokiran lari. Untuk perlindungan operan, Anda mendapat nol jika Anda tidak mengizinkan tekanan. Anda mendapat 0,05 jika Anda mengambil pria tambahan dari sebuah aksi. Atau Anda mendapat minus 1 jika Anda langsung dikalahkan dan melepaskan tekanan, meskipun quarterback tidak dipecat.
Jadi untuk linemen ofensif, peringkat kami benar-benar prediktif karena Anda menilai lebih banyak acara. Setiap kali Anda bermain, Anda menang atau kalah. Apakah Anda memblokir pria itu atau tidak?
Dimana rating kita masih perlu ditingkatkan adalah bola luar. Keamanan yang mungkin tidak membuat lebih dari dua tekel dalam satu pertandingan. Bagaimana Anda menilai mereka secara efektif? Linemen ofensif, linemen defensif, running back, para pemain itu dinilai sangat konsisten dan sangat konsisten dalam permainan biner menang dan kalah ini, nilai itu sebenarnya sangat prediktif dan beberapa yang terbaik dari kami.
HF: Jadi mari kita ambil decleatnya. Jika ditambah 1, ditambah 1, bagaimana Anda mendapatkan semua data untuk sampai ke satu nomor yang masuk ke sistem?
AG: Semua data dimasukkan ke dalam perangkat lunak backend yang kami bangun dan kelola oleh tiga orang.
Orang pertama melihat filmnya, orang kedua melihat filmnya, orang ketiga melihat filmnya dan kemudian Anda memiliki seseorang yang meninjau ketiga kegunaan tersebut dan mengidentifikasi ketidaksesuaiannya. Dari situ dimasukkan algoritma yang menempatkan rating pada distribusi normal. Jadi pemain terbaik di NFL adalah plus 20 dalam sebuah game, dan pemain terburuk adalah minus 15.
Anda menyebarkannya ke kurva lonceng normal, sehingga Anda dapat menempatkannya pada nol hingga 100 dan mengatakan 90,5 versus 80,4. Ini juga bagaimana algoritme untuk mencari tahu di mana Anda berbaris. Lebih mudah untuk menciptakan tekanan sebagai bek tepi daripada tekel defensif karena Anda bermain lebih banyak di bilik telepon. Seberapa sering Anda harus menciptakan tekanan?
Penting untuk disebutkan bahwa sistem penilaian PFF adalah banyak nilai produksi. Jelas, mereka lebih prediktif daripada peringkat pelintas atau yard per membawa atau resepsi, tapi itu masih merupakan statistik deskriptif.
Jika pemain mendapatkan nilai 90,6 pada musim ini, itu tidak berarti dia adalah pemain hebat. Itu hanya berarti dia dinilai sangat baik musim itu. Ini mirip dengan quarterback melempar sejauh 6.000 yard dalam satu musim. Apakah itu berarti dia pemain hebat? TIDAK. Dia hanya melempar sejauh 6.000 yard. Apakah ini indikasi bahwa dia mungkin akan lebih sukses di masa depan? Iya, tapi itu belum tentu end all, be all.
Terkadang nilai PFF dapat dianggap seperti itu. Terkadang nilainya seperti, ‘Oh, (Rams cornerback) Jalen Ramsey mendapat 81,1 di game itu. Apakah dia payah?’ TIDAK. Ini berbicara lebih banyak tentang produksinya.
HF: Bagaimana Anda menentukan kategori mana yang paling penting untuk menilai setiap posisi?
AG: Apa yang secara khusus saya cari dalam evaluasi draf perguruan tinggi adalah untuk mengidentifikasi statistik yang lebih prediktif untuk beralih dari perguruan tinggi ke NFL. Banyak dari statistik itu adalah panjang lengan, jarak 10 yard, hal-hal yang sudah lama kami lihat untuk mengevaluasi pemain.
HF: Ayo ambil Cooper Kupp. Apakah orang yang sama melalui dan memberikan analisis untuk menambah jumlahnya sepanjang musim, atau apakah itu menyebar di antara staf?
AG: Pasti tersebar di antara staf. Kami tidak menyukai penilaian orang yang sama untuk tim yang sama. Kami ingin menghapus orang dari prasangka.
Ini adalah proses triple blind di mana orang pertama tidak dapat melihat apa yang dikatakan orang kedua tentang nilai. Orang kedua tidak bisa melihat apa yang dikatakan orang ketiga tentang nilai. Dengan begitu ada beberapa bentuk objektivitas karena bias dapat menyusup ke dalam data jika Anda memiliki penggemar Bucs yang menilai Bucs.
Tapi jelas bukan itu masalahnya karena kami memiliki begitu banyak orang berbeda yang melakukannya. Bahkan orang keempat dalam kelompok kontrol kualitas melihat hal-hal dan melihat perbedaan orang. Ini pasti sesuatu yang merupakan proses peningkatan yang berkelanjutan.
Hubungi Heidi Fang di [email protected]. Ikuti dia di Twitter @HeidiFang.
