Terbentuk pada pertengahan tahun 2023 di Tuban, Punisher yang beranggotakan lima orang yang bersepakat hadir dengan format band yang bersiap untuk mengajak pendengar menikmati sajian musik hardcore yang menjadi angin segar dan warna baru untuk scene di Tuban.
Warna musik Punisher merujuk pada band-band beatdown di Eropa, antara lain seperti Schwarzkopf, Recount, Harlekin, Prajure, Shattered Realm, dan Bulldoze, dengan menyisipkan unsur slamming beatdown seperti Embryectomy.
Pada bulan Oktober 2023 Punisher hadir dan menancapkan bendera “HATRED” yang berisi tiga track di dalamnya. Isu dan spirit yang terbalut dalam “HATRED” merupakan respon dari keresahan terhadap struktur sosial yang tidak bisa dikendalikan, hingga ambisi mengubah tatanan sosial yang mengorbankan banyak orang. Maka, Beat Your Enemy, Prejudice, dan Breakdown dari Punisher dipersiapkan untuk mengungkapkan keresahan yang telah dicatatkan sebagai respon dan movement ini sebagai langkah baru mereka.