Desa Karangasem berasal dari 2 (dua) kata yaitu Karang dan asem.Yang dimaksud Karang adalah Pekarangan sedangkan asem adalah Pohon Asem.Konon ceritanya Desa Karangasem adalah desa yang tanah pekarangannya banyak ditumbuhi pohon asem maka dinamailah Desa tersebut dengan nama Desa Karangasem.
Desa Karangasem adalah salah satu Desa di Kecamatan Petarukan Kabupaten Pemalang Propinsi Jawa Tengah yang letaknya berbatasan dengan sebelah utara Desa Sirangkang,sebelah Timur Desa Widodaren,sebelah Selatan Desa Kendalsari dan Sebelah Barat Desa Petanjungan.