0
В админке идёшь в Внешний вид — Виджеты, там у каждого виджета есть поле заголовка. Если кодишь свой сайдбар, то в functions.php при register_sidebar пропиши before_title/after_title, иначе заголовок не вылезет. И в template юзай dynamic_sidebar('id').