Обильно намочить этикетку, возможно, несколько раз. Лучше всего для этого использовать губку с моющим средством для посуды. Бумага размокнет и будет легко сниматься, но, возможно, придется помучиться с клеем.
На удивление, очень хорошо с этой задачей справляется жидкость WD-40. Она хорошо растворяет любой клей. И кстати, с помощью нее можно удалить клей с любой поверхности, даже с кожи. Проверено.
Надо замочить банку в горячей воде и удалить бумажный слой, а потом можно оттереть растительным маслом или смывкой для водостойкой косметики. Если ничего не получится, то придётся соскребать ножом