Като епископ той тръгнал да проповядва Евангелието. Св. Еразъм дошъл и в град Охрид, който влизал тогава в римската провинция Илирик. Царят извел Еразма пред медния идол на Зевс и му заповядал да принесе жертва и да се поклони на идола. Св. Еразъм отказал решително, затова царят заповядал да го подложат на тежки мъки, а след това го хвърлил в тъмница. Но се явил ангел Божий - както някога на св. Петър - и го извел от тъмницата.

После св. Еразъм посетил с проповед Кампания, след което се върнал в град Хармелий и тук се поселил в една пещера, където се отдал на аскетически съзерцателен живот до самата си смърт. Той починал в началото на ІV век.

Пещерата с църквицата на св. Еразъм и до днес съществува недалеч от Охрид, където се проповядва великата сила на Божия угодник.