Ферритовые и неодимовые магниты довольно твёрдые, и в то же время хрупкие. Отсюда следует, что:
а) кернить их нельзя - треснут;
б) пытаться сверлить их обычным сверлом из быстрорежущей стали - это дело гиблое, ибо твёрдости их не хватит.
Попытаться просверлить магнит можно твердосплавным свёрлышком по кафелю. Или же трубчатым сверлом с алмазным напылением. Да и то сверлить нужно в оправке - это если дрелью. Но без кернения сверло всё равно будет убегать в сторону. Поэтому лучше это делать на сверлильном станке, зажав в тиски. Обороты высокие не давать - перегреется и треснет. Или размагнитится. В идеале постоянно поливать водой. И готовиться к тому, что всё равно треснет. Поэтому сверлить надо до середины с двух сторон.
А вообще такие вещи делают на электроэррозионном станке.