Понимаю ваши опасения, потому что для отделки плит OSB подходит не любая шпаклевка. Лучше всего использовать бетоноконтакт. В его составе полимеры, спецдобавки, цемент и песок. И если вы хотите точно быть увереным, что слой будет держаться, что при сверлении не отвалится кусок штукатурки, а само отверстие будет нормальной формы, то берите бетоноконтакт – это беспроигрышный вариант.
А еще, по опыту, поверху ОСБ лучше закрепить гипсокартон (если помещение не отапливается, то берите влагостойкий) или же закрепить на ОСБ армирующую сетку и все это оштукатурить. Мороки много, но оно того стоит!
Вообще-то бетоноконтакт это грунтовка, а не шпаклёвка :-))