Объяснять и оправдываться очень разные действия. Очень интересно как получилось, что у вас они похожи. Может чувство вины? Может ли быть такое, что вы чувствуете вину за то, что ваш собеседник что-то не понял? Может это стыд? А может страх? Со всеми так или только с конкретными людьми? Надеюсь если прохожий спросит вас как пройти до библиотеки вы ответите спокойно непринужденно? Если да, то прощайтесь с этими конкретными людьми, хотя бы на время.
Ответ на ваш второй вопрос — а вы не объясняйтесь и не оправдывайтесь. Говорите "Я сделал(а) так, потому что я так считаю правильным / потому что так хочу / потому что так решил(а) / потому что гладиолус и т.д.". Вы имеете право поступать так как вы хотите без вообще каких-либо на то причин. Пусть те, кто хотят от вас оправданий привыкнут к этому.