Можно ли брать с собой в армию такие вещи как: книги, блокноты, записные книжки, ручки, карандаши?

Да, книги, блокноты, ручки и карандаши в армию брать можно и нужно.

Единственное - знайте меру, стопку книг брать с собой не надо, думаю 4-5 будет достаточно. Как правило в ВЧ есть библиотека.