Не вижу в этом ничего плохого. Я считаю, что это помогает поддержать разговор, а то, что описано в вопросе, наоборот, показывает неразговорчивость во многих случаях.
Но все же не надо злоупотреблять этим. Ваша история может показаться собеседнику неинтересной, тогда он должен деликатно попросить перестать. Не стоит на это обижаться.