Почему Самсона Вырина стали считать "маленьким человеком"?

Он был робким как внешне, так и внутренне. Но это не главная причина. Его так называли, потому что он любил свою дочь, не хотел говорить ей о своих чувствах к её новому кавалеру (имя не помню), поэтому его автор назвал маленьким за его смятение и одиночество