Бесо Джугашвили родился в селе Диди-Лило Тифлисской губернии (ныне Гардабанский район край Квемо-Картли) в семье крепостных крестьян князя Мачабели. Отец Бесо — Вано Зазович Джугашвили занимался выращиванием и продажей винограда[3]. Старший брат Бесо — Георгий Иванович Джугашвили, владел харчевней на дороге в селении Манглиси, которое являлось популярным местом отдыха грузинской аристократии. Как утверждает российский писатель Э. С. Радзинский, дед Бесо — Заза Джугашвили — неоднократно участвовал в крестьянских бунтах, арестовывался, заключался в тюрьму, совершал побеги. Вскоре он поселился в деревне Диди-Лило, там женился[4]. Заза был пастухом[3].
Виссарион Джугашвили по профессии был сапожником. По воспоминаниям, Бесо умел читать по-грузински и по памяти цитировал фрагменты из поэмы «Витязь в тигровой шкуре», знал грузинский, русский, армянский и азербайджанский языки. По всей видимости, знания были получены самостоятельно, так как в школе Бесо не обучался. После смерти отца и убийства брата Георгия Бесо с сестрой Пелагеей ушёл[5] в Тифлис и стал работать на заводе армянского фабриканта Адельханова[6], где достаточно быстро выдвинулся и получил звание мастера. В конце 1860-х начале 1870-х годов армянский купец Иосиф Барамов (Барамянц) организует в Гори фабрику по пошиву и ремонту обуви и приглашает в неё лучших грузинских мастеров, среди которых был и Виссарион Иванович Джугашвили.