В результате расторжения брака и последующей потери опеки над своей юной дочерью Робертс приобрел героиновую зависимость. За выбранный способ обеспечивать себя наркотиками Робертс получил прозвище «грабитель строительных кооперативов» и «преступник-джентльмен» .
Он грабил учреждения с доходами нужного уровня и застрахованные на достаточную сумму. Совершая свои ограбления в пиджаке, брюках и жилете, он всегда говорил «пожалуйста» и «спасибо» тем, кого грабил. Робертс полагал, что таким образом он снижает жестокость своих деяний, но, как он сам отметит позже, люди отдавали ему свои деньги из-за страха.
В 1978 году был приговорён к заключению сроком на 19 лет за серию вооруженных ограблений отделений строительных кооперативов, кредитных организаций и магазинов, проделанных с игрушечным пистолетом.
В 1980 году совершил побег из тюрьмы строгого режима. После краткого перелета через Новую Зеландию жил в Бомбее в течение 10 лет, где связался с местной мафией.
В 1990 году Робертс был взят под стражу при незаконном ввозе героина во Франкфурт. Впоследствии был экстрадирован в Австралию и провел более 6 лет в тюрьме, 2 года из которых — в одиночной камере. По словам Робертса, он в очередной раз совершил побег из тюрьмы, но затем передумал и тайно вернулся обратно под тюремное заключение. Его намерениями стало отбыть полностью остаток своего наказания, чтобы воссоединиться с семьей.Робертс сменил несколько стран проживания: Австралия (Мельбурн), Германия, Франция.
В итоге вернулся в Индию (Мумбаи — бывший Бомбей), где он основал благотворительный фонд помощи и ухода за бедными. Робертс наладил свои отношения с дочерью и был принят на работу в благотворительный фонд «Надежда для Индии» президентом этого фонда (Francoise Sturdza).
В 2009 году Робертс был назван постоянным представителем фонда Zeitz Foundation, цель которого — сохранение и улучшение целостности экосистем, чистой воды, почвы и воздуха. Начиная с 2014 года писатель прервал всякую связь с общественными организациями.
Он не дает интервью и не встречается с читателями. Все свободное время он планирует посвятить семье и работе.