Возможно, это связано с тем, что вы смешиваете свободу внешнюю с внутренней свободой.
Внешняя свобода обусловлена обстоятельствами, она от вас зависит лишь частично. Под "внешней" свободой понимается свобода от различных внешних ограничений: социальных, экономических, политических и т. п. Например, когда у вас много денег, вам может показаться, что вы свободны. Но это ощущение будет длиться лишь до тех пор, пока денег много... Поэтому оно обусловлено, и такая свобода не зависит от вас. Возможно, вас тяготит именно эта обусловленность. Может быть, конечно, не она, а своего рода "неподлинность" такого вида свободы.
Под внутренней свободой понимается неотъемлемое право каждого человека в любой сложившейся ситуации оставаться самим собой и действовать сообразно собственным убеждениям. Эту свободу у человека нельзя отнять никогда, именно она делает его поистине свободным. Ее гораздо труднее достичь, но зато она никогда не будет тяготить.