根据提供的信息，如果您被限制高消费，通常情况下是不能直接前往香港的。限制高消费的措施旨在确保债务人履行还债义务，并且通常包括限制乘坐飞机、列车软卧、轮船二等以上舱位等高消费行为。
然而，有一些信息表明，限高人员理论上可以使用护照通过飞机出境，但这并不意味着他们可以自由地去香港，因为还需要办理相应的离境手续，并且可能受到其他限制，如不能乘坐高铁一等座等。
如果您确实需要前往香港，以下是一些可能的步骤：
解除限制高消费：
首先需要解决导致限制高消费的问题，如还清欠债或遵守法律等。
办理通行证：
如果限制解除，您可以正常办理港澳通行证。
办理离境手续：
在获得港澳通行证后，您需要在中国海关办理离境手续。
资金准备：
由于前往香港可能涉及较高的费用，建议您做好充足的资金准备。
请注意，以上信息可能受到法律法规变化的影响，具体情况建议咨询法律专业人士或相关机构以获得最新信息。