去香港携带港币回来的限额主要依据中国内地相关出入境管理规定以及香港特区的规定。以下是具体的限额信息：
中国内地规定
居民出境最多可携带20000元人民币，或相当于5000美元的外币。
如果携带超过20000元人民币，需要向海关申报。
香港特区规定
入境香港时，每名旅客可以携带最多120,000港元。
如果携带超过120,000港元等值金额，需要申报。
结合以上信息，可以得出以下结论：
从香港回内地：
每人每次携带人民币的限额为20000元。
外币（如港币）等值5000美元以上需要申报。
因此，去香港可以携带的港币金额在入境时不得超过120,000港元，出境时携带的港币等值金额不得超过20,000元人民币或5000美元，超过部分需要申报。建议在携带大量现金时务必遵守相关规定，以避免不必要的麻烦。