convertere Hex string til int

Jeg har en hex streng, der kan indeholde alt fra 1 til 4 byte, mit problem er at konvertere det korrekt til f.eks. en int.

Jeg kan få det til at virke med en byte således:
Short.decode("0xFF"); // = -1

men når jeg har mere end 1 byte hvad gør jeg så?
med f.eks.
0xFFFF
0xFFFFFF
0xFFFFFFFF
de skulle gerne allesammen give -1 hvis det gøres korrekt.
hvilke konverteringer skal jeg bruge til dem?