Джеймс Хонг родился 22 февраля 1929 года в Миннеаполисе, штат Миннесота, США . Начальное образование он получил в Гонконге, затем снова вернулся в США, когда ему было десять лет .
Учился Хонг в Университете Южной Калифорнии, где изучал гражданское строительство .