El gobernador Arthur Phillip nunca llegó a conocer a Bennelong cara a cara en sus primeros encuentros. Cuando su barco pasó frente a Botany Bay, los indígenas, incluido Bennelong, fueron llevados a bordo, pero la interacción se mantuvo a distancia.
Solo más tarde se estableció una relación más cercana entre ambos.