Jim Brown, Sy Oliver et son or