Hay varios factores, pero lo principal es conocer bastante del idioma y palabras locales (regionalismos). Los otros factores pueden ser la entonación de las palabras y/o los gestos de la persona (supongo que una sonrisa sana y otra fingida o con malicia pueden ser interpretadas sin problemas aunque no se hable el mismo idioma).