Never Trust a Llama