pasteur.amalgam.llm.evaluate

Contents

pasteur.amalgam.llm.evaluate#

pasteur.amalgam.llm.evaluate(gen, prompt, counts, wrk_flat, wrk_json, eval_flat, eval_json, max_samples=None, top_k=3, split='ref')[source]#