考虑需基于测试集优化LLM提示词提示词是完成一个具体NLP任务这时候测试集本身需要人工标注以保证正确率可用多种大模型或多套完成相同任务的提示词分别对测试集进行推理找出里面label不一致的数据再进行人工标注可节省人工标注全部测试集的时间。找不一致label这个思想可以拓展的地方不少目前做小模型都大模型标注数据了而提示词基于测试集优化测试集就尤为重要了需人工标注。