使用online demo测试实体抽取时的问题

[fantastic-413]

我在测试Mirror的在线demo的NER功能时，发现了一些问题。
1.如下图，改变了and前后两句话的顺序，抽取结果发生改变。


2.如下图，把句号变更为逗号，抽取结果发生改变。


请问是我的测试方法有问题吗？

[Spico197]

哈喽您好，感谢您对本项目的关注~这个行为可能和Mirror的训练模式有关，我们没有打乱label的顺序，所以可能会对位置比较敏感。这是一个值得关注的方向，需要提升模型的健壮性，从而提升模型instruction和schema的following能力。