Why the experimental accuracy is so much higher than the paper ? 为什么实验精度比论文高这么多

[vansin]

Why the experimental accuracy is so much higher than the paper
为什么实验精度比论文高这么多?

[yangxue0827]

This is the mAP of the trainval set, not the test set.

[Chenglu840]

如果要测试模型精度，跟论文列表差不多的，应该怎么做呢

[yangxue0827]

mmrotate并不是他们官方实现，我们只是提供了一个公平的比较环境。对于早期的方法，mmrotate是很轻松能超过他们的，对于近期的方法，可以跑他们官方开源的代码来进行性能对齐。如果没有开源我们也没法保证mmrotate的精度可以对齐，因为我们不知道他实际用了什么tricks。

[Chenglu840]

那我想要改模型的话，不能在mmrotate上直接改吧，应该改论文源码的吧

[yangxue0827]

可以基于mmrotate上改的，只要你的实验对比结果（消融实验）都是来自mmrotate就行，最后sota实验可以引用原文的。