グーグルの不自然なリンクによる手動ペナルティで「サイト全体の一致」は、リンクがゼロでも解除されないケース多いですが、しつこく何度か再審査リクエストを送っていると、「部分一致」に変わるタイミングがあります。

そうなると、リンクが無い、という状態だけで、手動ペナルティが解除されますので、普通（？）に

「不自然なリンク外しました、ガイドライン違反はもうしません」

と再審査リクエストを送信すると、ほぼ解除されます。

順位は、全体一致が部分一致になった際に、戻る場合は戻ります。

で、その順位がペナルティは解除されたのと同じ状態になりますので、部分一致解除されても、上がることは少ないと思います。

ご参考まで。