ボイスチャットのトークバックを回避したい

ボイスチャットでトークバック現象が起きてしまいます。
どのようにすれば回避できるでしょうか？

こちらの環境はWindows XPで、ヘッドセットにバッファローのBMHUH01SVAを使っています。
相手の環境はWindows Vistaで、ヘッドセットにサンワサプライのMM-HSUSB11BKを使っています。

こちらの声が相手の方からトークバックしてきます。（自分のしゃべった声がヘッドホンから聞こえてくる。）
相手の方にはトークバックはないようです。

おそらくVistaのミキサー関連に問題があると思うので、その辺りに詳しい方の回答をいただければと思います。