vlookupを使えばうまくいくと思います。※こちらの環境ではうまくいきました。
=vlookup(A2, 'シート2'!A:B, 2, FALSE)
コードの重複が気になりますが、見つからなかったときに特定の文字列(今回はNG)とする場合は以下のように書けばよいです。
=if(isna(vlookup(A2, 'シート2'!A:B, 2, FALSE)), "NG", vlookup(A2, 'シート2'!A:B, 2, FALSE))
以下追記です。
iferror
を使うともっと簡潔に書けました。
=iferror(vlookup(A2, 'シート2'!A:B, 2, FALSE), "NG")
filter
を使った別解です。
=iferror(index(filter('シート2'!B:B,'シート2'!A:A=A2),1), "NG")
簡単に説明すると、'シート2'!A:Aの範囲でA2と同じ値を検索し、見つかった行のB列の値を返します。
今回の質問では使う必要はありませんが、検索する列と値を返す列が連続していない場合にはこの方法が有効だと思います。