重複文削除
文章を文単位で比較し、最初に登場した文だけを残します。
結果
使い方
文章を入力し、必要なら大文字小文字の区別を切り替えます。
仕様・注意事項
。!?.!?を文末として扱い、文末記号を含めて比較します。文単位で再構成するため、元の空白や改行がそのまま保持されない場合があります。
重複の判定と使用例
文は 。!?.!? または改行で区切ります。最初に現れた文を残し、後から現れた同一文を除きます。「大文字小文字を区別する」を外すと、比較時だけロケール対応の小文字へ変換します。結果では最初の文の表記を残します。
One. one. Two. を大文字小文字を区別しない設定で処理すると、One. Two. になります。行単位で同じ処理をしたい場合は重複行削除を使います。