📝 文字去重工具
原始文字 0 / 200,000 字元
0 → 0 行
去重結果
怎麼用
把文字貼進左欄、選好分隔方式（換行、逗號、分號、空白或自訂字串），按「去重」（或 Ctrl+Enter），右欄立即出現移除重複後的清單，並顯示「原始 → 去重後」行數統計。結果可一鍵複製或下載成 .txt（一律以換行分隔，方便後續逐行處理）。上限 20 萬字元，全部在瀏覽器內完成，資料不會上傳。
名單清理的三個實務陷阱
- Email 大小寫：
[email protected]和[email protected]是同一個信箱——清 Email 名單時務必勾「忽略大小寫」，否則寄件會重複。工具保留第一次出現的原始寫法。 - 看不見的空白：從 Excel、LINE 或網頁複製來的名單常帶尾端空格甚至全形空白（U+3000），肉眼看不出來但會讓「王小明」和「王小明 」被視為兩筆。勾「去除前後空白」可一併處理半形與全形空白。
- 分隔符選錯：一格一筆的直式名單用「換行」；「A,B,C」式的用「逗號」；從程式碼貼來的陣列可用「自訂」輸入
", "。分隔錯了行數統計會異常，先看左下角的行數對不對。
去重後的順序規則
預設「先進先留」：保留每個項目第一次出現的位置與寫法，這對維持名單原始優先順序很重要（例如報名先後）。勾「排序」則改依 Unicode 碼位排列——注意中文按碼位排出來不是筆畫或注音順序，需要注音排序請在 Excel 裡用「注音排序」後製。
常見問題
可以處理多大的名單？
上限 20 萬字元（約數千到上萬行），超過會自動截斷並提示。數十萬行以上的資料建議用 Excel「移除重複項」、SQL 的 DISTINCT 或 Python 的 set()。
自訂分隔符可以打什麼？
任意字串：|、---、Tab 都可以。含正則特殊字元會自動跳脫，直接照字面比對。
「重複」的判定會不會把相似項目也刪掉？
不會。判定是「完全相同」（可選忽略大小寫與首尾空白），「王小明」和「王曉明」永遠是兩筆。模糊比對（錯字、同義詞）不在本工具範圍。
貼進來的資料安全嗎？
安全。去重在您的瀏覽器內完成，文字不會傳送到任何伺服器——這也是它能離線快速處理的原因。