1. 홈
  2. 파일·압축
  3. 중복 파일 찾기

중복 파일 찾기

폴더 속 똑같은 파일을 해시로 찾고, 지울 목록과 스크립트를 만들어 줍니다.

내 브라우저에서 처리 · 업로드 없음
브라우저는 파일을 지울 수 없어요. 결과는 목록과 삭제 스크립트로 내보내고, 실제 삭제는 직접 실행해 주세요. 지운 파일은 복구할 수 없으니 먼저 백업하세요.
KB

파일은 브라우저 안에서만 처리되며 서버로 전송되지 않습니다.

사용 방법

  1. 폴더를 끌어다 놓거나 폴더 선택을 누릅니다. 안쪽 폴더까지 모두 검사하며, 최대 50,000개·50GB까지 됩니다.
  2. 필요하면 최소 크기, 파일 형식, 숨김 파일 제외, 0바이트 파일 포함 여부를 정합니다.
  3. 중복 찾기를 누릅니다. 진행률이 보이고 언제든 취소할 수 있어요.
  4. 그룹마다 남길 파일을 확인합니다. 기본값은 자동으로 골라 두었어요.
  5. CSV 보고서, 지울 목록, 삭제 스크립트 중 필요한 것을 내려받습니다.

같은 파일을 찾는 원리

파일 이름이나 수정 날짜는 같은 파일인지 알려 주지 못합니다. 이 도구는 내용을 비교하되, 모든 파일을 끝까지 읽지 않도록 세 단계로 걸러 냅니다.

단계 비교 걸러지는 파일
1 크기 크기가 유일한 파일은 중복일 수 없어 바로 제외
2 앞 64KB + 끝 64KB 의 SHA-1 크기는 같지만 앞이나 끝이 다른 파일
3 파일 전체의 SHA-256 가운데만 다른 파일까지 확인

3단계의 SHA-256 은 4MB 씩 나눠 읽으며 계산해서 큰 동영상도 메모리를 거의 쓰지 않습니다. SHA-256 이 같으면 내용이 같다고 보아도 되는 수준이에요. 내용이 한 비트만 달라도 해시가 완전히 달라지기 때문에, 크기가 같고 앞뒤가 같은데 가운데만 다른 파일도 3단계에서 가려집니다. 해시 자체가 궁금하다면 해시 생성기를 쓰세요.

남길 파일 고르는 기본 규칙

그룹마다 아래 순서로 한 개를 남기도록 추천합니다. 라디오 버튼으로 직접 바꿀 수 있어요.

  1. 이름에 복사본, 사본, copy, (1) 같은 사본 표시가 없는 파일
  2. 수정 시각이 가장 오래된 파일
  3. 경로가 더 짧은 파일
  4. 경로 사전순

예를 들어 Photos/trip.jpg, Photos/trip - 복사본.jpg, Backup/trip.jpg 세 개가 같다면 Photos/trip.jpg 를 남기도록 추천합니다. 사본 표시가 없는 두 파일 중 수정 시각이 더 오래된 것이에요. 그룹에서 남길 파일이 하나도 없는 상태로는 내보내지지 않아, 사본이 전부 지워지는 일은 없습니다.

절약 용량 계산

한 그룹의 절약 용량은 (개수 − 1) × 파일 크기 입니다. 1,000,000바이트 파일 2개 그룹과 4,000,000바이트 파일 3개 그룹이 있으면 불필요한 사본은 모두 3개이고, 절약 가능 용량은 9,000,000바이트예요.

지우는 방법과 스크립트

웹페이지는 내 컴퓨터의 파일을 지울 수 없습니다. 그래서 삭제할 파일 목록(.txt)과 스크립트를 만들어 드립니다. Windows 는 PowerShell 스크립트(Remove-Item -LiteralPath), macOS·Linux 는 셸 스크립트(rm --)입니다. 스크립트는 실행 전에 확인 질문을 한 번 하지만, 일단 실행하면 휴지통을 거치지 않고 지워집니다. 반드시 한 줄씩 읽어 보고, 먼저 백업하세요.

경로의 따옴표는 안전하게 처리됩니다. 공백, $, 작은따옴표가 들어 있는 Photos/Tom's trip.jpg 는 이렇게 만들어져요.

  • macOS/Linux: rm -- 'Photos/Tom'\''s trip.jpg'
  • PowerShell: Remove-Item -LiteralPath 'Photos/Tom''s trip.jpg'

경로는 검사한 폴더의 부모 폴더를 기준으로 한 상대 경로이므로, 스크립트는 그 위치에서 실행해야 합니다.

한계

  • 내용이 조금 다른 비슷한 사진(크기를 줄였거나 다시 저장한 사진)은 찾지 않습니다. 그런 사진은 이미지 비교로 직접 확인해 보세요.
  • 같은 경로의 파일은 한 번만 담습니다. 같은 폴더를 두 번 놓아도 자기 자신이 중복으로 잡히지 않아요.
  • 이름만 바꾸고 싶다면 파일 이름 일괄 변경, 정리한 파일을 묶으려면 ZIP 압축하기가 있습니다.

입력한 파일은 브라우저 안에서만 처리되며 서버로 전송되지 않습니다.

필요한 도구가 없나요?

어떤 작업을 하고 싶은지 적어 주세요. 요청이 많은 도구부터 만듭니다.