Tar (파일 포맷)

3. 파일 형식

tar 아카이브는 여러 파일들을 하나의 파일로 묶은 것으로, 각 파일은 파일 데이터와 512바이트 헤더 레코드로 구성된다.^[13] 파일 데이터는 512바이트의 배수로 맞춰지며, 아카이브의 끝은 두 개 이상의 연속적인 0으로 채워진 레코드로 표시된다.

다양한 tar 파일 형식들이 존재하는데, ustar와 pax 형식은 POSIX에서 공식적으로 지정한 형식이다. 널리 사용되는 형식으로는 GNU tar 형식이 있다.

초기 tar 구현은 패딩 바이트를 0으로 채우지 않았지만, 현대 tar 구현은 0으로 채운다.^[13] 파일 헤더 레코드는 파일에 대한 메타데이터를 ASCII로 인코딩하여 저장한다.

원래 Unix tar 형식(pre-POSIX.1-1988, v7)에 정의된 필드는 다음과 같다.

숫자 값은 8진수로 표현되며, 파일 크기는 최대 8기가바이트까지 가능하다. 체크섬은 헤더 레코드 바이트 값의 합으로 계산된다.

3. 1. 헤더

3. 1. 1. pre-POSIX.1-1988 (v7) tar 헤더

링크 표시자 필드는 파일 형식을 나타내며, 다음 값을 가질 수 있다.

숫자 값은 선행 0을 사용하는 ASCII 숫자로 8진수로 인코딩된다. 파일 크기 저장을 위해 12바이트가 예약되어 있지만, 11자리 8진수만 저장할 수 있어 최대 8기가바이트의 파일 크기를 지원한다.

체크섬은 헤더 레코드의 바이트 값의 합을 통해 계산된다. 이때 8개의 체크섬 바이트는 ASCII 공백(10진수 값 32)으로 간주된다.

tar는 동일한 파일에 대한 여러 하드 링크를 지원한다. 아카이브에 이러한 파일이 여러 개 나타나면 첫 번째 파일만 일반 파일로, 나머지는 하드 링크로 아카이브되며, "연결된 파일 이름" 필드는 첫 번째 파일의 이름으로 설정된다.

3. 1. 2. UStar 형식

''유형 플래그'' 필드는 다음과 같은 값을 가질 수 있다.

POSIX.1-1988 공급업체별 확장(링크 플래그 값 'A'–'Z' 사용)은 공급업체에 따라 부분적으로 다른 의미를 가지므로 구식으로 간주되어 공급업체 태그도 포함하는 POSIX.1-2001 확장으로 대체되었다.

유형 '7'(연속 파일)은 POSIX 표준에서 공식적으로 예약되어 있지만, 디스크에서 연속적으로 할당되어야 하는 파일을 나타내기 위한 것이었다. 이러한 파일을 명시적으로 생성하는 것을 지원하는 운영 체제가 거의 없으므로 대부분의 TAR 프로그램은 이를 지원하지 않으며 유형 7 파일을 유형 0(일반) 파일로 처리한다. 예외는 MASSCOMP RTU(Real Time Unix) 운영 체제에서 실행될 때 GNU tar의 구형 버전으로, 연속 파일을 요청하기 위해 open() 함수에 O_CTG 플래그를 지원했지만, 해당 지원은 GNU tar 버전 1.24부터 제거되었다.

3. 1. 3. POSIX.1-2001/pax

• '''atime''', '''mtime''': 임의의 해상도로 파일의 모든 타임스탬프 (대부분의 구현은 나노초 단위의 정밀도를 사용)
• '''path''': 무제한 길이 및 문자 집합 코딩의 경로 이름
• '''linkpath''': 무제한 길이 및 문자 집합 코딩의 심볼릭 링크 대상 이름
• '''uname''', '''gname''': 무제한 길이 및 문자 집합 코딩의 사용자 및 그룹 이름
• '''size''': 무제한 크기의 파일 (기존 tar 형식은 8GB)
• '''uid''', '''gid''': 크기 제한이 없는 사용자 ID 및 그룹 ID (기존 tar 형식은 최대 ID가 2097151로 제한됨)
• 경로 이름 및 사용자/그룹 이름에 대한 문자 집합 정의 (UTF-8)

3. 2. 확장자

4. 주요 구현체

tar는 여러 구현체가 존재하며, 이들 간의 호환성 문제는 "tar 전쟁"이라고 불린다. 대부분의 tar 구현은 cpio 및 pax (후자는 실제로 POSIX-2001 확장을 가진 ''tar'' 형식)를 읽고 생성할 수 있다.

주요 구현체는 다음과 같다.

• '''솔라리스 tar''': 원래의 Unix V7 tar를 기반으로 하며 솔라리스 운영 체제에서 기본적으로 제공된다.
• '''쉴리 tar''' ('''star'''): 1997년 4월에 처음 게시되었으며,^[33] 개발자는 1982년에 개발을 시작했다고 밝혔다.^[34] 일부 확장 기능이 매우 인기가 있어 역사적으로 중요하다.
• '''파이썬 tarfile''' 모듈: ustar, pax 및 gnu를 포함한 여러 tar 형식을 지원한다. V7 형식 및 SunOS tar 확장 형식을 읽을 수 있지만 생성할 수는 없으며, pax는 아카이브 생성에 대한 기본 형식이다.^[35] 2003년부터 사용할 수 있다.^[36]

• https://www.gnu.org/software/tar/ Tar - GNU Project
• https://linuxjm.osdn.jp/html/GNU_tar/man1/tar.1.html TAR의 man 페이지
• https://www.gnu.org/software/tar/manual/html_node/Standard.html GNU tar 형식
• https://www.libarchive.org/ libarchive
• https://man.freebsd.org/cgi/man.cgi?tar(1) tar(1) - FreeBSD General Commands Manual
• https://man.freebsd.org/cgi/man.cgi?tar(5) tar(5) - FreeBSD File Formats Manual

4. 1. GNU Tar

4. 2. BSD Tar

5. 기능 및 사용

tar는 파일을 아카이브하는 데 사용되며, 여러 파일을 하나의 파일로 묶을 수 있다. 파일의 사용자 및 그룹 정보, 권한, 최종 갱신 시간, 디렉터리 구조 등을 함께 아카이브할 수 있다.^[20][21] 구현에 따라 압축된 TAR 아카이브의 형식을 자동으로 감지하여 추출하거나, 지정된 날짜 이후에 수정된 파일만 추가하도록 제한할 수 있다.^[20][21]

5. 1. 명령어 옵션

• `-c`, `--create`: 새 아카이브를 생성한다.
• `-r`, `--append`: 아카이브 끝에 파일을 추가한다.
• `-x`, `--extract`, `--get`: 아카이브에서 파일을 추출한다.
• `-f`, `--file`: 사용할 아카이브 파일 이름을 지정한다.
• `-t`, `--list`: 아카이브의 파일 및 폴더 목록을 표시한다.
• `-v`, `--verbose`: 처리된 파일 목록을 자세히 표시한다.
• `-a`, `--auto-compress`: 아카이브 파일 이름 확장자에 따라 자동으로 압축 형식을 결정한다. 예를 들어, `*.tar.gz`는 gzip을, `*.tar.xz`는 xz를, `*.tar.zst`는 Zstandard를 사용한다.^[48]
• `--newer ''date''`: 지정된 날짜보다 최근에 수정된 파일만 추가하거나 추출한다.
• `-T ''file''`: `file` 내에 줄 바꿈으로 구분된 파일 이름 목록을 기반으로 파일을 추가하거나 추출한다.
• `-Z` 또는 `--compress`: UNIX Compress를 사용하여 압축/해제한다.
• `-z` 또는 `--gzip`: gzip을 사용하여 압축/해제한다.
• `-j` 또는 `--bzip2`: bzip2를 사용하여 압축/해제한다.
• `-J` 또는 `--xz`: xz를 사용하여 압축/해제한다.
• `--lzma`: lzma를 사용하여 압축/해제한다.
• `--lzop`: lzop를 사용하여 압축/해제한다.
• `--zstd`: Zstandard를 사용하여 압축/해제한다.

• GNU Tar: `tar -cf name.tar.zst -I "zstd -19 -T0" directory` (-I 옵션 사용)
• bsdtar: `tar -caf name.tar.zst --options=compression-level=19,threads=0 directory`

• 파일 `README.txt`와 디렉터리 `src`로부터 아카이브 `archive.tar` 생성:

• `archive.tar`의 내용을 현재 디렉터리에 압축 해제:

• 파일 `README.txt`와 디렉터리 `src`로부터 gzip으로 압축된 아카이브 `archive.tar.gz` 생성:

• `archive.tar.gz`의 내용을 현재 디렉터리에 압축 해제:

• 압축:

• 압축 해제:

• 테이프 장치에 기록:

• 테이프 장치에서 읽어 옴:

• 테이프 상의 파일 목록 표시:

5. 2. Tarpipe

5. 3. 소프트웨어 배포

6. 한계

tar 형식은 유닉스 초창기에 만들어져 설계상 여러 오래된 특징들을 가지고 있다.^[22]

원래 tar는 자기 테이프 조작을 염두에 두고 만들어졌기 때문에, f 옵션을 생략하면 기본값으로 자기 테이프 장치를 처리한다. f 옵션을 사용하면 파일 시스템 상의 임의의 파일을 처리할 수 있다.

tar 형식은 그 역사가 길어 시스템마다 호환되지 않는 부분이 많다. 파일 크기 제한 등의 문제도 있어 다른 시스템과 파일을 교환할 때 주의해야 한다. 최근에는 GNU Tar와 bsdtar가 주로 쓰이지만, Windows 10 이후와 macOS에는 bsdtar가, Linux에는 GNU Tar가 탑재되어 있다. BusyBox에도 자체 tar가 포함되어 있다.

tar의 단점을 보완하기 위해 다른 형식들이 만들어졌다.

'tarball'이라는 용어는 Tar baby라는 동화에서 유래한 농담조 표현이다.^[51]

6. 1. 파일 이름 길이 제한

6. 2. 속성

6. 3. Tarbomb

6. 4. 임의 접근 (Random Access)

6. 5. 중복 파일

참조

_[1] 웹사이트 libarchive - C library and command-line tools for reading and writing tar, cpio, zip, ISO, and other archive formats @ GitHub https://www.libarchi[...]
_[2] 뉴스그룹 v07i088: Public-domain TAR program https://groups.googl[...] 2022-02-07
_[3] 웹사이트 posixtar http://www.decuslib.[...]
_[4] 웹사이트 star https://web.archive.[...] 2023-11-12
_[5] 웹사이트 Basic Tar Format https://www.gnu.org/[...] Free Software Foundation 2019-04-17
_[6] 웹사이트 tar(5) manual page https://www.freebsd.[...] FreeBSD 2017-05-02
_[7] 간행물 IEEE Std 1003.1-1988, IEEE Standard for Information Technology - Portable Operating System Interface (POSIX)
_[8] 간행물 IEEE Std 1003.1-2001, IEEE Standard for Information Technology - Portable Operating System Interface (POSIX)
_[9] 웹사이트 IBM System i Version 7.2 Programming Qshell https://www.ibm.com/[...] 2020-09-05
_[10] 웹사이트 Announcing Windows 10 Insider Preview Build 17063 for PC https://blogs.window[...] 2017-12-19
_[11] 웹사이트 Tar and Curl Come to Windows! https://techcommunit[...] 2019-03-22
_[12] 웹사이트 Blocking http://ftp.gnu.org/o[...] 2020-08-26
_[13] 웹사이트 Open/Extract TAR File with Freeware on Windows/Mac/Linux http://www.e7z.org/o[...] 2019-09-03
_[14] 서적 Internet File Formats https://archive.org/[...] Coriolis Groups Books 2022-11-10
_[15] 웹사이트 GNU tar 1.32: 8.1 Using Less Space through Compression https://www.gnu.org/[...] 2019-08-11
_[16] 문서 NEWS https://git.savannah[...]
_[17] 웹사이트 GNU tar 1.34: 8. Controlling the Archive Format https://www.gnu.org/[...] 2022-07-11
_[18] Manpage pax
_[19] 웹사이트 '#2116 Tars with pax headers not parsed' https://sourceforge.[...]
_[20] 문서 GNU tar 1.35: 6.8 Operating Only on New Files https://www.gnu.org/[...]
_[21] 문서 Differences Between BSD tar and GNU tar and star {{pipe}} Baeldung on Linux https://www.baeldung[...]
_[22] 웹사이트 duplicity: New file format http://duplicity.non[...]
_[23] 문서 gnu_tar/src/create.c at master · gitGNU/gnu_tar · GitHub https://github.com/g[...]
_[24] 문서 src/bin/pax/tar.c at 8df76133309eacd4092b091ee0504adb842322a5 · openbsd/src · GitHub https://github.com/o[...]
_[25] Manpage tar
_[26] 웹사이트 Extended attributes: the good, the not so good, the bad. http://www.lesbonsco[...] 2014-07-15
_[27] 웹사이트 Tarbomb Definition https://www.linfo.or[...] 2024-12-12
_[28] 웹사이트 bsdtar(1) https://man.freebsd.[...]
_[29] 웹사이트 What makes a tar archive seekable? https://superuser.co[...] 2017-07-28
_[30] 웹사이트 pixz https://github.com/v[...] 2023-12-06
_[31] 웹사이트 GNU tar 1.35: 4.2.4 Combining Archives with --concatenate https://www.gnu.org/[...]
_[32] 웹사이트 Star a very fast and Posix 1003.1 compliant tar archiver for UNIX https://cdrtools.sou[...] 2023-09-02
_[33] 웹사이트 TAR versus Portability: Schily tar https://invisible-is[...] 2021-10-23
_[34] 웹사이트 star - unique standard tape archiver http://schilytools.s[...] 2021-10-23
_[35] 문서 tarfile https://docs.python.[...]
_[36] Github tarfile.py https://github.com/p[...]
_[37] 웹사이트 tar-1.31 released [stable] https://lists.gnu.or[...] 2019-01-02
_[38] Manpage tar FreeBSD
_[39] 웹사이트 NEWS https://git.savannah[...] 2023-07-19
_[40] Github libarchive/NEWS at master · libarchive/libarchive - GitHub https://github.com/l[...]
_[41] 표준 IEEE Std 1003.1-1988, IEEE Standard for Information Technology - Portable Operating System Interface (POSIX)
_[42] 표준 IEEE Std 1003.1-2001, IEEE Standard for Information Technology - Portable Operating System Interface (POSIX)
_[43] Microsoft Learn Tar and Curl Come to Windows! | Microsoft Learn https://learn.micros[...] 2023-09-04
_[44] 웹사이트 Announcing Windows 11 Insider Preview Build 23493 https://blogs.window[...] 2023-07-05
_[45] 웹사이트 TAR、RAR、7z……「エクスプローラー」で解凍できる形式が拡充、正式に提供開始／「Windows 11 バージョン 22H2」の2023年9月プレビューパッチ「KB5030310」で https://forest.watch[...] 2023-09-28
_[46] 웹사이트 Announcing Windows 11 Insider Preview Build 25992 (Canary Channel) https://blogs.window[...] 2024-02-01
_[47] 웹사이트 IT 担当者向けのバージョン 24H2 Windows 11の新機能 https://learn.micros[...] 2024-10-02
_[48] 웹사이트 GNU tar 1.35: 8.1.1 Creating and Reading Compressed Archives https://www.gnu.org/[...] 2024-04-13
_[49] 웹사이트 https://www.gnu.org/software/tar/manual/tar.html#Styles 2023-09-04
_[50] 문서 파일 (file) 의 머리글자이다.
_[51] 웹사이트 Jargon File - tarball http://www.catb.org/[...] 2010-11-27
_[52] 웹인용 libarchive https://www.libarchi[...]
_[53] 뉴스그룹 v07i088: Public-domain TAR program https://groups.googl[...] 1986-12-10
_[54] 웹인용 posixtar http://www.decuslib.[...] 2022-05-24
_[55] 웹인용 star https://sourceforge.[...]
_[56] 웹인용 Basic Tar Format https://www.gnu.org/[...] Free Software Foundation 2019-04-17