리눅스 C/C++ - 특정 버전의 glibc 빌드 (docker-glibc-builder)
지난 글에서, (Ubuntu 20.04 환경) glibc가 낮은 버전(2.31) 환경에서 높은 버전(2.34)의 glibc를 빌드하는 방법을 예로 들었는데요,
g++ - 다른 버전의 GLIBC로 소스코드 빌드
; https://www.sysnet.pe.kr/2/0/13661
그 반대인 경우에는 (아마도) 심심치 않게 문제가 발생하는 것 같습니다. 가령, (glibc 2.35 환경의) Ubuntu 22.04에 2.31 버전의 glibc를 빌드하면,
$ mkdir $HOME/glibc/
$ cd $HOME/glibc
~/glibc$ wget http://ftp.gnu.org/gnu/libc/glibc-2.31.tar.gz
~/glibc$ tar -xvzf glibc-2.31.tar.gz
~/glibc$ mkdir build
~/glibc$ cd build
~/glibc/build$ ~/glibc/glibc-2.31/configure --disable-werror --prefix=/opt/glibc-2.31
~/glibc/build$ make
~/glibc/build$ make install
위의 마지막 즈음인 make 실행에 다음과 같은 오류가 발생할 수 있습니다.
~/glibc/build$ make
...[생략]...
../setjmp/setjmp.h:54:46: note: previously declared as an array ‘struct __jmp_buf_tag[1]’
54 | extern int __sigsetjmp (struct __jmp_buf_tag __env[1], int __savemask) __THROWNL;
| ~~~~~~~~~~~~~~~~~~~~~^~~~~~~~
cc1: all warnings being treated as errors
...[생략]...
make[2]: *** [../Makerules:271: /home/kevin/glibc/build/tcb-offsets.h] Error 1
make[2]: Leaving directory '/home/kevin/glibc/glibc-2.31/csu'
make[1]: *** [Makefile:470: csu/subdir_lib] Error 2
make[1]: Leaving directory '/home/kevin/glibc/glibc-2.31'
make: *** [Makefile:9: all] Error 2
아마도 컴파일러 버전이 높아지면서 해당 코드를 경고로 잡아냄과 함께 "all warnings being treated as errors" 옵션의 영향으로 실패한 것으로 보입니다. 어차피 glibc-2.31이 저 빌드를 통과해 나온 것이므로 경고를 무시하고 넘어가도 무방할 텐데요, 따라서 이럴 때는 configure 단계에서
--disable-werror 옵션을 주면 됩니다.
~/glibc/glibc-2.31/configure --disable-werror --prefix=/opt/glibc-2.31
그런데, 이후 한창 빌드하고 마지막 즈음에 이런 오류가 발생합니다.
~/glibc/build$ ~/glibc/glibc-2.31/configure --disable-werror --prefix=/opt/glibc-2.31
~/glibc/build$ make
...[생략]...
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `fstat64@GLIBC_2.33'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_key_create@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_rwlock_unlock@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_detach@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_setspecific@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/../../../x86_64-linux-gnu/libgcc_s.so.1: undefined reference to `_dl_find_object@GLIBC_2.35'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `__libc_single_threaded@GLIBC_2.32'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_join@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_rwlock_wrlock@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_getspecific@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_key_delete@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `lstat@GLIBC_2.33'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `stat@GLIBC_2.33'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_once@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_rwlock_rdlock@GLIBC_2.34'
/usr/bin/ld: /usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so: undefined reference to `pthread_create@GLIBC_2.34'
collect2: error: ld returned 1 exit status
make[2]: *** [../Rules:215: /home/kevin/glibc/build/support/links-dso-program] Error 1
make[2]: Leaving directory '/home/kevin/glibc/glibc-2.31/support'
make[1]: *** [Makefile:470: support/others] Error 2
make[1]: Leaving directory '/home/kevin/glibc/glibc-2.31'
make: *** [Makefile:9: all] Error 2
오류 메시지를 액면 그대로 해석하자면, 일단 "/usr/bin/ld" 경로의 "ld"는 2.35 버전의 glibc와 링크된 프로그램일 것입니다. 그리고 그 ld는 "/usr/lib/gcc/x86_64-linux-gnu/11/libstdc++.so" 공유 라이브러리를 사용하려고 했는데, (제가 잘은 모르지만) 아마도 현재 "make" 프로그램이 운영되는 환경의 문맥에서는 (
LD_LIBRARY_PATH 등의) 라이브러리 경로가 새롭게 빌드되고 있는 glibc 2.31로 설정이 돼 충돌이 발생하는 것 같습니다. 결국, 이 문제를 해결하려면 저 단계에서 실행되는 스크립트를 (2.35와 링크된 버전이 아닌) 2.31 버전의 ld를 실행해야 하는 듯합니다. (혹시 정확한 원인을 아시는 분은 덧글 부탁드립니다. ^^)
암튼, 이런저런 문제가 제법 나오는데요, 이게 깔끔하게 해결되려면 glibc 2.31 빌드를 Ubuntu 20.04에서 하는 식으로 처리하는 것이 좋을 것 같습니다. 단지, 그런 식으로 빌드하기 위해 매번 OS 환경이 필요하다는 문제가 있는데, 다행히 이런 경우 컨테이너를 이용해 빌드하면 편리하게 해결할 수 있습니다. ^^
실제로 이 문제를 해결하는 컨테이너를 공개한 사람이 있습니다.
docker-glibc-builder
; https://github.com/sgerrand/docker-glibc-builder
README에 그 사용법이 나오지만, 기본적으로 해당 컨테이너는 시작하자마자 빌드해서 그 결과물을 tar.gz 형식으로 표준 출력을 통해 내보냅니다. 그래서 다음과 같이 실행하면 그 결과를 로컬에 tar.gz 파일로 받아올 수 있습니다.
// glibc 2.31 버전을 빌드하는 경우
docker run --rm --env STDOUT=1 sgerrand/glibc-builder 2.31 /usr/glibc-compat > glibc-2.31.tar.gz
// glibc 2.35 버전을 빌드하는 경우
docker run --rm --env STDOUT=1 sgerrand/glibc-builder 2.35 /usr/glibc-compat > glibc-2.35.tar.gz
또는, 해당 컨테이너 내에서 빌드 결과물을 "/" 루트 디렉터리에 glibc-bin-2.39.tar.gz 파일로 보관해 두기 때문에 "--rm" 옵션 없이 컨테이너를 시작한다면 docker cp 명령으로 받아오는 것도 가능합니다.
// glibc 2.39 버전을 빌드하는 경우
docker run --name glibc-binary sgerrand/glibc-builder 2.39 /usr/glibc-compat
docker cp glibc-binary:/glibc-bin-2.39.tar.gz ./
docker rm glibc-binary
오~~~ 정말 편리하게 잘 만들었습니다. ^^
[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]