Configuração 1: compilar seu próprio glibc sem GCC dedicado e usá-lo
Visto que parece impossível fazer apenas com os hacks de versão de símbolo, vamos dar um passo adiante e compilar o glibc nós mesmos.
Esta configuração pode funcionar e é rápida, pois não recompila todo o conjunto de ferramentas do GCC, apenas glibc.
Mas não é confiável, pois usa anfitrião C runtime objetos como crt1.o
, crti.o
e crtn.o
fornecido pela glibc. Isso é mencionado em: https://sourceware.org/glibc/wiki/Testing/Builds?action=recall&rev=21#Compile_against_glibc_in_an_installed_location Esses objetos fazem a configuração inicial em que a glibc depende, então eu não ficaria surpreso se as coisas travassem de forma maravilhosa e maneiras incrivelmente sutis.
Para uma configuração mais confiável, consulte a Configuração 2 abaixo.
Construa o glibc e instale localmente:
export glibc_install="$(pwd)/glibc/build/install"
git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28
mkdir build
cd build
../configure --prefix "$glibc_install"
make -j `nproc`
make install -j `nproc`
Configuração 1: verifique a construção
test_glibc.c
#define _GNU_SOURCE
#include <assert.h>
#include <gnu/libc-version.h>
#include <stdatomic.h>
#include <stdio.h>
#include <threads.h>
atomic_int acnt;
int cnt;
int f(void* thr_data) {
for(int n = 0; n < 1000; ++n) {
++cnt;
++acnt;
}
return 0;
}
int main(int argc, char **argv) {
/* Basic library version check. */
printf("gnu_get_libc_version() = %s\n", gnu_get_libc_version());
/* Exercise thrd_create from -pthread,
* which is not present in glibc 2.27 in Ubuntu 18.04.
* /programming/56810/how-do-i-start-threads-in-plain-c/52453291#52453291 */
thrd_t thr[10];
for(int n = 0; n < 10; ++n)
thrd_create(&thr[n], f, NULL);
for(int n = 0; n < 10; ++n)
thrd_join(thr[n], NULL);
printf("The atomic counter is %u\n", acnt);
printf("The non-atomic counter is %u\n", cnt);
}
Compile e execute com test_glibc.sh
:
#!/usr/bin/env bash
set -eux
gcc \
-L "${glibc_install}/lib" \
-I "${glibc_install}/include" \
-Wl,--rpath="${glibc_install}/lib" \
-Wl,--dynamic-linker="${glibc_install}/lib/ld-linux-x86-64.so.2" \
-std=c11 \
-o test_glibc.out \
-v \
test_glibc.c \
-pthread \
;
ldd ./test_glibc.out
./test_glibc.out
O programa produz o esperado:
gnu_get_libc_version() = 2.28
The atomic counter is 10000
The non-atomic counter is 8674
Comando adaptado de https://sourceware.org/glibc/wiki/Testing/Builds?action=recall&rev=21#Compile_against_glibc_in_an_installed_location, mas --sysroot
falhou com:
cannot find /home/ciro/glibc/build/install/lib/libc.so.6 inside /home/ciro/glibc/build/install
então eu o removi.
ldd
A saída confirma que as ldd
bibliotecas e que acabamos de construir estão realmente sendo usadas conforme o esperado:
+ ldd test_glibc.out
linux-vdso.so.1 (0x00007ffe4bfd3000)
libpthread.so.0 => /home/ciro/glibc/build/install/lib/libpthread.so.0 (0x00007fc12ed92000)
libc.so.6 => /home/ciro/glibc/build/install/lib/libc.so.6 (0x00007fc12e9dc000)
/home/ciro/glibc/build/install/lib/ld-linux-x86-64.so.2 => /lib64/ld-linux-x86-64.so.2 (0x00007fc12f1b3000)
A gcc
saída de depuração da compilação mostra que meus objetos de tempo de execução do host foram usados, o que é ruim, conforme mencionado anteriormente, mas não sei como contornar isso, por exemplo, contém:
COLLECT_GCC_OPTIONS=/usr/lib/gcc/x86_64-linux-gnu/7/../../../x86_64-linux-gnu/crt1.o
Configuração 1: modificar glibc
Agora vamos modificar o glibc com:
diff --git a/nptl/thrd_create.c b/nptl/thrd_create.c
index 113ba0d93e..b00f088abb 100644
--- a/nptl/thrd_create.c
+++ b/nptl/thrd_create.c
@@ -16,11 +16,14 @@
License along with the GNU C Library; if not, see
<http://www.gnu.org/licenses/>. */
+#include <stdio.h>
+
#include "thrd_priv.h"
int
thrd_create (thrd_t *thr, thrd_start_t func, void *arg)
{
+ puts("hacked");
_Static_assert (sizeof (thr) == sizeof (pthread_t),
"sizeof (thr) != sizeof (pthread_t)");
Em seguida, recompile e reinstale o glibc, e recompile e execute novamente o nosso programa:
cd glibc/build
make -j `nproc`
make -j `nproc` install
./test_glibc.sh
e vemos hacked
impresso algumas vezes conforme o esperado.
Isso confirma ainda mais que realmente usamos a glibc que compilamos e não a do host.
Testado no Ubuntu 18.04.
Configuração 2: configuração do crosstool-NG pristine
Esta é uma alternativa para a configuração 1, e é a configuração mais correta que consegui agora: tudo está correto, tanto quanto eu posso observar, incluindo o tempo de execução C objetos como crt1.o
, crti.o
, e crtn.o
.
Nesta configuração, compilaremos um conjunto de ferramentas GCC dedicado e completo que usa a glibc que desejamos.
A única desvantagem desse método é que a construção levará mais tempo. Mas eu não arriscaria uma configuração de produção com nada menos.
crosstool-NG é um conjunto de scripts que baixa e compila tudo do código-fonte para nós, incluindo GCC, glibc e binutils.
Sim, o sistema de compilação do GCC é tão ruim que precisamos de um projeto separado para isso.
Esta configuração só não é perfeita porque crosstool-NG não suporta a construção de executáveis sem -Wl
sinalizadores extras , o que parece estranho já que construímos o próprio GCC. Mas tudo parece funcionar, então isso é apenas um inconveniente.
Obtenha o crosstool-NG e configure-o:
git clone https://github.com/crosstool-ng/crosstool-ng
cd crosstool-ng
git checkout a6580b8e8b55345a5a342b5bd96e42c83e640ac5
export CT_PREFIX="$(pwd)/.build/install"
export PATH="/usr/lib/ccache:${PATH}"
./bootstrap
./configure --enable-local
make -j `nproc`
./ct-ng x86_64-unknown-linux-gnu
./ct-ng menuconfig
A única opção obrigatória que posso ver é fazer com que corresponda à versão do kernel do host para usar os cabeçalhos de kernel corretos. Encontre a versão do kernel do host com:
uname -a
que me mostra:
4.15.0-34-generic
então menuconfig
eu faço:
então eu seleciono:
4.14.71
qual é a primeira versão igual ou mais antiga. Tem que ser mais antigo, pois o kernel é compatível com versões anteriores.
Agora você pode construir com:
env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`
e agora aguarde cerca de trinta minutos a duas horas para a compilação.
Configuração 2: configurações opcionais
O .config
que geramos com ./ct-ng x86_64-unknown-linux-gnu
tem:
CT_GLIBC_V_2_27=y
Para mudar isso, menuconfig
faça:
C-library
Version of glibc
salve o .config
e continue com a construção.
Ou, se você quiser usar seu próprio código-fonte glibc, por exemplo, para usar glibc do git mais recente, proceda assim :
Paths and misc options
Try features marked as EXPERIMENTAL
: definido como verdadeiro
C-library
Source of glibc
Custom location
: diga sim
Custom location
Custom source location
: aponta para um diretório contendo seu código-fonte glibc
onde glibc foi clonado como:
git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28
Configuração 2: teste
Depois de criar o conjunto de ferramentas que deseja, teste-o com:
#!/usr/bin/env bash
set -eux
install_dir="${CT_PREFIX}/x86_64-unknown-linux-gnu"
PATH="${PATH}:${install_dir}/bin" \
x86_64-unknown-linux-gnu-gcc \
-Wl,--dynamic-linker="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib/ld-linux-x86-64.so.2" \
-Wl,--rpath="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib" \
-v \
-o test_glibc.out \
test_glibc.c \
-pthread \
;
ldd test_glibc.out
./test_glibc.out
Tudo parece funcionar como na Configuração 1, exceto que agora os objetos de tempo de execução corretos foram usados:
COLLECT_GCC_OPTIONS=/home/ciro/crosstool-ng/.build/install/x86_64-unknown-linux-gnu/bin/../x86_64-unknown-linux-gnu/sysroot/usr/lib/../lib64/crt1.o
Configuração 2: falha na tentativa de recompilação eficiente de glibc
Não parece possível com o crosstool-NG, conforme explicado abaixo.
Se você apenas reconstruir;
env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`
então, suas alterações no local de origem glibc customizado são levadas em consideração, mas ele constrói tudo do zero, tornando-o inutilizável para desenvolvimento iterativo.
Se nós fizermos:
./ct-ng list-steps
dá uma boa visão geral das etapas de construção:
Available build steps, in order:
- companion_tools_for_build
- companion_libs_for_build
- binutils_for_build
- companion_tools_for_host
- companion_libs_for_host
- binutils_for_host
- cc_core_pass_1
- kernel_headers
- libc_start_files
- cc_core_pass_2
- libc
- cc_for_build
- cc_for_host
- libc_post_cc
- companion_libs_for_target
- binutils_for_target
- debug
- test_suite
- finish
Use "<step>" as action to execute only that step.
Use "+<step>" as action to execute up to that step.
Use "<step>+" as action to execute from that step onward.
portanto, vemos que há etapas glibc entrelaçadas com várias etapas GCC, mais notavelmente libc_start_files
vem antes cc_core_pass_2
, que é provavelmente a etapa mais cara junto com cc_core_pass_1
.
Para construir apenas uma etapa, você deve primeiro definir a opção "Salvar etapas intermediárias" .config
para a construção inicial:
e então você pode tentar:
env -u LD_LIBRARY_PATH time ./ct-ng libc+ -j`nproc`
mas, infelizmente, o +
exigido conforme mencionado em: https://github.com/crosstool-ng/crosstool-ng/issues/1033#issuecomment-424877536
Observe, no entanto, que reiniciar em uma etapa intermediária redefine o diretório de instalação para o estado que tinha durante essa etapa. Ou seja, você terá uma libc reconstruída - mas nenhum compilador final construído com esta libc (e, portanto, nenhuma biblioteca de compilador como libstdc ++ também).
e basicamente ainda torna a reconstrução muito lenta para ser viável para o desenvolvimento, e não vejo como superar isso sem corrigir o crosstool-NG.
Além disso, começar a partir da libc
etapa não parece copiar a fonte novamente Custom source location
, tornando esse método inutilizável.
Bônus: stdlibc ++
Um bônus se você também estiver interessado na biblioteca padrão C ++: Como editar e reconstruir a fonte da biblioteca padrão GCC libstdc ++ C ++?