问题分析

个人在搭配transformers环境(Ubuntu18.04),使用时出现如下报错

ImportError: /lib/x86_64-linuxgnu/libm.so.6: version `GLIBC_2.29’ not found (required by /home/xxxx/anaconda3/envs/xxxx/lib/python3.6/sitepackages/tokenizers/tokenizers.cpython-36mx86_64-linuxgnu.so)

分析上述报错新版transformers的tokenizers需要2.29版本GLIBC

查看服务器当前版本命令如下

strings /lib/x86_64-linux-gnu/libm.so.6 | grep GLIBC_

返回结果如下

GLIBC_2.2.5
GLIBC_2.4
GLIBC_2.15
GLIBC_2.18
GLIBC_2.23
GLIBC_2.24
GLIBC_2.25
GLIBC_2.26
GLIBC_2.27
GLIBC_PRIVATE

说明服务器当前没有GLIBC_2.29的

安装GLIBC_2.29

下载

使用以下命令下载

cd /usr/local
wget http://ftp.gnu.org/gnu/glibc/glibc-2.29.tar.gz

更高的版本可以Index of /pub/gnu/glibc下载

进入超级管理员模式

输入以下命令然后运行密码

sudo su

下面的命令需要管理员模式下进行

解压配置

使用以下命令解压进入glibc-2.29,创建build目录

tar -zxvf glibc-2.29.tar.gz
cd glibc-2.29
mkdir build
cd build/
../configure --prefix=/usr/local --disable-sanity-checks


或者

tar -zxvf glibc-2.29.tar.gz
sudo apt-get install gawk
 
…/configure --prefix=/usr/local/glibc
make -j8
sudo make install

上面的命令当中--disable-sanity-checks起到关键的作用

安装

分别运行以下命令

make -j18
make install

安装成功后大概返回下图所示界面没有报错,说明安装成功!
在这里插入图片描述

建立软连接

使用以下命令查看下/lib/x86_64-linux-gnu/libm.so.6连接情况:

cd /lib/x86_64-linux-gnu
ll
  1. cd /lib/x86_64-linuxgnu

  2. ln -s /usr/local/glibc/lib/libm-2.29.so libm.so.6

  3. //会报错 ln: failed to create symbolic link ‘libm.so.6’: File exists

  4. //此时需要强连

  5. sudo ln -sf /usr/local/glibc/lib/libm-2.29.so libm.so.6

返回结果当中可以看到/lib/x86_64-linux-gnu/libm.so.6连接libm-2.27.so
在这里插入图片描述
由于前面配置时,设置--prefix=/usr/local,所以libm-2.29.so安装/usr/local/lib位置我们可以把文件libm-2.29.so复制/lib/x86_64-linux-gnu下:

cp /usr/local/lib/libm-2.29.so /lib/x86_64-linux-gnu/

进行强制连接

ln -sf libm-2.29.so libm.so.6

查看结果

strings /lib/x86_64-linux-gnu/libm.so.6 | grep GLIBC_

原文地址:https://blog.csdn.net/weixin_46587777/article/details/131099068

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任

如若转载,请注明出处:http://www.7code.cn/show_33682.html

如若内容造成侵权/违法违规/事实不符,请联系代码007邮箱suwngjj01@126.com进行投诉反馈,一经查实,立即删除

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注