地址清理Boost.Python模块
我的项目包括一个大型C ++库和Python绑定（通过Boost.Python）。测试套件主要是在Python绑定之上编写的，我想用清理程序运行它，从ASAN开始。
我正在运行macOS（10.13.1 FWIW，但我也遇到过以前版本的问题），我似乎找不到在Python模块上运行ASAN的方法（我非常怀疑）这与Boost.Python有关，我认为它与其他技术相同。）
这是一个简单的Python模块：
// hello_ext.cc
#include <boost/python.hpp>
char const* greet()
{
auto* res = new char[100];
std::strcpy(res, "Hello, world!");
delete [] res;
return res;
}
BOOST_PYTHON_MODULE(hello_ext)
{
using namespace boost::python;
def("greet", greet);
}
这是我使用的Makefile，为MacPorts制作：
// Makefile
CXX = clang++-mp-4.0
CXXFLAGS = -g -std=c++14 -fsanitize=address -fno-omit-frame-pointer
CPPFLAGS = -isystem/opt/local/include $$($(PYTHON_CONFIG) --includes)
LDFLAGS = -L/opt/local/lib
PYTHON = python3.5
PYTHON_CONFIG = python3.5-config
LIBS = -lboost_python3-mt $$($(PYTHON_CONFIG) --ldflags)
all: hello_ext.so
hello_ext.so: hello_ext.cc
$(CXX) $(CPPFLAGS) $(CXXFLAGS) $(LDFLAGS) -shared -o $@ $< $(LIBS)
check: all
$(ENV) $(PYTHON) -c 'import hello_ext; print(hello_ext.greet())'
clean:
-rm -f hello_ext.so
没有asan，一切都运作良好（实际上太好了......）。但是对于ASAN，我遇到了LD_PRELOAD类问题：
$ make check
python -c 'import hello_ext; print(hello_ext.greet())'
==19013==ERROR: Interceptors are not working. This may be because AddressSanitizer is loaded too late (e.g. via dlopen). Please launch the executable with:
DYLD_INSERT_LIBRARIES=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib
"interceptors not installed" && 0make: *** [check] Abort trap: 6
好的，让我们这样做：定义DYLD_INSERT_LIBRARIES
$ DYLD_INSERT_LIBRARIES=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib \
python -c 'import hello_ext; print(hello_ext.greet())'
==19023==ERROR: Interceptors are not working. This may be because AddressSanitizer is loaded too late (e.g. via dlopen). Please launch the executable with:
DYLD_INSERT_LIBRARIES=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib
"interceptors not installed" && 0zsh: abort DYLD_INSERT_LIBRARIES= python -c 'import hello_ext; print(hello_ext.greet())'
让我们对SIP产生怀疑，所以我已经在这里禁用了SIP ，让我们解决这些符号链接：
$ DYLD_INSERT_LIBRARIES=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib \
/opt/local/Library/Frameworks/Python.framework/Versions/3.5/bin/python3.5 -c 'import hello_ext; print(hello_ext.greet())'
==19026==ERROR: Interceptors are not working. This may be because AddressSanitizer is loaded too late (e.g. via dlopen). Please launch the executable with:
DYLD_INSERT_LIBRARIES=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib
"interceptors not installed" && 0zsh: abort DYLD_INSERT_LIBRARIES= -c 'import hello_ext; print(hello_ext.greet())'
正确的方法是什么？我还尝试使用ctypes.PyDLL加载libasan，即使使用sys.setdlopenflags(os.RTLD_NOW | os.RTLD_GLOBAL)我也无法使用此功能。
2 个答案:
答案 0 :(得分：4)
这可能不是一个理想的答案，但它应该为您提供所需的一切。
我建议你制作一个Xcode项目来构建所有东西（是的，我知道你想使用make，后来会出现）
假设您已经知道如何构建Xcode项目，我将跳过启用Address Sanitizer的所有内容：
Product - ＆gt; Scheme - ＆gt; Edit Scheme将打开此窗口：
选中Address Sanitizer的复选框。您只需要为主应用程序执行此操作。根据我的经验，所有依赖都将得到适当的建立。
下一步构建主应用程序目标。我们需要检查编译器和链接器调用，以便我们可以将任何必要的标志/步骤复制到make文件。
我圈出了2个相关按钮以获得输出。最右边的按钮将扩展用于构建的编译器调用。
此镜头显示了一个保存按钮（可能更容易在另一个程序中检查）和一些用于构建的相关标志。您必须检查所有目标（依赖项）的输出，以获得清晰的图像。
希望这会有所帮助。 FWIW我的例子中的项目有一个用C ++编写的自定义Python模块（直接使用libPython，而不是Boost）所以我知道即使使用系统提供的Python框架也可以使用Asan。
答案 1 :(得分：1)
所以，我终于设法让这个工作：
$ libasan=/opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib
$ python=/opt/local/Library/Frameworks/Python.framework/Versions/3.5/Resources/Python.app/Contents/MacOS/Python
$ DYLD_INSERT_LIBRARIES=$libasan $python -c 'import hello_ext; print(hello_ext.greet())'
=================================================================
==70859==ERROR: AddressSanitizer: heap-use-after-free on address 0x60b000002770 at pc 0x000108c2ef60 bp 0x7ffee6fe8c20 sp 0x7ffee6fe83c8
READ of size 2 at 0x60b000002770 thread T0
#0 0x108c2ef5f in wrap_strlen (libclang_rt.asan_osx_dynamic.dylib:x86_64h+0x14f5f)
#1 0x109a8d939 in PyUnicode_FromString (Python:x86_64+0x58939)
[...]
改变了什么？编译链中没有任何内容，只是调用。
让PYDIR=/opt/local/Library/Frameworks/Python.framework/Versions/3.5：之前我正在调用$PYDIR/bin/python3.5（因为/opt/local/bin/python3.5是符号链接），现在我调用$PYDIR/Resources/Python.app/Contents/MacOS/Python。
要了解发生了什么，我运行DYLD_INSERT_LIBRARIES=$libasan python3.5，并查找其打开的文件
$ ps
PID TTY TIME CMD
900 ttys000 0:07.96 -zsh
70897 ttys000 0:00.11 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/Resources/Python.app/Contents/MacOS/Python
53528 ttys001 0:05.14 -zsh
920 ttys002 0:10.28 -zsh
$ lsof -p 70897
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
Python 70897 akim cwd DIR 1,4 480 8605949500 /Users/akim/src/lrde/vcsn/experiment/sanitizer
Python 70897 akim txt REG 1,4 12988 8591019542 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/Resources/Python.app/Contents/MacOS/Python
Python 70897 akim txt REG 1,4 2643240 8591012758 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/Python
Python 70897 akim txt REG 1,4 107524 8590943656 /opt/local/lib/libintl.8.dylib
Python 70897 akim txt REG 1,4 2097528 8590888556 /opt/local/lib/libiconv.2.dylib
Python 70897 akim txt REG 1,4 20224 8591016920 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/lib-dynload/_heapq.cpython-35m-darwin.so
Python 70897 akim txt REG 1,4 326996 8591375651 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages/readline/gnureadline.cpython-35m-darwin.so
Python 70897 akim txt REG 1,4 603008 8605907803 /opt/local/lib/libncurses.6.dylib
Python 70897 akim txt REG 1,4 837248 8606849556 /usr/lib/dyld
Python 70897 akim txt REG 1,4 1155837952 8606860187 /private/var/db/dyld/dyld_shared_cache_x86_64h
Python 70897 akim 0u CHR 16,0 0t2756038 667 /dev/ttys000
Python 70897 akim 1u CHR 16,0 0t2756038 667 /dev/ttys000
Python 70897 akim 2u CHR 16,0 0t2756038 667 /dev/ttys000
显然libasan不在这里，这就是整个问题。但是，我也注意到ps指的是另一个Python而不是我运行的Python（当然，它是打开文件的一部分）。
事实证明，此目录中有几个Python可执行文件：$PYDIR/bin/python3.5和$PYDIR/Resources/Python.app/Contents/MacOS/Python，第一个以另一个方式跳转到第二个。如果我使用DYLD_INSERT_LIBRARIES=$libasan
$ lsof -p 71114
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
Python 71114 akim cwd DIR 1,4 480 8605949500 /Users/akim/src/lrde/vcsn/experiment/sanitizer
Python 71114 akim txt REG 1,4 12988 8591019542 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/Resources/Python.app/Contents/MacOS/Python
Python 71114 akim txt REG 1,4 3013168 8604479549 /opt/local/libexec/llvm-4.0/lib/clang/4.0.1/lib/darwin/libclang_rt.asan_osx_dynamic.dylib
Python 71114 akim txt REG 1,4 2643240 8591012758 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/Python
Python 71114 akim txt REG 1,4 107524 8590943656 /opt/local/lib/libintl.8.dylib
Python 71114 akim txt REG 1,4 2097528 8590888556 /opt/local/lib/libiconv.2.dylib
Python 71114 akim txt REG 1,4 20224 8591016920 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/lib-dynload/_heapq.cpython-35m-darwin.so
Python 71114 akim txt REG 1,4 326996 8591375651 /opt/local/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages/readline/gnureadline.cpython-35m-darwin.so
Python 71114 akim txt REG 1,4 603008 8605907803 /opt/local/lib/libncurses.6.dylib
Python 71114 akim txt REG 1,4 837248 8606849556 /usr/lib/dyld
Python 71114 akim 0u CHR 16,0 0t2781894 667 /dev/ttys000
Python 71114 akim 1u CHR 16,0 0t2781894 667 /dev/ttys000
Python 71114 akim 2u CHR 16,0 0t2781894 667 /dev/ttys000
\ o / libasan在那里！显然，第一个Python调用第二个，而DYLD_INSERT_LIBRARIES不会被转发。
我目前不知道为什么有两个蟒蛇。它似乎并不特定于MacPorts，因为Apple的Python也是如此。
$ cd /System/Library/Frameworks/Python.framework/Versions/2.7
$ ls -l bin/python*
lrwxr-xr-x 1 root wheel 7 10 déc 08:17 bin/python -> python2
lrwxr-xr-x 1 root wheel 14 10 déc 08:17 bin/python-config -> python2-config
lrwxr-xr-x 1 root wheel 9 10 déc 08:17 bin/python2 -> python2.7
lrwxr-xr-x 1 root wheel 16 10 déc 08:17 bin/python2-config -> python2.7-config
-rwxr-xr-x 1 root wheel 43104 1 déc 21:42 bin/python2.7
-rwxr-xr-x 1 root wheel 1818 16 jul 02:20 bin/python2.7-config
lrwxr-xr-x 1 root wheel 8 10 déc 08:17 bin/pythonw -> pythonw2
lrwxr-xr-x 1 root wheel 10 10 déc 08:17 bin/pythonw2 -> pythonw2.7
-rwxr-xr-x 1 root wheel 43104 1 déc 21:42 bin/pythonw2.7
$ ls -l Resources/Python.app/Contents/MacOS/Python
-rwxr-xr-x 1 root wheel 51744 1 déc 21:48 Resources/Python.app/Contents/MacOS/Python
相关问题
最新问题
- 我写了这段代码，但我无法理解我的错误
- 我无法从一个代码实例的列表中删除 None 值，但我可以在另一个实例中。为什么它适用于一个细分市场而不适用于另一个细分市场？
- 是否有可能使 loadstring 不可能等于打印？卢阿
- java中的random.expovariate()
- Appscript 通过会议在 Google 日历中发送电子邮件和创建活动
- 为什么我的 Onclick 箭头功能在 React 中不起作用？
- 在此代码中是否有使用“this”的替代方法？
- 在 SQL Server 和 PostgreSQL 上查询，我如何从第一个表获得第二个表的可视化
- 每千个数字得到
- 更新了城市边界 KML 文件的来源？