Вхід і реєстрація
Розробка · 10 червня 2018, 17:28 762
Vasily Nekrasov, Senior Risk Analyst and Model Developer в Total Energie Gas GmbH

Python + C++ + SWIG | VS2017 + PyCharm2018 — дебаггинг

Комрады, кому-нибудь приходилось дебажить приложения, где часть — на Python, а часть — на плюсах и подключена к Питону через SWIG?

Недавно такая задача возникла, но оказалось, что для отладки C++ части просто приаттачить процесс к VS-дебаггеру не помогает. Кое-какой workaround нашел, но это не тот уровень комфорта :)
letyourmoneygrow.com/...​-and-pycharm-a-dirty-way

В идеале хотелось бы работать с плюсами в Visual Studio 2017, а с питоном — в PyCharm.

Теми: Python
👍ПодобаєтьсяСподобалось0
До обраногоВ обраному0
LinkedIn
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter
Дозволені теги: blockquote, a, pre, code, ul, ol, li, b, i, del.
Ctrl + Enter
Dmitry Panfilov Senior C++ Developer 10.06.2018 18:09

IMHO по ссылке все понятно и комфортно

Відповісти
Підтримати
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 10.06.2018 18:38

Спасибо за комплимент (то что по ссылке — написано мной :)).
Но увы — предложенное решение не помогает в случае, когда на Python side используется еще numpy (а это весьма нужная библиотека в финансово-математических задачах).
Я подозреваю, что если ее ставить не через pip, а собрать из исходников в debug-конфигурации (а заодно, наверное, придется и сам Python собрать), то работать будет.
И так и придется делать, если нет другого решения. Но оно наверняка есть :)

Відповісти
Підтримати
Dmitry Panfilov
Dmitry Panfilov Senior C++ Developer 10.06.2018 22:48

для того чтобы в Visual Studio работал debuger нужны исходники и pdb файл для бинаря, через pip этого у вас не будет

numpy

зачем вам дебагать numpy?

Відповісти
Підтримати
Vasily Nekrasov
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 10.06.2018 23:38

numpy дебажить не нужно; он просто не работает (во всяком случае, у меня), если в качестве python interpreter выбрать python_d.exe

Відповісти
Підтримати
Dmitry Panfilov
Dmitry Panfilov Senior C++ Developer 11.06.2018 00:51

numpy не работает потому что python_d.exe грузит _d.pyd файлы которых у вас для numpy нет.
я бы вообще не связывался с python_d а по пробовал бы в extra_link_args добавить /DEBUG что бы получить .pdb этого должно хватить для дебага

Відповісти
Підтримати
Vasily Nekrasov
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 12.06.2018 00:27

Похоже что VS довольно радикально поменялись настройки.
Вот тут иструкция про решение схожей проблемы
docs.microsoft.com/...​nd-release-configurations
Но вот эта картинка: docs.microsoft.com/...​perties_pdb_cplusplus.png
уже не соответствует действительности, во всяком случае у меня и VS2015 (для которого писано), и тем более в VS2017 нет Linker (есть Librarian) и вкладки Debugging там нет...

Відповісти
Підтримати
Dmitry Panfilov
Dmitry Panfilov Senior C++ Developer 12.06.2018 09:00

Да ну.
imgur.com/a/XDVH4kB
VS2017
опцию для линкера тем более никто не убирал, это ж сколько бы makefileов поломалось бы.
вам нужно смотреть ваш setup.py чтобы он передавал /debug в линкер и для релиз билда тоже, вроде бы за это отвечает переменная extra_link_args

Відповісти
Підтримати
Vasily Nekrasov
Dmitry Panfilov Senior C++ Developer 12.06.2018 11:13

Librarian это когда static lib *.lib собираеш

Відповісти
Підтримати
Vasily Nekrasov
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 12.06.2018 11:50

Спасибо! Там как раз и нужен именно .lib
Что касается setup.py, то ему можно передать «недокументированный» агрумент -debug, но это не помогает, если запускать его с python.exe (а вот c python_d.exe помогает).
Ладно, пока dirty way, описанный мной худо-бедно задачу решает, а лазать на C++ сторону обычно не так уж часто надо.
Попробую еще при случае воодушевить core-разработчиков QuantLib’а решить вопрос :)

Відповісти
Підтримати
Dmitry Panfilov
Dmitry Panfilov Senior C++ Developer 12.06.2018 12:22
Спасибо! Там как раз и нужен именно .lib

интересно зачем? вроде как питон грузит .pyd файлы, на самом деле переименованные .dll файлы и для dll файла вам нужен pdb файл и исходники, иначе отладчик не взлетит

агрумент —debug

насколько я понимаю он делает следующие действия
— отключает оптимизации
— собирает pdb файл (опция /debug )
— собирает _d.pyd файл вместо .pyd файла
— собраный бинарь использует debug версию студийного плювого рантайма
изза последних двух действий обычный python.exe не грузит собраный екстеншен, просто имя файла на совпадает. Вам нужно слегка подправить setup.py чтобы компилятору опция /Zi и линкеру опция /debug передавалась всегда, не зависимо от наличия опции —debug

Відповісти
Підтримати
Vasily Nekrasov
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 12.06.2018 12:44

@Dmitry Panfilov
Спасибо, попробую пройтись строчка за строчкой по setup.py

@Viktor
Тут дело не в поисках багов, а скорее в том чтоб понять, правильно ли ты вызываешь функции QuantLib’а.
Особенно остро эта проблема стоит в QuantLibXL
letyourmoneygrow.com/...​urvy-way-fit-yield-curve
Может ни хрена не работать просто потому, что неправильно вызываются функции QL (а просто читать код с переводом данных их Excel до QL — себе дороже, надо дебажить саму QL)

QuantLib Python в этом отношении, вроде как, получше — но с учетом того как QL (зло)употребляет возможностями C++, в т.ч. templat’ами которых в Питоне нет, все равно будут какие-то отклонения в порядке вызова бизнес-логики. И вот тут-то опять-таки надо посмотреть на стороне QuantLib’а, что за данные в него переданы и какие функции вызываются.

Відповісти
Підтримати
Dmitry Panfilov
Vasily Nekrasov Senior Risk Analyst and Model Developer в Total Energie Gas GmbH 12.06.2018 13:32

Да до сих пор как-то удавалось без проблем аттачить процесс, из которого вызывается c++ библиотека, к VS Debugger’у — и вперед.

Тут еще, как я понимаю, проблема в том, что VS2017 пытается думать там, где его не просят: понимает что перед ним вызов плюсового кода не просто откуда-то, а именно из Питона — пытается это учесть, но в результате вываливается в exception
(в VS2015 такого нет).

Насчет универсального IDE, VS пытается стать таким, возможно, мою проблему можно решить тем, чтоб и Python запускать из VS, а не из PyCharm (только пока непонятно как именно).

Відповісти
Підтримати
anonymous
Alex Fogol Software Developer, C/C++ Expert 12.06.2018 22:42
Меня достала уже 2015 и я свалил на QtCreator.

Я периодически работаю и на том и на этом к.м.к. креатор «шаг вправо шаг влево» и вообще всё аццкий какой-то ад проще к qmake чистому возвращаться ))

Відповісти
Підтримати
anonymous

Підписатись на коментарі

Не підписуватись
Скористайтесь акаунтом
×
з умовами використання сайту і політикою конфіденційності.