Python կոդի ընդլայնումը C/C++-ով
Այս հոդվածը ցույց է տալիս C/C++ ընդլայնումները Python կոդի հետ ինտեգրելու մի քանի օրինակ, ինչպես նաև դրա համար հասանելի մոտեցումները։
C/C++ ընդլայնում Python կոդի համար կարող եք ուզել գրել մի քանի պատճառով։ Նման ընդլայնումը կարող է ավելացնել նոր ներկառուցված օբյեկտների տեսակներ, կատարել համակարգային կանչեր կամ կանչել C/C++ գրադարանների ֆունկցիաներ։ Որպես ML ինժեներ՝ ամենայն հավանականությամբ, հենց այս վերջին հնարավորությանը կապավինեք ձեր ալգորիթմներն արագացնելու համար։ Հայտնի ալգորիթմների մեծ մասն արդեն գոյություն ունի որպես խիստ օպտիմալացված գրադարաններ՝ OpenCV, SciPy, Skimage, Numpy կամ Pandas, ուստի սեփական ընդլայնումներ գրելը սովորաբար անհարկի է։ Այդուհանդերձ, հատկապես համակարգչային տեսողության մեջ կարող եք հանդիպել խնդիրների, որոնք լուծելու համար C/C++ ընդլայնումն օգնում է։ Աշխատանքի ընթացքում ինձ պետք էր flood-filling ալգորիթմ՝ 3D ծավալները սեգմենտավորելու համար։ Skimage-ը flood-filling տրամադրում է, բայց այն հնարավոր չէ կարգավորել։ Իմ սեփական flood-filling ալգորիթմը, գրված Python-ով, ցավալիորեն դանդաղ էր։ Այդ պատճառով որոշեցի C-ով իրականացնել սեփական Python ընդլայնում։ C տարբերակն աշխատեց 100 անգամ ավելի արագ, քան իր Python համարժեքը։ Բավականին տպավորիչ է։
C/C++ կոդը Python-ի հետ կարելի է համատեղել մի շարք եղանակներով.
Ստորև արագ կանդրադառնամ այս մոտեցումներից մի քանիսին և կցուցադրեմ, թե ինչպես ստեղծել կապ C/C++-ի և Python-ի միջև։
Ctypes
Ctypes-ը ամենապարզ տարբերակն է – իդեալական է, երբ ուզում եք մատրիցա փոխանցել C-ին, կատարել ծանր հաշվարկներ և ստանալ արդյունքները։ Դրա ամենամեծ թերությունն այն է, որ c_types-ն աշխատում է միայն C-ի հետ, ուստի C++ օգտագործելու համար կամ պետք է կառուցել C կամուրջ դեպի C++, կամ ընտրել այլ լուծում։
Ctypes-ը հարմար է միայն փոքր ընդլայնումների համար։
Ստեղծեք ctypes_example.cfile:
Ստեղծեք makefile:
Տերմինալում կատարեք make։ Սա ընթացիկ դիրեկտորիայում ստեղծում է py_ext.so ֆայլ։
Ստեղծեք ctypes_example.py:
Ապա գործարկեք Python ֆայլը։ Պատրաստ է Numpy զանգվածը խմբագրող հիմնական սկրիպտը։
Python C API
Սա այն մոտեցումն է, որը Python-ը ներկայումս խորհուրդ է տալիս C և C++ ընդլայնումներ գրելու համար։ Մեկ այլ տարբերակ է Cython-ը, որը գտնվում է Python-ի և C-ի միջև ինչ-որ տեղ։ Cython-ը թույլ է տալիս արագ գրել կոդ. Cython-ով գործ անելը ակնհայտորեն ավելի քիչ կոդ է պահանջում, քան C-ով։ Սակայն գինը արագությունն է. Cython կոդը հաճախ դժվարանում է հասնել C կոդի արտադրողականությանը։
Python C API ընդլայնում կառուցելու համար ստեղծեք py_objects.c ֆայլը։
Կոմպիլացրեք C կոդը ստորև բերված հրամանով.
Վերջում ստեղծեք python ֆայլը py_objects.py:
Boost Python
Boost-ը առաջարկում է խիստ C++ ոճի ինտերֆեյս C++-ի և Python-ի միջև։ Այն std::vector<>-ը և std::map<>-ը անմիջապես արտապատկերում է Python-ի ցուցակների ու բառարանների վրա։ Դրանից բացի, C++ կոդը ավտոմատ կերպով կիսում է smart-pointer-ների հղումների հաշվիչները Python-ի հղումների հաշվիչների հետ, և Python դասերը կարող են վերասահմանել C++ վիրտուալ մեթոդները։
Linux-ում Boost-ը կարելի է տեղադրել այսպես.
sudo apt-get install libboost-all-dev -lboost_python3 -lboost_numpy3
Ստեղծեք boost_python.cpp:
Ստեղծեք makefile:
որտեղ
-lboost_python{PYTHON_VERSION_SUFFIX}
և
-lboost_numpy{PYTHON_VERSION_SUFFIX}
օգտագործում են PYTHON_VERSION_SUFFIX
որը համապատասխանում է համակարգի python տարբերակին և սովորաբար լռելյայն գտնվում է
_usr/lib_ and _-I/home/<user>/anaconda3/envs/sample_env/include/python3.10,_
python include դիրեկտորիայի ուղին է։
Ստեղծեք boost_python.py:
Ապա գործարկեք Python ֆայլը։ Պատրաստ է Numpy զանգվածը խմբագրող հիմնական սկրիպտը։ Boost-ի առավելությունն այն է, որ կարող ենք աշխատել C++-ով բացարձակապես բնական ձևով։
setup.py-ի օգտագործումը makefile-ի փոխարեն
Python նախագիծ կառուցելիս նախընտրում ենք C կոդը ձեռքով չկոմպիլացնել։ Makefile-ը կարելի է փոխարինել ծանոթ setup.py Python սկրիպտով։
Դրանից հետո մեզ մնում է միայն տեղադրել setup.py ֆայլը։ Ընդլայնման կոդի կառուցումն ու փորձարկումը կարելի է փաթեթավորել կարճ makefile-ի մեջ, ինչպես ցույց է տրված ստորև.
Եզրակացություններ
Այս հոդվածը քննարկեց, թե ինչու կարող եք ցանկանալ C/C++ ընդլայնումներ, և ցույց տվեց դրանք Python կոդի հետ ինտեգրելու մի քանի օրինակ։ Մեծ հաշվարկներ կատարող փոքր ֆունկցիայի համար Ctypes-ը ամենապարզ ընտրությունն է։ Ընդլայնում գրելու «pythonic» եղանակը սովորաբար Python C API-ն է կամ Cython-ը։ Cython-ը արագ է գրվում, բայց կարող է զիջել C կոդի արտադրողականությանը։ Python C API-ն ապահովում է լավագույն արագությունը՝ ավելի շատ կոդ գրելու գնով։ Վերջապես, boost-ը առաջարկում է Python կոդի հետ ինտեգրացիա, որն իրեն շատ C++-ի պես է զգում։ Այն թույլ է տալիս Python դասերին վերասահմանել վիրտուալ մեթոդները, Python ցուցակները անմիջապես արտապատկերում է C++ վեկտորների վրա և այլն։ Յուրաքանչյուր կիրառման դեպք արժանի է առանձին քննարկման և ամենահարմար մեթոդին։