Cython

aus Wikipedia, der freien Enzyklopädie
Dies ist eine alte Version dieser Seite, zuletzt bearbeitet am 21. Mai 2016 um 15:57 Uhr durch Scoder (Diskussion | Beiträge) (→‎Ziele). Sie kann sich erheblich von der aktuellen Version unterscheiden.
Zur Navigation springen Zur Suche springen
Cython
Datei:Cython-logo.svg
Basisdaten
Paradigmen: multiparadigmatisch
Erscheinungsjahr: 2007
Entwickler: Robert Bradshaw, Stefan Behnel, et al.
Aktuelle Version: 0.24  (4. April 2016)
Typisierung: stark, statisch, dynamisch („Duck-Typing“)
Beeinflusst von: Python, C, C++
Betriebssystem: Linux, Unix-ähnliches System, Microsoft Windows[1], macOS[1]
Lizenz: Apache-Lizenz, Version 2.0[2], Apache-Lizenz[3]
cython.org

Cython ist eine universelle Programmiersprache, die weitgehend zu Python kompatibel ist. Wie diese unterstützt es verschiedene Programmierparadigmen wie objektorientierte, aspektorientierte und funktionale Programmierung. Der Hauptvorteil liegt jedoch in der Übersetzung in die Zielsprache C, was sowohl eine hohe Performance im Vergleich zum Standard-Python-Interpreter erlaubt, als auch eine direkte Interaktion mit externem Code ermöglicht, der in C, C++ oder Fortran geschrieben ist.

Haupteinsatzgebiete sind die Anbindung von externen Bibliotheken an den CPython-Interpreter, sowie die Beschleunigung von Python-Code. Der Cython-Compiler kann auch zur Kompilierung reiner Python-Module verwendet werden.

Der generierte Code ist nicht autark, sondern benötigt eine CPython-kompatible Laufzeitumgebung. Dabei wird sowohl die Generierung von Binärmodulen („Extension-Modul“) unterstützt, die dynamisch über den import-Befehl in den Python-Interpreter geladen werden können, als auch die Linker-Integration des CPython-Interpreters in das generierte Modul, so dass ein ausführbares Programm entsteht (Embedding).

Entwicklungsgeschichte

Cython basiert auf Pyrex von Greg Ewing (Erstveröffentlichung am 4. April 2002[4]). Im Juli 2007 wurde der Cython Compiler durch Robert Bradshaw und Stefan Behnel als eigenständiges, offen entwickeltes Projekt von Pyrex abgespalten. Seitdem wurde versucht, die beiden Compiler weitgehend kompatibel zu halten, wobei jedoch Cython wesentlich weitreichendere Optimierungen anwendet und eine höhere Kompatibilität mit Python-Code erreicht. Wichtige Unterschiede zu Pyrex sind in der Cython-Dokumentation beschrieben.

Namensherkunft

Der Name Cython ist eine Namenszusammenfassung der beiden zugrunde liegenden Programmiersprachen: Python und C.

Ziele

Das Cython-Projekt hat sich zum Ziel gesetzt, einen Compiler für normalen Python-Code zu entwickeln,[5] der durch zusätzliche (explizite) statische Typisierung eine möglichst hohe Performance und eine weitreichende Integration mit Code bietet, der in C, C++ und Fortran geschrieben ist.

Cython ist ein optimierender Compiler, jedoch nicht im gängigen Sinne eines Compilers, der Binärcode erzeugt. Vielmehr erlaubt es die Übersetzung in C-Code, viele grundlegende Optimierungen und Plattform-Anpassungen einem C-Compiler zu überlassen. So kann sich der Cython-Compiler selbst auf High-Level-Optimierungen auf AST-Ebene beschränken.

Der C-Code, den Cython generiert, ist weitgehend portabel bezüglich Plattformen (Prozessor, C-Compiler und Betriebssystem) und CPython-Versionen. Aktuell (Version 0.24) werden alle CPython Versionen ab Python 2.6 unterstützt, inklusive Python 3.x. Getestete Plattformen sind unter Anderem Mac OS X, Microsoft Windows und vor allem verschiedene Linux Distributionen, mit 32bit und 64bit Systemversionen.

Eigenschaften

Die Kombination von Python und C erlaubt Cython ein sehr breites Anforderungsspektrum abzubilden. Möglich ist sowohl High-Level-Programmierung mit Python-Datentypen, -Sprachkonstrukten und automatischer Speicherverwaltung, als auch eine sehr C-nahe Programmierung mit C-Datentypen, C-Funktionen und manueller Speicherverwaltung. Beides kann beliebig kombiniert werden und die Interaktion mit reinem (unkompilierten) Python-Code ist ebenso nativ möglich wie die Interaktion mit C- oder C++-Code, was bei der Optimierung von Cython-Code ein sehr feingranulares Vorgehen ermöglicht. Beliebige Teile des Codes können in reinem Python geschrieben, mit Cython kompiliert, mit statischen Datentypen optimiert oder sogar nach C portiert werden, je nach Anforderung. Dadurch unterstützt Cython sehr gut das Prinzip, dass der größte Teil der Laufzeit eines Programms in einem sehr kleinen Teil des Source-Codes entsteht, also die Optimierung eines kleinen Programmteils einen sehr großen Performance-Gewinn bringen kann, während bei dem größten Teil des Codes eine hohe Entwicklungsgeschwindigkeit und ein geringer Wartungsaufwand wichtiger sind als eine größtmögliche Ausführungsgeschwindigkeit.

Die Programmiersprache erreicht die Sprachintegration zwischen Python und C vor allem über Datentypen. So können verschiedene Python-Sprachkonstrukte sowohl auf Python-Datentypen als auch auf C-Datentypen angewendet werden. Ein Beispiel ist die 'for'-Schleife, die in Python eine Foreach-Schleife ist, also über beliebige iterierbare Container laufen kann (z.B. Listen oder Dateien). In Cython kann diese Schleife zudem über C++-Listen, C-Arrays und Teilarrays laufen, sowie über Pointer-Abschnitte (Slices, z. B. ptr[2:8] für die Offsets 2-7). Daneben erfolgt eine automatische Konvertierung zwischen verschiedenen Python-Datentypen und C-Datentypen, sowohl bei Skalartypen (Zahlen) als auch bei Zeichenketten und strukturierten Datentypen (z.B. C-Struct-Typen und Python-Dictionaries).

Performance

Viele der Optimierungen, die der Cython-Compiler automatisch durchführt, bewirken eine Spezialisierung des generierten C-Codes. Dazu verwendet der Compiler explizite statische Typdeklarationen und (einfache) Typinferenz, um spezialisierten C-Code für die verwendeten Datentypen und bestimmte Code-Patterns zu erzeugen. Ein großer Teil der Optimierungen im Cython-Compiler bezieht sich auf Schleifen, da sich hier zumeist ein großer Teil der Gesamtlaufzeit ansammelt.

Kontrollstrukturen (vor allem Schleifen) sind mit Cython und einem C-Compiler übersetzt um ein Vielfaches schneller, als wenn sie von CPython interpretiert werden.[6] Dies ist bedingt durch optimistische Optimierungen und Typ-Inferenz. Dadurch läuft Cython-kompilierter Python-Code auch ohne explizite Typ-Deklarationen meist schneller als in CPython 2.6.x, obwohl die relative Performance natürlich vom jeweiligen Code abhängt. Durch die statische Deklaration von Datentypen und die dadurch resultierende Spezialisierung des C-Codes lässt sich jedoch zumeist eine Beschleunigung um ein Vielfaches erreichen. Vor allem bei mathematischen Berechnungen ergeben sich oft Laufzeitverbesserungen um den Faktor 100-1000.[7] Im Vergleich dazu liegt die typische Beschleunigung durch den Python JIT compiler Psyco bei etwa 4x-100x.[8], bei PyPy in ausgewählten Fällen bei bis zu 12x.[9]

Der von Cython für Funktionen generierte Code ist optimiert für schnelles Entpacken und Konvertieren von Aufrufparametern. Daher ist ein Python-Aufruf von nativem Code durch einen Cython-Wrapper hindurch im Allgemeinen schneller als in anderen Wrapper-Implementierungen für Python.[10][11]

Anwendungsgebiete

Die wichtigsten Anwendungsgebiete von Cython sind die Anbindung von externen Bibliotheken an den CPython-Interpreter, sowie die Beschleunigung von Python-Code, insbesondere in mathematischen Berechnungen und rechenintensiven Algorithmen.

Beispielsweise basiert das Computeralgebrasystem Sage zu einem großen Teil auf Cython-Code. Dieser dient sowohl zur Implementierung mathematischer Algorithmen, als auch zur Anbindung externen Codes in C, C++ und Fortran. Cython unterstützt zudem eine sehr effiziente Interaktion mit NumPy-Matrizen, was darauf basierende Berechnungen stark vereinfacht.

Die High-Performance XML-Bibliothek lxml ist größtenteils in Cython implementiert. Dabei werden die externen C-Bibliotheken libxml2 und libxslt an den Python Interpreter angebunden.

Ein weiteres Beispiel aus dem Umfeld der Cython-Core-Entwickler ist die MPI-Bibliothek mpi4py. Sie bindet verschiedene MPI-Implementierungen an CPython an.

Im Python-Package-Index findet sich eine kurze Liste weiterer Bibliotheken, die in Cython implementiert sind.[12]

Verwandte und ähnliche Projekte

  • Pyrex – Vorgänger von Cython
  • Unladen Swallow – Optimierte CPython-Laufzeitumgebung; basiert auf LLVM
  • PyPy – JIT-Compiler-Framework und Python-Laufzeitumgebung, die selbst in einem Python-Dialekt (RPython) geschrieben ist
  • Psyco – Spezialisierender JIT-Compiler und Code-Optimierer für die CPython-Laufzeitumgebung
  • Shed Skin – Statisch typisierte, Python-ähnliche Programmiersprache, die nach C++ kompiliert wird

Einzelnachweise

  1. ↑ a b docs.cython.org.
  2. ↑ github.com. (abgerufen am 2. Februar 2020).
  3. ↑ Cython: C-Extensions for Python. (abgerufen am 8. Juli 2018).
  4. ↑ ursprüngliche Versionen des Vorgängers Pyrex
  5. ↑ Kompatibilität zu Python 2 ist erklärtes Ziel für die zukünftige Cython-Version 1.0
  6. ↑ gmane.comp.python.cython.devel - pybench-Vergleich von Cython und CPython 2.6.2
  7. ↑ gmane.comp.python.cython.devel - Passing a pointer from Python
  8. ↑ Psyco - Introduction
  9. ↑ Geschwindigkeit von PyPy 1.4 im Vergleich zu CPython 2.6.2 mit/ohne Psyco
  10. ↑ C++-Wrapper-Benchmarks für verschiedene Python Wrapper-Generatoren (ohne Cython)
  11. ↑ C++-Wrapper-Benchmarks für Cython, Boost.Python und PyBindGen
  12. ↑ Liste der in Cython implementierten Python Pakete auf PyPI
Abgerufen von „https://de.wikipedia.org/w/index.php?title=Cython&oldid=154572400“