Listen Sie alle Module auf, die Teil eines Python-Pakets sind.

Question

Gibt es eine einfache Möglichkeit, alle Module zu finden, die Teil eines Python-Pakets sind? Ich habe this old discussion gefunden, was nicht wirklich aussagekräftig ist, aber ich würde gerne eine definitive Antwort haben, bevor ich meine eigene Lösung basierend auf os.listdir() auf den Markt bringe.

Answer 1

Ja, Sie wollen etwas basierend auf pkgutil oder ähnlich - so können Sie alle Pakete gleich behandeln, egal ob sie in Eiern oder Zips oder so sind (wo os.listdir nicht hilft).

import pkgutil 

# this is the package we are inspecting -- for example 'email' from stdlib 
import email 

package = email 
for importer, modname, ispkg in pkgutil.iter_modules(package.__path__): 
    print "Found submodule %s (is a package: %s)" % (modname, ispkg) 

Wie importieren Sie sie auch? Sie können nur __import__ als normal verwenden:

import pkgutil 

# this is the package we are inspecting -- for example 'email' from stdlib 
import email 

package = email 
prefix = package.__name__ + "." 
for importer, modname, ispkg in pkgutil.iter_modules(package.__path__, prefix): 
    print "Found submodule %s (is a package: %s)" % (modname, ispkg) 
    module = __import__(modname, fromlist="dummy") 
    print "Imported", module 

Answer 2

Hier ist ein Weg, aus der Spitze von meinem Kopf:

>>> import os 
>>> filter(lambda i: type(i) == type(os), [getattr(os, j) for j in dir(os)]) 
[<module 'UserDict' from '/usr/lib/python2.5/UserDict.pyc'>, <module 'copy_reg' from '/usr/lib/python2.5/copy_reg.pyc'>, <module 'errno' (built-in)>, <module 'posixpath' from '/usr/lib/python2.5/posixpath.pyc'>, <module 'sys' (built-in)>] 

Es sicherlich gereinigt und verbessert werden könnte.

EDIT: Hier ist eine etwas schönere Version:

>>> [m[1] for m in filter(lambda a: type(a[1]) == type(os), os.__dict__.items())] 
[<module 'copy_reg' from '/usr/lib/python2.5/copy_reg.pyc'>, <module 'UserDict' from '/usr/lib/python2.5/UserDict.pyc'>, <module 'posixpath' from '/usr/lib/python2.5/posixpath.pyc'>, <module 'errno' (built-in)>, <module 'sys' (built-in)>] 
>>> [m[0] for m in filter(lambda a: type(a[1]) == type(os), os.__dict__.items())] 
['_copy_reg', 'UserDict', 'path', 'errno', 'sys'] 

HINWEIS: Dies wird auch Module finden, die unbedingt möglicherweise nicht in einem Unterverzeichnis des Pakets befinden, wenn sie gezogen sind in in seine __init__.py Datei, so kommt es darauf an, was Sie mit "Teil von" einem Paket meinen.

Answer 3

Das richtige Werkzeug für diesen Job pkgutil.walk_packages ist.

Um alle Module auf Ihrem System auflisten:

import pkgutil 
for importer, modname, ispkg in pkgutil.walk_packages(path=None, onerror=lambda x: None): 
    print(modname) 

Beachten Sie, dass die Einfuhren alle Subpackages walk_packages, aber nicht Submodule.

Wenn Sie alle Submodule eines bestimmten Paketes zur Liste möchten, dann können Sie so etwas wie folgt verwenden:

import pkgutil 
import scipy 
package=scipy 
for importer, modname, ispkg in pkgutil.walk_packages(path=package.__path__, 
                 prefix=package.__name__+'.', 
                 onerror=lambda x: None): 
    print(modname) 

iter_modules listet nur die Module, die auf einer Ebene tief sind. walk_packages ruft alle Submodule ab. Im Fall von scipy zum Beispiel walk_packages kehren

scipy.stats.stats 

während iter_modules nur

scipy.stats 

Die Dokumentation auf pkgutil zurückgibt (http://docs.python.org/library/pkgutil.html) Liste nicht all interessant in /usr definierten Funktionen /lib/python2.6/pkgutil.py.

Vielleicht bedeutet dies, dass die Funktionen nicht Teil der "öffentlichen" Schnittstelle sind und Änderungen unterliegen können.

jedoch zumindest von Python 2.6 (und vielleicht auch frühere Versionen?) pkgutil kommt mit einer walk_packages Methode, die rekursiv die all verfügbaren Module Wanderungen durch.

Answer 4

arbeitet Dies ist für mich:

import types 

for key, obj in nltk.__dict__.iteritems(): 
    if type(obj) is types.ModuleType: 
     print key