Merge

TreeFragment fix: Replace enclosing ExprStatNode if statement is substituted

Removed str conversion from SourceDescriptors in order to be more explicit.

Focus on visitors rather than transforms; Transform.py renamed to Visitor.py

Some changes in class hierarchies etc.; transforms no longer has a common
base class and VisitorTransform is a subclass of TreeVisitor rather than
the reverse. Also removed visitor use of get_child_accessors;
child_attrs is accessed directly (because of claims of overengineering :-) ).

--HG--
rename : Cython/Compiler/Transform.py => Cython/Compiler/Visitor.py

invalidate the cache of all subtypes when updating a type's tp_dict (algorithm copied from typeobject.c in Py3)

extended test case

comment

moved method cache invalidation next to dict update, as proposed by Lisandro

simple test for extension class body

document test runner options

test cases for optional arguments in cdef functions

fix coverage analysis in test runner

cleanup for test runner: use optparse to read cmd line options

require options '-v' or '-vv' for status output in test runner

test fixes

better test output

non-runnable test moved to tests/compile/

--HG--
rename : tests/run/docstrings.pyx => tests/compile/docstrings.pyx

invalidate type cache in Py2.6+

removed left-over

second try to fix classmethods

reverted last change, based on extended test case

fix classmethod() calls

--HG--
rename : tests/run/classmethod.pyx => tests/run/staticmethod.pyx

simple test case to emulate class methods as function attributes

merge

support for new buffer protocol in Py3

Some more unicode compile crash fixes.

test output fix

Py2.6 test fixes

enabled most remaining tests from the 'broken' directory

--HG--
rename : tests/broken/arraytoptrarg.pyx => tests/compile/arraytoptrarg.pyx
rename : tests/broken/ass2longlong.pyx => tests/compile/ass2longlong.pyx
rename : tests/broken/builtinfuncs.pyx => tests/compile/builtinfuncs.pyx
rename : tests/broken/cascmp.pyx => tests/compile/cascmp.pyx
rename : tests/broken/cassign.pyx => tests/compile/cassign.pyx
rename : tests/broken/casttoexttype.pyx => tests/compile/casttoexttype.pyx
rename : tests/broken/cnamespec.pyx => tests/compile/cnamespec.pyx
rename : tests/broken/cnumop.pyx => tests/compile/cnumop.pyx
rename : tests/broken/cunsignedlong.pyx => tests/compile/cunsignedlong.pyx
rename : tests/broken/del.pyx => tests/compile/del.pyx
rename : tests/broken/delslice.pyx => tests/compile/delslice.pyx
rename : tests/broken/drake1.pyx => tests/compile/drake1.pyx
rename : tests/broken/eqcmp.pyx => tests/compile/eqcmp.pyx
rename : tests/broken/ewing1.pyx => tests/compile/ewing1.pyx
rename : tests/broken/ewing5.pyx => tests/compile/ewing5.pyx
rename : tests/broken/excvalcheck.pyx => tests/compile/excvalcheck.pyx
rename : tests/broken/excvalreturn.pyx => tests/compile/excvalreturn.pyx
rename : tests/broken/extcoerce.pyx => tests/compile/extcoerce.pyx
rename : tests/broken/extdescrdel.pyx => tests/compile/extdescrdel.pyx
rename : tests/broken/extdescrget.pyx => tests/compile/extdescrget.pyx
rename : tests/broken/extdescrset.pyx => tests/compile/extdescrset.pyx
rename : tests/broken/extexttype.pyx => tests/compile/extexttype.pyx
rename : tests/broken/extgetitem.pyx => tests/compile/extgetitem.pyx
rename : tests/broken/extinheritdel.pyx => tests/compile/extinheritdel.pyx
rename : tests/broken/extinheritset.pyx => tests/compile/extinheritset.pyx
rename : tests/broken/extpropertyall.pyx => tests/compile/extpropertyall.pyx
rename : tests/broken/extpymemberdef.pyx => tests/compile/extpymemberdef.pyx
rename : tests/broken/forfromelse.pyx => tests/compile/forfromelse.pyx
rename : tests/broken/gencall.pyx => tests/compile/gencall.pyx
rename : tests/broken/globalstmt.pyx => tests/compile/globalstmt.pyx
rename : tests/broken/gustafsson2.pyx => tests/compile/gustafsson2.pyx
rename : tests/broken/index.pyx => tests/compile/index.pyx
rename : tests/broken/jiba5.pyx => tests/compile/jiba5.pyx
rename : tests/broken/jiba6.pyx => tests/compile/jiba6.pyx
rename : tests/broken/johnson1.pyx => tests/compile/johnson1.pyx
rename : tests/broken/magcmp.pyx => tests/compile/magcmp.pyx
rename : tests/broken/none.pyx => tests/compile/none.pyx
rename : tests/broken/notnonearg.pyx => tests/compile/notnonearg.pyx
rename : tests/broken/r_pernici1.pyx => tests/compile/r_pernici1.pyx
rename : tests/broken/slicex.pyx => tests/compile/slicex.pyx
rename : tests/broken/traceback.pyx => tests/compile/traceback.pyx
rename : tests/broken/watts2.pyx => tests/compile/watts2.pyx
rename : tests/broken/anonymousenum.pyx => tests/run/anonymousenum.pyx
rename : tests/broken/ass2cglobal.pyx => tests/run/ass2cglobal.pyx
rename : tests/broken/cstringmeth.pyx => tests/run/cstringmeth.pyx
rename : tests/broken/extcmethod.pyx => tests/run/extcmethod.pyx
rename : tests/broken/extpropertyref.pyx => tests/run/extpropertyref.pyx
rename : tests/broken/filenames.pxi => tests/run/filenames.pxi
rename : tests/broken/filenames.pyx => tests/run/filenames.pyx
rename : tests/broken/inhcmethcall.pyx => tests/run/inhcmethcall.pyx
rename : tests/broken/king1.pyx => tests/run/king1.pyx
rename : tests/broken/menten1.pyx => tests/run/menten1.pyx
rename : tests/broken/nononetypecheck.pyx => tests/run/nononetypecheck.pyx
rename : tests/broken/tandemstats.pyx => tests/run/tandemstats.pyx
rename : tests/broken/watts1.pyx => tests/run/watts1.pyx

builtin names must be EncodedStrings as they get reused

fix intern() builtin in Py3

cleanup

fix method calls on Cython generated Python classes

cleanup

forgotten part of last commit

make imported names behave like identifiers, too

make imported names encoded strings to fix attribute access on them

rename type imports of 'unicode' and 'str' type according to Py version

test case fix

fix keyword arguments in function calls: must be unicode in Py3 and strings in Py2, just like identifiers

comment fix

Usability fixes in Transform

extended test case on string literals

test case for various string literals

enable ur'abc' literals and b'abc'/br'abc' literals

moved tests out of the way that are broken in Py3

--HG--
rename : tests/compile/extinheritdel.pyx => tests/broken/extinheritdel.pyx
rename : tests/compile/extinheritset.pyx => tests/broken/extinheritset.pyx

merge

trunk merge

typo

keep tests from different directories separate to prevent overwriting files with the same name

'make test3' target to build with the default python version and run the tests against python3.0

more test fixes

more test fixes

class names are identifiers, too

cleanup

struct fields were generated in the wrong order

New features: CodeWriter, TreeFragment, and a transform unit test framework.

See the documentation of each class for details.

It is a rather big commit, however seperating it is non-trivial. The tests
for all of these features all rely on using each other, so there's a
circular dependency in the tests and I wanted to commit the tests and
features at the same time. (However, the non-test-code does not have a circular
dependency.)

Added Node.clone_node utility.

A method for cloning nodes. I expect this one to work on all descandants, but
it can be overriden if a node has special needs. It seems natural to put
such core functionality in the node classes rather than in a visitor.

test fixes

Added ReadonlyVisitor.

There was an option in VisitorTransform for this but it was way too obscure,
better to have a seperate class.

Fixed typo children_attrs -> child_attrs

VisitorTransform + smaller Transform changes

fix for name declarations of interned string values in functions

big rewrite for the print statement in Py2 to provide the same interface in Py2 and Py3

Replace filename strings with more generic source descriptors.

This facilitates using the parser and compiler with runtime sources (such as
strings), while still being able to provide context for error messages/C debugging comments.

let print statement use print() in Py3

__future__ import fix for older Python versions

enable __future__ imports

fix for slot descriptor

test fix

test fix

range optimisation fixes

cleanup and provisionary Py3 fix

byte encode docstrings correctly

test fix - that's how things work ...

work around Cython problem with parsing ur'abc' literals

simplify

empty tuple is used by traceback builder => must be created early

test fix

fixed PyMethod_New() call

cleanup

unsimplify :)

simplify

more test fixes for Py3

more test fixes for Py3

more test fixes for Py3

fixes for keyword arg checking

more test fixes for Py3

lots of test fixes for Py3

lots of test fixes for Py3

replace the now missing PyNumber_Divide() by PyNumber_TrueDivide()

disable broken 'print' statement for now (PyFile_* went missing)

test fix

tons of fixes for the test suite: docstrings must be unicode strings to run in Py3's doctest (obviously...)

--HG--
rename : tests/compile/withnogil.pyx => tests/run/withnogil.pyx

unicode re fix

skip off compiler error tests if we don't run the compiler

__setslice__ and __delslice__ were removed in Py3

make it explicit in the generated source code what is an identifier string constant and what is a normal string constant that just happens to get interned

docstrings can't have u'abc' literals in Py3

importing a module named by a unicode string seems to work equally well in Py2 and Py3