Bug #246853 - Redirect all ouput from depgraph.display_problems() to stderr.

svn path=/main/trunk/; revision=11948

Bug #236207 - Replace some hardcoded colors with color codes, and use
portage.output.EOutput() where appropriate.

svn path=/main/trunk/; revision=11935

Bug #173284 - Update config update counting code in chk_updated_cfg_files()
so hidden directories are ignored.

svn path=/main/trunk/; revision=11933

Remove stray print statement from previous commit.

svn path=/main/trunk/; revision=11931

Bug #173284 - Do not traverse hidden directories such as .svn or .git when
search for protected files.

svn path=/main/trunk/; revision=11929

Bug #173284 - Do not traverse hidden directories such as .svn or .git when
search for protected files.

svn path=/main/trunk/; revision=11928

Bug #236714 - Handle PortagePackageException raised from Manifest.create().

svn path=/main/trunk/; revision=11926

Make digestgen() handle PermissionDenied internally by returning failure, so
callers like repoman don't need exception handling.

svn path=/main/trunk/; revision=11924

Bug #236683 - Fix PermissionDenied handling to report the exception type.

svn path=/main/trunk/; revision=11922

Bug #243022 - Inside dblink.mergeme(), when merging a directory and a symlink
is in the way, verify that if points to a directory before accepting it,
otherwise move it out of the way.

svn path=/main/trunk/; revision=11920

Bug #216190 - Make dblink.treewalk() bail out rather than install a package
with file paths containing newlines.

svn path=/main/trunk/; revision=11918

Fix new* and do* ebuild helpers to generate consistent error messages for
missing files and generate an appropriate QA Notice when such an error is
detected in the build log. Thanks to Diego 'Flameeyes' Pettenò <flameeyes@g.o>
for the suggestion.

svn path=/main/trunk/; revision=11916

Make the EbuildQuote check filter out matches that appear to be an argument
to a message command. For example: false || ewarn "foo $WORKDIR/bar baz"
Thanks to Diego 'Flameeyes' Pettenò <flameeyes@g.o> for reporting this
issue (currently triggered by ruby-prof-0.7.0.ebuild).

svn path=/main/trunk/; revision=11913

Exempt live ebuilds from KEYWORDS.missing and KEYWORDS.dropped warnings.
Thanks to Jorge Manuel B. S. Vicetto <jmbsvicetto@g.o> for the suggestion.

svn path=/main/trunk/; revision=11911

In dyn_package(), use the 'assert' macro (from isolated-functions.sh) die if
PIPESTATUS array contains a non-zero exist status.

svn path=/main/trunk/; revision=11909

Add a --changelog-rev option that truncates the ChangeLog at a specific
revision. Also, add -i to the svn2cl options so that the actual svn revision
numbers are included in the log. (trunk r11889)

Use svn2cl --reparagraph option for better ChangeLog formatting. (trunk r11906)

svn path=/main/trunk/; revision=11907

* git support for repoman

svn path=/main/trunk/; revision=11904

Use a table to condense the docs for the default_* phase functions.

svn path=/main/trunk/; revision=11902

Bug #244485 - Document the !!atom blocker syntax.

svn path=/main/trunk/; revision=11901

Add newlines so that first lines of tables display properly with man2html.

svn path=/main/trunk/; revision=11900

Note that USE dependencies appear on the right hand side of SLOT dependencies.

svn path=/main/trunk/; revision=11899

Bug #244485 - Document USE dependencies.

svn path=/main/trunk/; revision=11898

Having a leading ./ prefix on file paths can trigger a bug in
the cvs server when committing files to multiple directories,
so strip the prefix. Thanks to Robin H. Johnson <robbat2@g.o>
for reporting.

svn path=/main/trunk/; revision=11896

Bug #244485 - Document SRC_URI arrows for output file customization.

svn path=/main/trunk/; revision=11894

Rename the "FUNCTIONS" section to "PHASE FUNCTIONS".

svn path=/main/trunk/; revision=11893

Bug #244485 - Document the default phase function helpers.

svn path=/main/trunk/; revision=11892

Bug #244485 - Document src_prepare() and src_configure() phase functions.

svn path=/main/trunk/; revision=11891

Bug #244485 - Document the doman enhancement from bug #222439.

svn path=/main/trunk/; revision=11890

Use apply_secpass_permissions() to avoid OperationNotPermitted errors when
not allowed to chown files to root uid.

svn path=/main/trunk/; revision=11873

Use grabfile() instead of grablines(), to ignore empty lines.

svn path=/main/trunk/; revision=11872

Add quote from GLEP 42 about permission bits.

svn path=/main/trunk/; revision=11871

Misc fixes and cleanups in NewsManager.

svn path=/main/trunk/; revision=11870

Return early from NewsManager.updateItems() if the news path listdir call
fails.

svn path=/main/trunk/; revision=11869

Always return early from NewsManager.updateItems() if self.unread_path can't
be created.

svn path=/main/trunk/; revision=11868

Use a simpler approach instead of implementing NewsItem.__getattr__().

svn path=/main/trunk/; revision=11867

* Add NewsItem.isValid() and DisplayRestriction.isValid() methods and use
  use them to check validity inside NewsManager.updateItems().
* Make DisplayInstalledRestriction.isValid() check validity of the atom.

svn path=/main/trunk/; revision=11866

Sort the return value from cpv_all() inside vardbapi._counter_hash() instead
of sorting them in side cpv_all(). Thanks to Brian Harring for the suggestion.

svn path=/main/trunk/; revision=11865

Inside NewsManager.updateItems(), use a mutable set for skiplist and sort the
contents when writing the file.

svn path=/main/trunk/; revision=11864

Instead of raising a TypeError from the NewsItem constructor, check the path
inside NewsManager.updateItems() before the NewsItem constructor is called.

svn path=/main/trunk/; revision=11863

Use a frozenset to optimize skiplist containment checks inside
NewsManager.updateItems().

svn path=/main/trunk/; revision=11862

Bug #246451 - Inside SecuritySet._reduce(), use portdbapi.xmatch("match-all")
in order do be consistent with portage.glsa.getMinUpgrade() which also uses
match-all.

svn path=/main/trunk/; revision=11861

Make post_emerge() exit early if it detects that the vdb state hasn't changed.
This works by comparing a hash of the COUNTER values for all packages in the
vdb.

svn path=/main/trunk/; revision=11859

Allow --keep-going to continue in some cases when a runtime dependency has
failed to build or install. This involves pruning off the parts of the graph
containing installed packages with unsatisfied dependencies.

svn path=/main/trunk/; revision=11858

Simplify code for cloning config instances inside Scheduler.merge().

svn path=/main/trunk/; revision=11856

Make FindPortdir() fall back to have_profile_dir() checks if it can't match
the current location with anything from PORTDIR_OVERLAY. Assume that an
overlay will contain at least a "repo_name" file while a master repo (portdir)
will contain at least a "profiles.desc" file.

svn path=/main/trunk/; revision=11855

Derive the changelog_path variable from the new checkdir_relative variable.

svn path=/main/trunk/; revision=11854

Make FindPortdir() return (None, None, None) on failure, instead of raising
a potentially ambiguous ValueError.

svn path=/main/trunk/; revision=11853

Inside have_profile_dir(), check for existence of profiles.desc since that
makes a little more sense thatn checking for package.mask.

svn path=/main/trunk/; revision=11852

Update hardcoded "cvs" error messages to show the correct vcs value.

svn path=/main/trunk/; revision=11851

Fix pretend output to show git -a option when committing signed manifest.

svn path=/main/trunk/; revision=11850

Add git support. Thanks to Daniel Robbins for the initial patch.

svn path=/main/trunk/; revision=11849

Fix logic from previous commit in Scheduler._choose_pkg() to ensure that
the --nodeps code is only triggered when --jobs > 1.

svn path=/main/trunk/; revision=11848

When in --nodeps mode, make Scheduler._set_digraph() discard the digraph and
make Scheduler._choose_pkg() always return the task at the front of the queue.

svn path=/main/trunk/; revision=11847

Inside depgraph.loadResumeCommand(), initialize self._scheduler_graph when
in --nodeps mode in order to avoid an AttributeError later when
self.schedulerGraph() is called.

svn path=/main/trunk/; revision=11846

Fix --jobs parallel scheduling to ensure that temporary simultaneous
installation of conflicting packages is avoided when appropriate (especially
for !!atom blockers), but allowed in specific cases that require it. This
is accomplished by reversing specific uninstall edges in the digraph, while
possibly leaving some edges in there original state.

svn path=/main/trunk/; revision=11845

Revert r11839 since it's not necessarily desired to invert all uninstall
edges. TODO: Invert only the specific edges that the depgraph has decided
are necessary and allowed to be inverted.

svn path=/main/trunk/; revision=11844

In the LinkageMap.findConsumers() docstring, add a note about incompatibility
with symlinks created by binutils-config.

svn path=/main/trunk/; revision=11843

* Use noiselevel=-1 for preserve-libs ">>> needed" and "<<< !needed" messages
  so that they're show even without --verbose mode.
* Sort files for the ">>> needed" display.

svn path=/main/trunk/; revision=11842

Remove unused formatter code in show_invalid_depstring_notice().

svn path=/main/trunk/; revision=11841

Make show_invalid_depstring_notice() send output to stderr via writemsg_level().

svn path=/main/trunk/; revision=11840

Inside Scheduler._reverse_uninstall_edges(), iover all nodes rather than just
the merge list, because some uninstall nodes may not be in the merge list
since they will be performed as part of an upgrade within a slot. This solves
a problem with Scheduler._choose_pkg() not parallelizing in some cases when
it should, due to an uninstall node not having it's edge reversed like it's
supposed to.

svn path=/main/trunk/; revision=11839

Move initialization of Scheduler._background from the constructor to the
merge() method so that a potential InvalidDependString exception can be
handled there, causing merge() to return unsuccessfully. This avoids having
to raise an exception from the constructor.

svn path=/main/trunk/; revision=11838

Add PROPERTIES=interactive support in depgraph.display() and the
PackageCounters class.

svn path=/main/trunk/; revision=11837

When adding parent directories to contents inside
dblink._add_preserve_libs_to_contents(), account for the trailing slash on
$ROOT in the while loop.

svn path=/main/trunk/; revision=11836

Handle a corner case inside dblink._add_preserve_libs_to_contents() in which
a path to be preserved doesn't exist in the contents of the installed instance.

svn path=/main/trunk/; revision=11835

Update docstring for dblink._find_libs_to_preserve().

svn path=/main/trunk/; revision=11834

Inside vardbapi.removeFromContents(), automatically clear the contents cache
of the dblink instance in case an existing one was passed in.

svn path=/main/trunk/; revision=11833

Bug #243030 - In PreservedLibraryConsumerSet.load(), avoid rebuilding packages
just because they contain preserved libs that happen to be consumers of other
preserved libs.

svn path=/main/trunk/; revision=11832

Bug #245362 - Rewrite preserve-libs preservation code so that it always relies
on inode comparisons rather than string comparisons. Instead of injecting
libraries into $D before the files are merged, the preservation code now
executes after the files are merged but before the old version is unmerged.
After determining which libs to preserve, the CONTENTS are updated to include
those libs. The PreservedLibsRegistry.register() call is now done just after
the temporary vdb entry has been moved into place, guaranteeing that a valid
vdb entry is in place so that the unregistration code from bug #210501 is no
longer needed.

svn path=/main/trunk/; revision=11831

Inside LinkageMap, use self._obj_key() whenever possible.

svn path=/main/trunk/; revision=11830

Fix $ROOT handlink inside display_preserved_libs().

svn path=/main/trunk/; revision=11829

With python-2.6, importing the Crypto.Hash.MD5 and Crypto.Hash.SHA modules
from pycrypto triggers warnings since those modules are implemented using
the deprecated md5 and sha modules from python's stdlib. So, in order to
avoid the warning and the inferior hash implementations that come with them,
never use these particular modules from pycrypto. Instead, use hashlib or
directly use stdlib's md5 and sha modules if necessary. Thanks to Markus
Peloquin for reporting.

svn path=/main/trunk/; revision=11828

Handle CommandNotFound exceptions if the scanelf binary happens to be missing,
and disable preserve-libs code in that case.

svn path=/main/trunk/; revision=11827

In LinkageMap.rebuild(), immediately raise a CommandNotFound exception if
scanelf is missing since otherwise it will lead to a KeyError later on
from findConsumers or findProviders. This will allow the caller to handle
the CommandNotFound exception if necessary, and skip any findConsumers or
findProviders since they won't be able to return valid results.

svn path=/main/trunk/; revision=11826

Handle a potential OSError that occurs if the scanelf binary is missing
when LinkageMap.rebuild() is called.

svn path=/main/trunk/; revision=11825

Replace NEEDED.ELF.2 strings with references to LinkageMap._needed_aux_key.

svn path=/main/trunk/; revision=11824

Improve the error message that's generated in LinkageMap.rebuild() for corrupt
NEEDED.ELF.2 entries.

svn path=/main/trunk/; revision=11823

When calling scanelf inside LinkageMap.rebuild(), join paths with $ROOT when
generating the arguments and then strip $ROOT from the paths in the output.

svn path=/main/trunk/; revision=11822

Fix LinkageMap.rebuild() so that the data from include_file overrides the
data from any previously installed files. This prevent possible corruption
of the data since only one set of data can be correct for a given file.

svn path=/main/trunk/; revision=11821

When using the `read` builtin to split newlines in e* function arguments, use
$REPLY in order to ensure that whitespace in each line is correctly preserved.
Thanks to Joe Peterson <lavajoe@g.o> for reporting.

svn path=/main/trunk/; revision=11820

Combine redundant arch_map code inside LinkageMap.rebuild().

svn path=/main/trunk/; revision=11819

Swap the locations of the arch and soname keys inside LinkageMap._libs in
order to conserve memory. This new branching layout uses fewer dict instances
since the number of sonames is much larger than the number of archs.

svn path=/main/trunk/; revision=11818

Inside LinkageMap._libs, use a SlotDict to store consumers and providers,
to use less memory than a normal dict.

svn path=/main/trunk/; revision=11817

Bug #245932 - Pass use_mask and use_force parameters into recursive
_expand_new_virtuals() calls, fixing a TypeError which is triggered inside
portage.dep._use_dep._eval_qa_conditionals().

svn path=/main/trunk/; revision=11816

Remove the special package.keywords mask warning from bug #223447 since
--depclean now uses the depgraph class and therefore should be more
consistent with the update algorithm.

svn path=/main/trunk/; revision=11815

Bug #245661 - Never enable --complete-graph automatically since it's confusing
for users.

svn path=/main/trunk/; revision=11814

In Atom.__setattr__(), include inputs in case it helps for debugging with
derived classes. Thanks to Brian Harring for the suggestion.

svn path=/main/trunk/; revision=11813

Override Atom.__setattr__() to make Atom instances immutable. Thanks to Brian
Harring for the suggestion.

svn path=/main/trunk/; revision=11812

Fix broken reference to self inside unmerge().

svn path=/main/trunk/; revision=11809

Synchronize portage update/restart logic in dblink.merge() and
depgraph.display() so it's consistent with Scheduler._is_restart_necessary().
Thanks to Jeremy Olexa <darkside@g.o> for reporting.

svn path=/main/trunk/; revision=11808

Free some memory by clearing the LinkageMap cache when it's not needed.

svn path=/main/trunk/; revision=11807

Bug #245362 - Use tuples of (device, inode) for all path comparisons inside
LinkageMap, so that they work regardless of path differences due to symlinked
directories. TODO: Fix other preserve-libs code, such as
dblink._preserve_libs(), to use this approach for path comparisons.

svn path=/main/trunk/; revision=11806

Bug #245358 - For unsatisfied dependencies, display the parent nodes and the
argument that pulled them in.

svn path=/main/trunk/; revision=11805

Bug #245356 - Filter POSIXLY_CORRECT from the ebuild environment since it
breaks stuff.

svn path=/main/trunk/; revision=11804

Make metadata.missing and metadata.bad fatal by removing them from the
qawarnings set. Thanks to Robin H. Johnson <robbat2@g.o> for the suggestion.

svn path=/main/trunk/; revision=11803

Import shutil globally.

svn path=/main/trunk/; revision=11802

Remove duplicate code inside EbuildFetchPretend._execute().

svn path=/main/trunk/; revision=11801

Remove locking from EbuildFetchPretend since it uses a private temp directory
now (since bug #245231).

svn path=/main/trunk/; revision=11800

Bug #245231 - Make EbuildFetchPretend use a private temp directory in order
to avoid locking the main one.

svn path=/main/trunk/; revision=11796

In SetConfig.getSetAtoms(), access self.psets directly in order to avoid
making a copy and also to avoid potential swallowing of an unexpected
KeyError.

svn path=/main/trunk/; revision=11791