Fix setconfig loader to use config files instead of hardcoded fallbacks

svn path=/main/trunk/; revision=8839

enable FEATURES=preserve-libs globally for extended testing

svn path=/main/trunk/; revision=8838

make sure we only remove files that were previously preserved

svn path=/main/trunk/; revision=8837

Remove redundant config.load_infodir() calls from
portage.pkgmerge() and dblink.unmerge() since it's
already called in doebuild.()

svn path=/main/trunk/; revision=8835

Synchronize the conditional that triggers "${T}"/environment
generation with the conditional that triggers distcc and
ccache FEATURES setup.

svn path=/main/trunk/; revision=8833

Fix typo in config.load_infodir() return value logic.

svn path=/main/trunk/; revision=8831

* Don't load the CATEGORY in config.load_infodir() since this value is
  critical for doebuild() operation and we already know the category.
* Always call config.setcpv() prior to config.load_infodir() so that
  the CATEGORY is always known.

svn path=/main/trunk/; revision=8830

Bug #201090 - When portage creates a temp PORTAGE_BIN_PATH, put it
inside PORTAGE_TMPDIR since, unlike /tmp, it can't be mounted with
the "noexec" option.

svn path=/main/trunk/; revision=8828

Make config.load_infodir() more fault tolerant for cases like bug
#201082.

svn path=/main/trunk/; revision=8826

update TODO list

svn path=/main/trunk/; revision=8825

revert accidential commit

svn path=/main/trunk/; revision=8824

Bug #201082 - Don't call config.load_infodir() prior to pkg_postinst()
because it's not needed and the ebuild path that's passed in for
postinst is may be from the portage tree, which causes load_infodir()
to discard critical metadata such as CATEGORY without realoading
it.

svn path=/main/trunk/; revision=8822

implement the final part of FEATURES=preserved-libs and remove previously preserved libs that don't have any consumers left. Also fix the notice if preserved libs are found to use the preserved-rebuild package set instead of revdep-rebuild.

svn path=/main/trunk/; revision=8821

* whitelist CCACHE_* and DISTCC_* variables in config.environ()
* unset CCACHE_* and DISTCC_* variables in save_ebuild_env()

svn path=/main/trunk/; revision=8818

For compatibility with cvs.eclass, do not unset CVS_RSH in
save_ebuild_env() since that variable may be initialized in
global scope.

svn path=/main/trunk/; revision=8816

Convert caterror() to call warn() instead of err() since
we don't want to exit here.

svn path=/main/trunk/; revision=8808

Add back missing err() function.

svn path=/main/trunk/; revision=8807

Fix useq() so that it won't generate a bogus IUSE QA Notice
if called during the "depend" phase with a flag that uses
IUSE defaults.

svn path=/main/trunk/; revision=8805

Synchronize self-reinstallation logic so that emerge will always
restart itself when dblink.merge() creates temporary copies of
PORTAGE_{BIN,PYM}_PATH.

svn path=/main/trunk/; revision=8803

In dblink.treewalk(), tweak the "Safely unmerging
already-installed instance" logic to make sure that
it works in all possible cases.

svn path=/main/trunk/; revision=8801

For portage.spawn() calls, use a _shell_quote() function to quote
the path of the binary since.

svn path=/main/trunk/; revision=8798

* whitelist some misc variables from the calling environment
* blacklist the same variables in save_ebuild_env() so that
  the latest values from the calling environment always
  override those from the ebuild environment

svn path=/main/trunk/; revision=8796

Show the pid in the "starting parallel fetching" message.

svn path=/main/trunk/; revision=8794

When os.waitid() raises OSError, discard the pid since there's
no need to wait on it again.

svn path=/main/trunk/; revision=8792

After each merge, collect status from child processes
in order to clean up zombies (such as the parallel-fetch
process).

svn path=/main/trunk/; revision=8791

Move duplicate module loading code into a function.

svn path=/main/trunk/; revision=8789

Add missing newline after message.

svn path=/main/trunk/; revision=8787

In create_trees(), when isolating the environment of the ROOT=/ config,
use it's env.d keys as a blacklist to make env.d override the calling
environment.

svn path=/main/trunk/; revision=8785

When die has been called and ${T}/environment does not exist,
dump the current environment to ${T}/die.env in case it helps
for debugging.

svn path=/main/trunk/; revision=8783

* whitelist PREROOTPATH in config.environ()
* filter PREROOTPATH in save_ebuild_env()

svn path=/main/trunk/; revision=8781

* whitelist DISTDIR, PORTDIR, and PORTAGE_TMPDIR, PORTAGE_WORKDIR_MODE.
* whitelist RPMDIR just for the "rpm" phase.

svn path=/main/trunk/; revision=8779

Update comments about ROOTPATH:
sandbox's bashrc sources /etc/profile which unsets ROOTPATH,
so we have to back it up and restore it

svn path=/main/trunk/; revision=8777

Update comments about ROOTPATH:
sandbox's bashrc sources /etc/profile which unsets ROOTPATH,
so we have to back it up and restore it.

svn path=/main/trunk/; revision=8776

Fix quoting for PORTAGE_ROOTPATH.

svn path=/main/trunk/; revision=8774

In doebuild_environment(), fix KV logic so that it never
gets set during the "depend" phase. Also, use
backup_changes() to properly cache the result.

svn path=/main/trunk/; revision=8771

Bug #200863 - Don't filter ${KV} since kernel-2.eclass uses that
variable and we don't want to interfere.

svn path=/main/trunk/; revision=8770

sandbox unsets ROOTPATH, so we have to back it up on the python
side then restore it on the bash side.

svn path=/main/trunk/; revision=8768

Bug #200775 - Save more portage generated environment
variables that are in environment.bz2 so that they are
available for use by tools such as epm.

svn path=/main/trunk/; revision=8765

Add some variables such as TERM to the whitelist of variables
from the calling environment that are allowed into the ebuild
environment.

svn path=/main/trunk/; revision=8763

Don't use sandbox's BASH_ENV for new shells because it does
'source /etc/profile' which can interfere with the build
environment by modifying our PATH.

svn path=/main/trunk/; revision=8761

Make config.environ() export PKGDIR to the ebuild environment
during the "package" phase since it's currently referenced
there.

svn path=/main/trunk/; revision=8759

* After the initial setup phase, the original ebuild and eclasses are no
  longer needed because the same ebuild environment is reused for the
  entire lifecycle of the package, including uninstallation.

svn path=/main/trunk/; revision=8757

Remove unused EBUILD_ENV_FILE variable.

svn path=/main/trunk/; revision=8755

Bug #189417 - When ${T}/environment exists, isolate the ebuild
environment from the calling environment. This makes it possible
for the build to unset a variable that was inherited from the
calling environment, and the variable will remain unset between
phases.

svn path=/main/trunk/; revision=8754

Move environment.bz2 extraction from ebuild.sh to doebuild() on
the python side. The python will be able to use it's awareness
of the ${T}/environment to decide what type of ebuild environment
should be generated. For example, if the ebuild environment
should be able to unset variables that have been inherited from
the calling environment, the existence of ${T}/environment
will indicate that the ebuild environment should be isolated from
the calling environment.

svn path=/main/trunk/; revision=8753

Make elog_process() pre-load log modules that it can be called
just for that purpose.

svn path=/main/trunk/; revision=8751

When portage reinstalls itself, pre-load elog modules in
dblink.merge() since we won't be able to later if they get
unmerged (happens when namespace changes).

svn path=/main/trunk/; revision=8749

Don't modify sys.path inside dblink.merge() because it doesn't seem
to help and it triggers import errors for elog modules when downgrading
to versions of portage that use the old namespace.

svn path=/main/trunk/; revision=8747

Adjust PYTHONPATH when calling portageq so that variable
PORTAGE_PYM_PATH works.

svn path=/main/trunk/; revision=8745

When portage reinstalls itself, copy both the bin and pym
directories to a temp dir. Insert the temporary PORTAGE_PYM_PATH
as the first element of sys.path and register an atexit hook to
clean up the temporary directories.

svn path=/main/trunk/; revision=8743

In dblink.treewalk(), make portage unmerge multiple instances
os sys-apps/portage in the same slot if necessary (needed when
AUTOCLEAN=no is set).

svn path=/main/trunk/; revision=8741

Remove stray print statement.

svn path=/main/trunk/; revision=8739

Fix references to EBUILD_SH_BINARY so that they work properly
with variable PORTAGE_BIN_PATH.

svn path=/main/trunk/; revision=8738

Make dblink.treewalk() properly delete the installed instance after
it unmerges it.

svn path=/main/trunk/; revision=8737

Fix a typo.

svn path=/main/trunk/; revision=8736

Fix more references to MISC_SH_BINARY so that they work properly
with variable PORTAGE_BIN_PATH.

svn path=/main/trunk/; revision=8735

In doebuild, fix paths to ebuild.sh and misc-functions.sh so
that they work with variable PORTAGE_BIN_PATH.

svn path=/main/trunk/; revision=8734

Fix references to PORTAGE_BIN_PATH in doebuild() to use the config
setting since it may be a temp directory when portage is reinstalling
itself.

svn path=/main/trunk/; revision=8733

Enable the EBUILD_EXIT_STATUS_FILE sanity check when portage is
reinstalling itself since the check is reliable in this case now
that a temporary PORTAGE_BIN_PATH is created.

svn path=/main/trunk/; revision=8732

If portage is reinstalling itself, create a temporary
copy of PORTAGE_BIN_PATH in order to avoid relying on
on the new versions which may be incompatible.

svn path=/main/trunk/; revision=8731

Bug #200652 - Skip ${T}/environment handling for pkg_nofetch().

svn path=/main/trunk/; revision=8729

In chk_updated_cfg_files(), avoid scanning for config files for
paths that aren't writable by the current user. This prevents
Permission denied errors from being triggered later when trying
to scan subdirectories that are inaccessible.

svn path=/main/trunk/; revision=8726

Disable PORTAGE_PACKAGE_EMPTY_ABORT by default since
the scrollkeeper-9999 upgrade will trigger a false
positive. Thanks to leio for reporting.

svn path=/main/trunk/; revision=8724

Don't export PORTAGE_PACKAGE_EMPTY_ABORT to the ebuild environment.

svn path=/main/trunk/; revision=8721

Add a sanity check in dblink.treewalk() so that a broken ebuild
that doesn't install any files will not be able to replace a
package in the same slot that really installs files.

This check can be bypassed by manually unmerging the old package
or by setting PORTAGE_PACKAGE_EMPTY_ABORT="0" in /etc/make.conf.

svn path=/main/trunk/; revision=8720

In the preprocess_ebuild_env() subshell, check for errors and
return early when necessary.

svn path=/main/trunk/; revision=8718

Just use ${PN} instead of catpkgsplit().

svn path=/main/trunk/; revision=8716

portage upgrade or downgrade invalidates EBUILD_EXIT_STATUS_FILE
sanity checks since ebuild.sh portage version may differ from the
current instance that is running in python.

svn path=/main/trunk/; revision=8714

Remove a redundant os.EX_OK check that exit_status_check() already
handles internally.

svn path=/main/trunk/; revision=8712

Fix logic wrt exit_status_check and elog_process in doebuild().

svn path=/main/trunk/; revision=8710

Bug #200229 - The gimp ebuild defines AA as a local variable. In order
to accomodate this, create a PORTAGE_MUTABLE_FILTERED_VARS list for
variables that portage sets but doesn't mark readonly. In order to
prevent changed values from causing unexpcted interference, they are
filtered out of the environment when it is saved or loaded (any
mutations do not persist).

svn path=/main/trunk/; revision=8708

Don't forget to unlink ${EBUILD_EXIT_STATUS_FILE} before each phase.

svn path=/main/trunk/; revision=8706

Fix config.pop() so that is will properly raise a KeyError.

svn path=/main/trunk/; revision=8704

Bug #200231 - Make dir_get_metadata() handle an exception thrown
from dir_get_list() when there's a problem connection problem.

svn path=/main/trunk/; revision=8702

Make the environment handling code detect errors and die if
necessary.

svn path=/main/trunk/; revision=8700

Make doebuild() use EBUILD_EXIT_STATUS_FILE sanity checks for the
extra misc-functions.sh preinst/postinst shell code.

svn path=/main/trunk/; revision=8698

Make doebuild skip directory creation for the "cleanrm" command.

svn path=/main/trunk/; revision=8696

Fix grammar.

svn path=/main/trunk/; revision=8694

* In doebuild(), don't create directories for the "clean" or "unmerge".
* Fix dyn_clean() to clean the status file and return early when appropriate.

svn path=/main/trunk/; revision=8692

Make config.pop() properly call config.modifying().

svn path=/main/trunk/; revision=8690

Implement config.pop().

svn path=/main/trunk/; revision=8688

Check if ${EBUILD_EXIT_STATUS_FILE} is empty before
attempting to use it.

svn path=/main/trunk/; revision=8686

--buildpkgonly will not merge anything, so
it cancels all binary package options.

svn path=/main/trunk/; revision=8683

Bug #200313 - Detect and report when an ebuild phase
exits unexpectedly. This is type of behavior is known
to be triggered by things such as failed variable
assignments (bug #190128) or bad substitution errors
(bug #200313).

We use a EBUILD_EXIT_STATUS_FILE environment variable
to specify a file that the shell code is supposed to
create when it exits in a normal manner. If the file
does not get created like it's supposed to be then we
can conclude that the shell has exited in some
unexpected way.

svn path=/main/trunk/; revision=8682

Automatically try to load environment.bz2 whenever
"${T}/environment" does not exist, except for "clean"
and "depend" phases.

svn path=/main/trunk/; revision=8680

Make diefunc() show the path of ${T}/environment since it's usually
in the stack trace and the user is likely to be interested in it.

svn path=/main/trunk/; revision=8678

Filter more misc environment variables.

svn path=/main/trunk/; revision=8676

unset ECLASS along with the other variables from inherit().

svn path=/main/trunk/; revision=8674

Add NOCONFMEM to config._environ_filter.

svn path=/main/trunk/; revision=8672

* Move filtering of a bunch of portage config variables from
save_ebuild_env() to config.environ().
* Add EMERGE_FROM to the READONLY_PORTAGE_VARS list.

svn path=/main/trunk/; revision=8670

Bug #124041 - Make emerge show an informative warning message when one
or more eclasses override eclasses from PORTDIR. The warning can be
permanently disabled by setting PORTAGE_ECLASS_WARNING_ENABLE="0" in
/etc/make.conf.

svn path=/main/trunk/; revision=8668

Filter _RC_GET_KV_CACHE from the saved environment.

svn path=/main/trunk/; revision=8666

Make preprocess_ebuild_env() reload a known good version of
save_ebuild_env() in order to avoid making an assumption that
it hasn't been overridden.

svn path=/main/trunk/; revision=8663

Remove some unsafe assumptions from preprocess_ebuild_env() and
note the remaining assumption that save_ebuild_env() is not
overridden by the environment being loaded.

svn path=/main/trunk/; revision=8662

Allow the pkg_info and pkg_config pre/post hooks to run even
when the ebuild function is not defined.

svn path=/main/trunk/; revision=8659

Remove the empty default pkg_setup, src_install, pkg_preinst,
pkg_postinst, pkg_prerm, pkg_postrm, and pkg_config functions
since they do nothing more than clutter the environment.

svn path=/main/trunk/; revision=8655

Test if ebuild functions are defined before calling them. This
will be useful if an environment.bz2 has been loaded and it has
missing functions for some reason. For example, there are a lot
of default functions that are empty and could simply be omitted
from the environment.

svn path=/main/trunk/; revision=8654

The qa_call() function and anything before it are portage internals
that the user will not be interested in. Therefore, the stack trace
should only show calls that come after qa_call().

svn path=/main/trunk/; revision=8653

* Load environment.bz2 for the pkg_config() phase.
* Run the "clean" phase if pkg_config() succeeds.

svn path=/main/trunk/; revision=8651

Implement loading of environment.bz2 for the pkg_info() phase.
Since a temporary directory is required for processing of
${T}/environment, and we want a user who's not in the portage
group to be able to run the pkg_info() phase, PORTAGE_TMPDIR
is temporarily overridden with a directory created by mkdtemp.
To make this work, doebuild() creates the tempdir and cleans
it up in a finally block.

svn path=/main/trunk/; revision=8649