Bug #334365 - Fix depgraph._wrapped_select_pkg_highest_available_imp()
to avoid invalid or masked installed packages when necessary. This is
especially important for invalid packages since they need be replaced
so that their dependencies can be parsed for --depclean operations.

Make Package._validate_deps() check USE conditionals in SRC_URI.

Bug #334365 - Mask packages with invalid metadata as early as possible,
so that the depgraph won't select them unless they are already installed
and there is no other choice. This should trigger automatic reinstallation
of installed packages that have invalid metadata.

Add ebuild(1) support for FEATURES=digest.

Use a PORTAGE_SIGPIPE_STATUS variable to export 128 + SIGPIPE to the
ebuild environment. SIGPIPE is typically 13, but its better not to
assume that.

Make save_ebuild_env() filter assert_sigpipe_ok().

Bug #334365 - When parsing dependencies of installed packages in
depgraph._add_pkg_deps(), ignore invalid USE conditionals, since
these are a common problem and it's practical to ignore them for
installed packages.

TODO: For installed package, save any InvalidDependString info in
dynamic_config and wait until display_problems() to show it. For
packages that aren't installed, we should validate and mask them
before they are selected.

show_invalid_depstring_notice: Don't repeat the dep string

Fix repoman to support FEATURES=digest (reportedly it used to work
but has stopped working since recent changes).

Mention repoman support in the FEATURES=digest docs.

Remove portage.usedefaults since it's broken by the previous commit.

config: Move handling of USE related config files into UseManager

Fix fragile sets config file path handling for for ResolverPlayground
and remove unecessary setconfig_fallback() usage.

Fix WorldSelectedSet.singleBuilder() to use EROOT.

Add EROOT support to setconfig_fallback().

Add EROOT support to the @module-rebuild package set.

Add EROOT support to regenworld.

Make regenworld write changes to a temporary file, and tell the user
to update the file manually if desired.

When parsing package.env, pass the same tolerant and allow_sourcing
arguments to getconfig() that are used when parsing make.conf.

Use deepcopy for LicenseManger, since I remove clone support from the
constructor.

Use open() instead of file(), for python3.

Tests: Add LicenseManager tests

ExtendedAtomDict: Add __eq__

ResolverPlayground: Add ability to create config files and sets

Remove LicenseManager.__deepcopy__() since the default implementation
seems to work fine.

Implement LicenseManager.__deepcopy__().

Fix imports in _config submodules.

Bug #334319 - Don't call config.backup_changes("FEATURES") because it's
no longer needed and it causes problems with environment overrides
of FEATURES.

* Make dblink instantiate the ConfigProtect object on demand instead of
  in the constructor, since it triggers lots of stat calls and it's
  wasteful for iter_owners.
* Fix dblink ConfigProtect construction to use EROOT.

Bug #334265 - Fix AttributeError triggered by empty herd element in
check_metadata_herds().

More _pkg_use_enabled fixes

Atom.violated_conditionals: Always treat deps as violated if the flag is not in IUSE

Bug #334253 - Fix breakage in FEATURES=test-fail-continue logic.

config: Move _prune_incremental to helper

config: Move features_set into its own file

config: Split out LicenseManager and helper

ExtendedAtomDict: Add __delitem__

Use Package.iuse.is_valid_flag() to account for implicit IUSE.

repoman: Let repoman check for flags missing from IUSE

Make config.setcpv() trigger regenerate() if the package from the
previous setcpv  call had package.env settings which modified
FEATURES. This ensures that self.features is accurate (hopefully
solving the issue in bug #44796, comment #77).

Handle SIGPIPE when unpack() extracts tar files through a pipe (bug #309001).

When checking ${PIPESTATUS[@]} for extraction of tar files in unpack(),
use a new assert_sigpipe_ok() function which behaves the same as the
existing assert() function except that it tolerates pipe writers being
killed by SIGPIPE.

* Use iterators instead of keys() when possible.
* Use iterators instead of sets for set.intersection() calls.
* Use digraph.__iter__ and __contains__ as shortcuts to digraph.nodes
  access.

In depgraph._select_pkg_highest_available_imp(), make sure
allow_unstable_keywords is True before adding a package to
_needed_unstable_keywords.

Pass a keyword hint from getmaskingstatus() to the autounmask code.

use_reduce: Give a hint to IUSE in the 'use flag '%s' is not referencable in conditional' error

Add 'candy' to SUPPORTED_FEATURES.

Make recursive grablines() ignore the same directories as
portage.listdir(), and do the same for update_config_files().

Bug #318241 - Include LICENSE file in release tarballs.

Bug #309907 - Update more config files for package moves:
package.accept_keywords, package.env, and package.properties.

Fix spelling in zlib.error message.

Handle zlib.error when reading compressed build logs via GzipFile.

Allow more time for natural exit of the ebuild process after it has
called the exit command via IPC.

Don't copy the src directory because it doesn't exist anymore.

Remove the python-missingos module since apparently nobody has needed
it for a long time.

Remove support for the missingos module since apparently nobody has needed
it for a long time.

Remove the bsd-chflags module since it hasn't been used for some time
(python as read support and we spawn binaries for any necessary
modifications).

Remove unused tbz2tool.c file. The latest stable ebuild doesn't
build/install it.

Add notes about package.env and package.accept_keywords.

Remove deprecated destroot argument from dblink.isowner() call.

Remove python-oriented checks from install_qa_check() since I'm unsure
about these policy decisions being included in portage. Besides, these
kinds of things could go in the python eclass.

During the post src_install QA checks, log to a temporary file
since the code we are running reads PORTAGE_LOG_FILE, and we
want to avoid annoying "gzip: unexpected end of file" messages
when FEATURES=compress-build-logs is enabled.

Make Binpkg call prepare_build_dirs() before trying to clean the old
log, so PORTAGE_LOG_FILE is initialized.

Add missing scheduler attribute to BinpkgVerifier (broken since the
the addition of FEATURES=compress-build-logs support).

Make EOutput.write() use writemsg() for special unicode handling.

_use_dep.{evaluate_conditionals,_eval_qa_conditionals,violated_conditionals}: Be faster and preserve token order

Fix broken logic in InheritDeprecated.

Make InheritDeprecated detect indirect inherits of deprecated eclasses,
and indicate the indirect nature in the error message.

Make InheritDeprecated check for direct inherits, and give line numbers
in error messages.

repoman: check for deprecated eclasses

compare the inherited eclasses to a list of deprecated eclasses.
print QA warnings for each deprecated eclass found and suggest an
alternative for those that have one.

Add back _conditionals_class.values() method in order to fix breakage
in circular_dependency_handler._find_suggestions().

portage.dep._use_dep: Rewrite the parser for better readability and speed

Using a regex leads to better readability, but no speed change.
Replacing slot_dict_class with a simple dict results in ~1/3 run time decrease in my tests.

Fix erroneoud reference to self.aux_get in bintree.move_ent().

Fix AttributeError for MetadataRegen._sched_iface.

* By default, disable the calc_prelink parameter to perform_md5() for
  merge and unmerge.
* Add FEATURES=prelink-checksums in order to trigger the old behavior.

Fix UnboundLocalError for catdir inside dblink.unmerge().

Bug #292083 - Support package.accept_keywords in profiles.

Add EPREFIX support to load_default_config().

Fix broken writemsg call in depgraph._resolve() that triggers this error:
TypeError: writemsg() got an unexpected keyword argument 'file'

Omit non-existent files from the config._pkeywords_list
stack (stores data for profile package.keywords). This isn't
feasible for package.use (among other package.* files such
as package.use.mask) since it is stacked in layers with
make.defaults USE, and the layer indices need to align.

Move default ACCEPT_KEYWORDS handling for package.keywords out of
an unnecessary loop.

Revert back to using ROOT for env_update(), since that's how the
prefix branch does it.

Fix env_update() calls to use EROOT.

Bug #324191 - Add support for FEATURES=compress-build-logs. The causes
all build logs to be compressed while they are being written. Log file
names have an extension that is appropriate for the compression type.
Currently, only gzip(1) compression is supported, so build logs will
have a '.gz' extension when this feature is enabled.

When accessing pkgsettings.features inside Scheduler._generate_digests(),
ensure that we are using global features settings rather than those
from package.env.

Add a deprecation warning to FetchlistDict.has_key().

Add a deprecation warning for the unused justmanifest parameter of
digestcheck().

Quote arrays in QA_PREBUILT handling.

Add support for a QA_PREBUILT variable should contain a list of
pre-built binaries. Paths listed here will be appended to each of
the other QA_* variables. Thanks to Diego Pettenò <flameeyes@g.o>
for the suggestion.

Add upstream.workaround warning for addpredict calls. Thanks to
Diego Pettenò <flameeyes@g.o> for the suggestion.

Fix broken reference to portage._validate_cache_for_unsupported_eapis.

Add a wrapper around config.features that provides the following
enhancements:

* The FEATURES variable is automatically synchronized upon modification.

* Modifications result in a permanent override that will cause the change
  to propagate to the incremental stacking mechanism in config.regenerate().
  This eliminates the need to call config.backup_changes() when FEATURES
  is modified, since any overrides are guaranteed to persist despite calls
  to config.reset().

This allows cleanup of all code that overrides FEATURES, and also allows
config.regenerate() to stack FEATURES such that special cases are not
needed for package.env handling inside config.setcpv().

When stacking incrementals in config.regenerate(), use a set to avoid
relatively inefficient __contains__ and remove operations on a list.

Fix config.setcpv() so it only calls _grab_pkg_env when there are
relevant package.env settings.

Remove duplicate realpath call for PORTAGE_TMPDIR.

At some point we may want to stop exporting FEATURES to the ebuild
environment, in order to prevent ebuilds from abusing it. In
preparation for that, export it as PORTAGE_FEATURES so that bashrc
users will be able to migrate any FEATURES conditional code to
use this alternative variable.

Bug #44796 - Add support for /etc/portage/package.env. As documented in
man/portage.5:

Per-package environment variable settings. Entries refer to environment
files that are placed in the /etc/portage/env/ directory and have the
same format as make.conf(5).
Format:
- comment lines begin with # (no inline comments)
- one DEPEND atom per line followed by name(s) of environment file(s)

Example:
sys-libs/glibc glibc.conf

Make varexpand() create a new empty dict for variable expansions in
case one is not passed in. This will prevent some potentially
confusing behavior.

Split out a _ordered_by_atom_specificity() in order to eliminate
duplicate code from the package.* config file handling.

Make DEPCACHE_PATH relative to EPREFIX, and comment about similarity
to make.globals handling.

* Make dblink._linkmap_rebuild() return early if preserve-libs is disabled
  and the preserve-libs registry is empty.
* Make dblink._find_unused_preserved_libs() return early if the
  preserve-libs registry is empty.