cpv_expand: fix KeyError when settings is None

Remove the _ensure_encodings module.

This was only needed for ancient versions of python built with
USE=build since the ebuilds used to remove the encodings module in
that case. Since the StreamWriter and StreamReader classes may be
deprecated in the near future, now would be a good time to stop
using them.

logrotate.d: su portage portage

This is required for logrotate-3.8.0 as reported in bug 374287.

ebuild(1): allow-missing-manifests for fetch

make.conf.5: fix grammar

digestcheck: more allow-missing-manifests

digestcheck: support allow-missing-manifests

Also, update the man page.

add FEATURES=allow-missing-manifests

The feature is as it sounds- primarily useful for temporary
trees or instances where manifests aren't used.

Signed-off-by: Brian Harring <ferringb@gmail.com>

repoman: ElementTree.ParseError -> SyntaxError

The ElementTree.ParseError class is undocumented and isn't available
in python-2.6, so use its SyntaxError base class instead.

Show repository in error message about missing USE flags.

portageq get_repo_path: output empty if unknown

It used to output "None" for unknown repos, which was not intended.

Fix a typo in a comment.

varexpand: remove escaped newline characters

This fixes a regression reported in bug 365033, comment #14.

preserve-libs: only preserve soname symlinks

This avoids calling the LinkageMapELF.isMasterLink() method, since the
only symlinks that are strictly required are the soname symlinks.

LinkageMapElf.findConsumers(): fix $ROOT handling

The code which checks the soname symlink was missing a join with
$ROOT.

LinkageMapElf: clarify findConsumers soname code

Here it referred to an soname symlink as a "master" link, which was
inconsistent with the meaning of "master" link used in the
isMasterLink() method.

LinkageMapElf.isMasterLink(): handle libproc

The version component of the libproc-3.2.8.so soname is formed
slightly differently than most other libraries.

UseFlagDisplay: fix USE_EXPAND_HIDDEN breakage

Fix a typo in a comment.

Fix a typo in a docstring.

LinkageMapELF.isMasterLink(): literally compare

Comparing the lengths of the names alone seems like too much of an
assumption, so literally compare the beginning of the soname to the
basename of the given file.

misc-functions.sh: remove stale NEEDED* files

Fix last commit to work regardless of nullglob.

ecompress: beware of -k in PORTAGE_COMPRESS_FLAGS

This will fix bug #372183.

config: filter repo-level make.defaults earlier

ebuild(1): use bintree.inject for "package" phase

ebuild(1): pass missing myrepo arg to aux_get

ebuild(1): pass "installed" arg to Package

ebuild(1): pass Package instance to setcpv

This should improve repo-level support, for bug #370693.

Only create soname symlinks in global libdirs.

This prevents false positives for private libraries installed by
pre-built packages under /opt.

config.setcpv(): simplify repo_env code

env_update: document ldconfig -X for bug #373341

RELEASE-NOTES: fix spelling of "respecting"

preserve-libs: don't preserve "master" symlink

There's no point in preserving the "master" symlink, since the soname
symlink is all that's strictly required.

Don't ever recreate root .so links on env-update.

We install .so symlinks with packages, so let's use that instead of
letting ldconfig update them for no reason. This should fix problems
with preserved-libs.

Detect/create missing soname symlinks for libs.

This will allow us to safely use the ldconfig -X option for all
ldconfig calls, an thereby avoid having ldconfig override our own
soname symlink policy which allows preserve-libs to work correctly
when libraries are downgraded as discussed in bug 373341.

read_corresponding_eapi_file(): Strip final \n from EAPI value.

Remove unimplemented "severe" FEATURES value.

This will fix bug #373301.

varexpand: handle backslashes like more like bash

For backslash expansion, this function used to behave like echo
-e, but that's not needed for our purposes. We want to behave like
bash does when expanding a variable assignment in a sourced file,
in which case it performs backslash removal for \\ and \$ but nothing
more. This will fix bash compatibility for the case reported in
bug #365033.

pkg_use_display(): Use use.expand and use.expand_hidden attributes.

Package.use: share identical frozenset instances

Fix CONFIG_PROTECT breakage from previous commit.

config: disallow per-package/repo CONFIG_PROTECT

In order for reliable etc-update behavior, CONFIG_PROTECT needs to be
a global constant (see bug 370693, comment #8).

Package: add use.expand/expand_hidden attributes

This allows the merge list display to account for repository-level
USE_EXPAND and USE_EXPAND_HIDDEN settings (see bug #370693).

prepare_features_dirs: fix ccache/distcc libdir

This will fix bug #355283.

Add a QA check for systemd unit file install.

repoman: fix broken set constructor usage

repoman: add new "dependency.unknown" warning

This checks for a dependency that refers to an unknown package (which
may be provided by an overlay), as requested in bug #372789.

Improve indentation for readability.

use_reduce: less strict for installed

extract_affecting_use: less strict for installed

config: fix repo KeyErrors

UseManager: avoid possible repo KeyErrors

config: repo-level make.defaults/package.use

This completes the implementation of bug #370693.

config: fix repositories attribute for clone

portage.5: document more repo-level config files

At the repository level, package.mask has been supported for some time.
Support for use.force, package.use.force, use.mask and package.use.mask
was recently added in commit 96ab7b436ceb3543f5158aab1fab48470c3f0b98.

Bug #370693: Handle package.use.force and package.use.mask files from master
repositories.

Bug #370693: Support use.force, package.use.force, use.mask and
package.use.mask files in ${repository}/profiles.

emaint binhost: add method for SIZE/MTIME checks

emaint binhost: check SIZE and MTIME

portageq: fix all_best_visible to fail early

This will fix bug #372193.

repoman: handle PermissionDenied from digestgen

This will fix bug #371987.

misspell-suggestions: filter the input cp

Obviously, we don't want to consider the input cp as a possible
suggestion, as reported in bug 372033.

treewalk: set REPLACING_VERSIONS later

Settings like this are better done after doebuild_environment, in case
doebuild_environment calls config.setcpv/reset. This avoids the need to
call backup_changes which is not really intended for per-package
settings since it tends to pollute the config instance with settings
that survive config.reset() calls.

doebuild: don't set REPLACING_VERSIONS for remove

Also, don't call backup_changes with this variable, since it's not
necessary and we don't want to pollute the config instance.

doebuild: export REPLACING_VERSIONS more

This is for api consumers like Sabayon's Entropy.

repoman: only report allmasked if ebuilds exist

prepare_build_dirs: skip FEATURES dirs more

We don't need to prepare ccache/distcc FEATURES dirs for pkg_info or
pkg_pretend phases. This will fix bug #371909.

expand_set_args: add root SetArg nodes to graph

This prevents get_dep_chain from triggering a KeyError some cases as
reported in bug #371767.

bintree: don't provide default VERSION header

We want to make sure that we know when the VERSION header is missing,
so we shouldn't provide a default value.

pkg_use_enabled: return early for built pkgs

Built/installed packages have frozen USE settings, so there's no sense
in considering them for autounmask USE config changes. They'll simply
be rejected by select_package, and an unbuilt ebuild will be selected
instead. This will fix bug 371423 by avoiding unnecessary use_reduce
calls on the deps of installed packages.

digestgen: spawn_nofetch (fix previous commit)

This call was erroneously removed in the previous commit. We have to
call spawn_nofetch since the fetch() function no longer calls it
automatically.

digestgen: always allow fetch from mirror://

This fixes repoman and ebuild(1) to fetch from mirror:// URIs even
though RESTRICT=fetch is set (this behavior already works for emerge
since it does not call fetch() via digestgen).

Scheduler: make --fetchonly skip pkg_pretend

test_merge_order: test smallest runtime cycle

In the case of multiple runtime cycles, where some cycles
may depend on smaller independent cycles, it's optimal
to merge smaller independent cycles before other cycles
that depend on them. Therefore, we search for the
smallest cycle in order to try and identify and prefer
these smaller independent cycles.

Fix a typo in a comment.

serialize_tasks: debug output for runtime cycles

serialize_tasks: asap ignore medium_soft earlier

This allows us to avoid the less efficient runtime cycle pathway for
cases in which an asap node is a leaf if medium_soft deps are ignored.
Ths should increase efficiency without changing behavior.

serialize_tasks: minimize runtime cycles more

serialize_tasks: minimize nodes in runtime cycles

When gathering the nodes belonging to a runtime cycle, we want to
minimize the number of nodes gathered, since this tends to produce
a more optimal merge order. Ignoring all medium_soft deps serves
this purpose.

depgraph._serialize_tasks: revert formatting diff

depgraph._serialize_tasks: move libperl/perl code

This ensures that all asap_nodes are explored before setting
prefer_asap to False.

bintree: verify that default REPO is legit

We need to check the RepoConfig.missing_repo_name attribute to make
sure the repo_name is really defined.

depgraph._serialize_tasks: tweak last commit more

depgraph._serialize_tasks: tweak last commit

This code is only intended when more than one node is selected.

test_fakedbapi: define PORTDIR, test missing IUSE

test_fakedbapi: use tempdir for config paths

Add tests for fakedbapi.

slot_collision_notice: don't omit any use dep

When USE flags are removed, it can be essential to see all broken
reverse dependencies here, so don't omit any. If the list is long,
people can simply use a pager.

show_unsatisfied_blockers: don't omit any pkgs

It can be essential to see all the packages here, so don't omit any.
If the list is long, people can simply use a pager.

Fix a typo.

depgraph._serialize_tasks: fix libperl/perl order

In some cases, the asap_nodes code caused selection of a large runtime
cycle that was obviously sub-optimal. Now such cases are detected and
avoided.

fakedbapi: add myrepo args for portdbapi compat

bintree: handle pkgindex CHOST header like REPO

This allows an existing CHOST header entry to properly override our
default.

bintree: always populate pkgindex REPO header

The previous code would only populate it when there was no existing
index file. Now, the default will be populated even if the file exists
already. If an existing pkgindex header already defines these keys,
then they will appropriately override our defaults.

Fix some typoes in docs and comments.

portage.5: doc repo and wildcard atom extensions

useflag/dep_re: less strict if eapi None

When eapi is None then validation is not as strict, since we want the
same to work for multiple EAPIs that may have slightly different rules.

SubProcess: fix status for _set_returncode caller

These callers don't intend to make WIFSIGNALED return True, so they
need to shift their codes 8 bits to the left. This ensures that
commit 88f5bf84e2fd23125910b2ecaffc035971445696 behaves as intended.

AbstractEbuildProcess: handle kill by signal

This will fix bug #368817.