Replace getstatusoutput with unicode safe Popen.

This fixes potential issues similar to those reported in bug #310789.

make_herd_base: encode unicode file paths safely

This will fix cases similar to the one fixed in commit
f01d7a8ca158ec60df76a3e8ae5b80ac3f62429e for bug #310789.

egencache: encode unicode file paths safely

This will fix cases similar to the one fixed in commit
f01d7a8ca158ec60df76a3e8ae5b80ac3f62429e for bug #310789.

MetaDataXML: encode unicode file paths safely

This will fix cases similar to the one fixed in commit
f01d7a8ca158ec60df76a3e8ae5b80ac3f62429e for bug #310789.

Add EAPI 5_pre2 with features approved by council

In the 9/11 council meeting, they approved everything in EAPI 5_pre1
except user patches. So, add EAPI 5_pre2 which is identical to EAPI
5_pre1 but with user patches (apply_user_patches) support removed.

Only validate .desktop files that are installed into XDG-compliant locations.

This replaces the existing error blacklist, and therefore removes the repoman check.

repoman: fix Unicode unequal comparison warning

repoman: fix os.system() unicode, bug #310789

repoman: ElementTree.parse: encode unicode path

This fixes another issue like bug #310789.

use(): use set -f and handle IFS

Improve ignored binpkg display for bug #434540.

repoman: fix getstatusoutput more, bug #310789

repoman: fix getstatusoutput unicode, bug #310789

repoman: fix popen unicode handling, bug #310789

ObjectProxy: implement __enter__ and __exit__

DEVELOPING: fix errors for bug #313413

EbuildPhase: simplify utime args

EbuildPhase: bump WORKDIR timestamp after unpack

This will fix bug #332217.

egencache: tweak metadata-transfer logic

Now is won't force metadata-transfer unless it's absolutely necessary.

egencache: skip metadata-transfer more often

best/has_version: --host-root first arg only

egencache: skip metadata-transfer if possible

If there is an existing metadata/md5-cache directory, then it's not
necessary to forcibly enable metadata-transfer.

Detect md5-cache when no cache-formats specified.

Auto-detect cache-formats from the corresponding directories when
cache-formats is not specifed in layout.conf, and prefer md5-dict if
available. After this behavior is deployed in stable portage, the
default egencache format can be changed to md5-dict.

Test portdbapi/egencache cache-formats behavior.

UseManager: add compat code for getUseForce/PUSE

Similar code was added to getUseMask in commit
af50fee789e71c1fff0b405db4cf55b618b73466.

Support repository-specific use.stable.force, use.stable.mask,
package.use.stable.force and package.use.stable.mask in EAPI >=5.

Update comment.

dispatch-conf.conf: say install rcs, bug #380551

DateSet: use BUILD_TIME, bug #433964

Enable @x11-module-rebuild for 2.1 branch.

Enable @live-rebuild for 2.1 branch.

Deprecate @installed for bug #387059.

EbuildBuildDir: ignore rmdir failure, bug #400641

etc-update: add --quiet for bug #416917

ebuild.5: clarify pkg_nofetch for bug #423403

validate_desktop_entry: filter more KDE noise.

emaint cleanconfmem: fix writedict breakage

Use grabdict so the values are stored as lists like writedict expects.

Rename _slot_abi.py to _slot_operator.py.

Quote ${EAPI} more.

This will avoid a potential syntax error in save-ebuild-env.sh if a
saved environment containing corrupt EAPI is sourced.

DateSet: only allow one format option in config

ebuild-helpers/bsd/sed: whitespace + quoting

Unconditionally insert our pym dir in sys.path.

This is especially necessary when running in prefix mode, since
sys.path may contain the path for a different version of portage.

emaint cleanconfmem: handle ROOT

Add DateSet, bug #433704.

Allow sets of packages installed before or after a specific date.
The date may be specified explicitly (in dateformat which defaults to "%x %X")
or seconds since Epoch, or implicitly as an installation date or a filestamp.

For example, the following sets can be specified in /etc/portage/sets.conf:

[date1]
class = portage.sets.dbapi.DateSet
mode = older
date = 08/31/12 10:00:00
dateformat = %%x %%X

[date2]
class = portage.sets.dbapi.DateSet
mode = newer
seconds = 1346400000

[date3]
class = portage.sets.dbapi.DateSet
package = sys-devel/gcc:4.7

[date4]
class = portage.sets.dbapi.DateSet
filestamp = /usr/bin/gcc

emaint cleanconfmem: use writedict

emaint cleanconfmem: ignore md5, bug #433694

validate_desktop_entry: handle emacs.desktop

See <https://bugs.freedesktop.org/show_bug.cgi?id=35844#c6>.

Enable EAPI 5_pre1 for testing.

Document EAPI 5_pre1.

apply_user_patches: die if EBUILD_PHASE is wrong

glsa.py: python3: ResourceWarning: unclosed file

ebuild-helpers/sed: move to bsd subdirectory

This helps to prevent inappropriate use of the sed wrapper on GNU
systems, which commonly occurs when users install portage manually
during recovery situations.

ebuild-helpers/sed: use -ef to check recursion

Eliminate bin/ebuild-helpers/4 directory.

Instead, just use conditionals where appropriate inside
bin/ebuild-helpers/* scripts.

_prepare_self_update: ignore installed version

Now portage will unconditionally make a temporary copy of itself during
updates. This is safer, since it provides maximum protection against
any possible incompatibilities. For example, suppose that the ebuild
has been updated to change the location of installed files (such as
libdir change) without a revision bump.

Enable @module-rebuild for 2.1 branch.

portageq: clarify meaning of uses_root

o s/uses_root/uses_eroot/g -- This name was chosen
  before its meaning was changed; update it to reflect its purporse.

o Fix a left-over "<root>" arg-doc that never got updated to "<eroot>"

o If a provided eroot argument was shorter than the ${EPREFIX}, portageq
  was truncating it down to nothing and activating relative root,
  which means this became equivalent to an explicit argument of
  "${PWD}/${EPREFIX}/".  This is obviously wrong; and a simple case
  of failing to sanity-check inputs from an interface that changed in a
  backward-incompatible way.

  There's no provision in portageq to query EROOT's that don't end in
  ${EPREFIX}; so if the user makes such a request, instead of doing
  something pathological, dump a helpful error message and bail with
  a nonzero exit code.

Signed-off-by: Gregory M. Turner <gmturner007@ameritech.net>

EAPI 5: doheader and newheader helper functions

See bug #21310.

Update years in header.

Fix usex for EAPI 4-python|4-slot-abi.

EAPI 5: usex helper function

See bug #382963.

EAPI 5: --host-root option for best/has_version

See bug #401239 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=25fb5fca6674215ea8aaa3d0ec3dd3df451eec07

config.setcpv: fix early ret for IUSE_EFFECTIVE

dyn_prepare: init state for apply_user_patches

Remove FEATURES=parse-eapi-ebuild-head

It's already been enabled by default in stable portage for awhile now,
so it should be safe to enable it unconditionally. The PMS eapi-5
branch also says that it's mandatory to parse the EAPI:

http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=91d1e1e39b034bde7e5b981a5616a127135f37fa

EAPI 5: econf --disable-silent-rules

See bug #379497 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=b7750e67b4772c1064543defb7df6a556f09807b

EAPI 5: User patches (no-op dummy stub for now)

A real apply_user_patches implementation will be a bit more work, so
for now we'll just implement the minimum amount necessary to satisfy
the spec:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=a8bf7862967cce36b7f1b408934a774126da2538

EAPI 5: enable slot-operator-deps

Rename slot-abi stuff to refer to slot-operator.

This makes it consistent with the language in the PMS eapi-5 branch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=5d6749ac9e5ddc5b1daaad7737b65fa81c6ece47

EAPI 5: src_test support for parallel tests

See bug #363005 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=3ec4b3c22582a8ec206bce1e93bab377d7b264b5

EAPI 5: EBUILD_PHASE_FUNC variable

See bug #390765 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=76ddca560da42fd968c53a2a0c38a6ac840a7ad4

Blacklist IUSE_EFFECTIVE from external env.

EAPI 5: Profile IUSE injection

See bug #176467 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=d9040ab3482af5f790368bac5d053bf1cd760ba8

Package: skip REQUIRED_USE validation if built

Pass eapi to check_required_use more.

EAPI 5: REQUIRED_USE at-most-one-of ?? operator

See bug #354219 and the PMS patch:
http://git.overlays.gentoo.org/gitweb/?p=proj/pms.git;a=commit;h=1c2dff2df2305aff88a734e3a2716de1bb69f3b6

_get_eapi_attrs: handle unsupported eapi as None

validate_desktop_entry: filter more kde noise

This will fix bug #432862.

Whitespace.

KeywordsManager: fix isStable comment

EAPI 5: new* commands can read from stdin, bug 263565.

new*: symlink to generic newins implementation

newins: become generic so new* can be symlinks

EAPI 5 stable use.mask/force for bug #431078

_pkg_str: pass in config + metadata with KEYWORDS

This will be needed in order to support stable use.mask/force for
bug #431078.

prepstrip: avoid debugedit/strip interference

This will fix bug #421099.

config: _eapi_cache.clear() after setcpv

read_corresponding_eapi_file: cache results

Optimize sys.std* flush code.

make.conf.5: s/Hash functions/Hash function/

Use sys.__std*.fileno() in case of overrides.

This fixes AttributeError exceptions for API consumers that override
sys.std* streams pseudo-file objects.

EventLoop: handle EINTR IOError for epoll

EventLoop: use epoll when available

This will fix bug #432024.

_apply_hash_filter: make hash_filter simpler

Now any callable object will work, which might be helpful for
consumers of the Manifest.checkFileHashes() method.

Implement PORTAGE_CHECKSUM_FILTER for bug #432170

PollScheduler: use timeout for loadavg checks

This ensures that the code from commit
fe03b5fd790fc09bd6594c55bb174e80aaac1e5a behaves correctly even when
there are no poll events arriving for a long time (which might happen
if the running builds don't produce output for a long time).

Scheduler: only use poll timeout when needed

This avoids wasteful CPU consumption, as reported in bug #432024.

make.conf.5: warn about PORTAGE_TMPDIR in PORTDIR

This will fix bug #392565.

emerge-delta-webrsync: tweak "recompressing" msg

FEATURES=webrsync-gpg forces it to recompress in the foreground.

emerge-delta-webrsync: improve date calculations

This borrows some code from emerge-webrsync, and will fix bug #153513.