Scheduler: cache Package instance more

This helps to avoid some cases in which emerge crashes due to ebuild
modification that leads to failure in aux_get/manifest check while
the Scheduler is running. Typically such modifications are harmless,
so it's beneficial to cache the metadata so that aux_get is less
likely to be called when it will fail.

emerge-webrsync: eat trailing newlines

Signed-off-by: Mike Frysinger <vapier@gentoo.org>

emerge-webrsync: add xz support

Signed-off-by: Mike Frysinger <vapier@gentoo.org>

REQUIRED_USE: when unsatisfied, show current USE

Split out pkg_use_display() from action_info().

REQUIRED_USE: test unsatisfied without USE dep

composite_db: use ebuild visibility for installed

This will fix bug #350488.

dep_zapdeps: add other_installed_some choice bin

fix indentation from commit f29d351990f0a3dd6183ec888ba8b0ff522c0875

dep_zapdeps: add other_installed choice bin

Hopefully this will fix bug #350488.

Fix spelling of unsatisfied from previous commit.

REQUIRED_USE: always show requirements

This fixes a case in which the user would receive a "masked by:
REQUIRED_USE violated" message without any more information about
the specific requirements. Now, unsatisfied REQUIRED_USE is never
treated as a mask, since it really is nothing like a mask. It's much
more like an unsatisfied USE dependency, so we need to handle it in
a similar way.

Fix a typo in a comment.

depgraph: fix bug #350254 and test it

depgraph: prefer highest priority repo more often

Prefer the highest priority repo, even when the ebuild from the higher
priority repo requires USE adjustments due to USE deps or REQUIRED_USE.
This will fix bug #350254.

RepoConfig: invert repo priority ordering

The new ordering is such that higher numbers indicate higher
priority.

create_trees: whitelist SSH_AGENT_PID/AUTH_SOCK

This variables can be used for fetching from binhost.

add depclean test for bug #350285

doc use_with/enable empty 3rd arg in EAPI 4

See bug #322049.

DepcleanWithInstalledMasked: fix breakage

An assumption about KEYWORDS masking behavior for installed packages
was broken by commit b7de3d1fb10e40b4ef03462f8a145968689ac587.

Try to avoid downgrade due to unsat REQUIRED_USE.

mod_syslog: call syslog() once per line

This will fix bug #350379.

depclean: account for more masks

Account for packages with masks (like KEYWORDS masks) that are usually
ignored in visibility checks for installed packages, in order to
handle cases like bug #350285.

newins in EAPI 4 should actually install the file. Fixes bug 350385.

MetaDataXML: fix broken upstream initialization

depgraph: use Package.masks for installed

In some cases we do special masking checks for installed packages,
and Package.masks is a convenient way to do it.

depclean: account for more masks

Account for packages with masks (like KEYWORDS masks) that are usually
ignored in visibility checks for installed packages, in order to
handle cases like bug #350285.

Filter QA warning for --disable-dependency-tracking configure option.

Update copyright date.

Update comments.

Deprecate EAPI 4_pre1 and drop 2_pre* support.

egencache: handle ImportError for ExpatError

NEWS: EAPI 4 support in portage-2.1.9.27

dyn_clean: remove .pretended

Omit user:pass@ from binhost Packages cache path.

bintree: add timeout for closing binhost conn

Hopefully this solves bug #350139.

mkrelease.sh: set portage.VERSION

Binpkg: implement REPLACING_VERSIONS

test_dep_getrepo: fix copyright header

ebuild(5): fix grammar for dodoc -r

ebuild(5): REPLAC* variables in EAPI 4

ebuild(5): MERGE_TYPE in EAPI 4

ebuild(5): src_install in EAPI 4

ebuild(5): pkg_pretend in EAPI 4

ebuild(5): REQUIRED_USE in EAPI 4

REQUIRED_USE: more resolver tests

tests: replace EAPI 4_pre1 with 4

REQUIRED_USE: more resolver tests

ebuild(5): USE dependency defaults in EAPI 4

ebuild(5): econf --disable-dep in EAPI 4

ebuild(5): doman -i18n overrides suffix in EAPI 4

ebuild(5): do/newins preserve symlinks in EAPI 4

ebuild(5): fix dosym docs (reference to hardlink)

ebuild(5): escape hyphens in docompress docs

ebuild(5): dodoc -r supported in EAPI 4

ebuild(5): new docompress helper in EAPI 4

ebuild(5): helpers die automatically in EAPI 4

ebuild(5): dohard is not supported in EAPI 4

ebuild(5): dosed is not supported in EAPI 4

portage.const: bump EAPI to 4 (council approved)

docbook: EAPI 4_pre1 is 4 (council approved)

fetch: don't require g+s mode on $DISTDIR

The g+s mode doesn't seem to help anyone (including live ebuilds
since they typically don't do recursive g+w). We already do manual
application of portage group privileges to individual files, so the
g+s mode is redundant.

unpack: handle echo failure in unzip pipe

This will fix bug #338744.

bash: as a general rule, use read -r

This solves cases like bug #350045.

doins: use read -r

This will fix bug #350045.

EbuildPhase: Display upstream info before setup.

Display upstream maintainers and bugtrackers along with Gentoo
maintainers when emerging a package.

fetch: fix listonly/allow_missing_digests logic

_exec: disable SIGQUIT handler override by parent

This will fix bug #289486.

EbuildFetcher: bail out if missing digest

This will fix bug #348864.

Use EbuildFetcher for --fetchonly (not --pretend)

EbuildFetcher: pass digests to fetch()

doebuild: validate more Package metadata keys

unmerge: ignore rmdir EPERM from mount point

This will fix bug #349757.

ebuild(1): use Package to validate metadata

anydbm: use gdbm "u" flag for concurrent writers

This will fix bug #53607.

Remove unused filter_iuse_defaults() function.

depgraph: Optimize --newuse with Package attrs.

Optimize merge list display with Package attrs.

Fix merge list repo display breakage.

Broken since refactoring in commit
48c8cec7c079cb07a4f421a36cdc46a7fdbc7811.

Fix portage restart warning message.

Refactor depgraph merge list display code.

emerge --changelog: repo support for binpkgs

Package.operation: eliminate duplicate code

doebuild: remove unused emerge/returnpid logic

Display relevant FEATURES before setup phase

Thanks to Christian Ruppert <idl0r@gentoo.org> for the suggestion.

doebuild: fix more bug #349273

doebuild: fix bug #349273

Since commit 75d3130fc8293fff68389b8fed44b8d47a0abe80, doebuild()
for the 'setup' phase triggers the actionmap_deps code path in order
to call the 'pretend' phase as a dependency. This path previously
assumed a portdbapi instance, which may not hold for some api consumers
such as entropy. Therefore, fix the code path to work with other dbapi
types.

_lazy_vars: fix repo argument for license_manager

saveNomergeFavorites: remove unecessary vars

saveNomergeFavorites: fix possible root confusion

Use write_atomic to rewrite lafiles.

This should succeed even in some cases in which a normal write might
fail due to file permission settings on some operating systems such as
HP-UX.

Substitute bash builtin >> for touch command.

It should be faster to use the bash builtin, and also allows us to
avoid issues with touch breakage (like in bug #348640).

prepos_order: avoid duplicates from aliases

REQUIRED_USE: describe ^^ as exactly-one-of

paren_enclose: preserve atom USE conditionals

The depgraph sometimes uses paren_enclose to temporarily convert parts
of use_reduce output to a plain string. In these cases, we want to
preserve atom USE conditionals, since these sometimes make a difference
for IUSE checks during package matching (as in bug #348389).

repoman: ignore deprecated profiles.desc entries

digestcheck: avoid display of u'' from KeyError

In python-2.x, KeyError.__str__ produces unicode literals that we
don't want users to see.

repoman: handle ElementTree.ParseError

getbinpkg.py: auto-handle NotImplementedError

This should have been done as part of bug #338190.

getbinpkg.py: use local HTTPSConnection import

Use local import since https typically isn't needed, and this way we
can usually avoid triggering the global scope http.client ImportError
handler (like during stage1 -> stage2 builds where USE=ssl is disabled
for python).