Make fetch() behave like the ebuild has RESTRICT="primaryuri"
after 2 checksum failures for a fetched file. This should
increase the probability of fetching the correct file before
the maximum number of tries is reached.

svn path=/main/trunk/; revision=8412

For sanity, pass an actual list of keys into aux_get() instead
of iterating over a set that happens to be mutable (though it
remains constant in practice).

svn path=/main/trunk/; revision=8410

Bug #197797 - Do not actively clear o+rx permission bits
on the /var/lib/portage directory. Only clear the o+w
bits. This allows users who aren't in the portage group
to have read access to the world file by default, but
administrators can explicitly chmod o-rx that directory
if necessary, and portage will leave those bits alone.

This makes the permission settings in dblink.treewalk()
consistent with those that are already defined in
config._init_dirs().

svn path=/main/trunk/; revision=8408

Call die() so that the $TMP directory is always properly
cleaned up.

svn path=/main/trunk/; revision=8405

Bug #197965 - Make fetch() bail out after 5 checksum
failures for a particular file since downloading the
same file repeatedly from every single available
mirror is a waste of bandwidth and time.

svn path=/main/trunk/; revision=8403

if mode=1 and `dialog` is not usable, abort #197990 by DominikBuerkle

svn path=/main/trunk/; revision=8402

Bug #197965 - When fetch() encounters a checksum failure,
look for an identical file from a previous checksum failure
in order to avoid consuming unnecessary disk space with
duplicate files.

svn path=/main/trunk/; revision=8401

Fix update_config_files() so that it uses update_dbentry()
to handle update commands since that already supports
slotmove commands for SLOT atoms.

svn path=/main/trunk/; revision=8397

Remove redundant code from previous commit.

svn path=/main/trunk/; revision=8392

Bug #197932 - Make dbapi._cpv_sort_ascending()
preserve explicit -r0 for consistency in findname
and aux_get calls.

svn path=/main/trunk/; revision=8390

TODO: Make update_config_files() handle slotmove commands for SLOT atoms.

svn path=/main/trunk/; revision=8387

In portage.fetch(), condense digest check output to a single
line for all digests.

svn path=/main/trunk/; revision=8385

Sort scanlist and ebuildlist to ensure that repoman always
processes packages in a predictable order.

svn path=/main/trunk/; revision=8383

Make portdbapi.gvisible() use portdbapi._aux_cache_keys
for metadata pulls.

svn path=/main/trunk/; revision=8381

Return early from config.getMaskAtom() as soon as a matching
unmask atom is found.

svn path=/main/trunk/; revision=8379

Bug #197594 - Document FEATURES="lmirror".

svn path=/main/trunk/; revision=8373

Make sure vardbapi.cp_list() always sorts the results.

svn path=/main/trunk/; revision=8366

Fix ignore_priority logic in depgraph.altlist() in order
to handle some cases where it was possible for nodes to
be selected without their PDEPENDs being propperly added
to the asap_nodes list.

svn path=/main/trunk/; revision=8360

Collapse 2 identical code hunks into 1.

svn path=/main/trunk/; revision=8359

Optimize merge order to try and select nodes that only have
unsatisfied PDEPEND slightly earlier. This solves a problem
with xorg-server being merged too early during an all binary
install (since DEPEND is ignored for binaries), triggering
built_with_use() calls to fail as reported in bug #189966.
Since DEPEND is discarded in cases like this, it is
important to exploit the difference between PDEPEND and
RDEPEND in order to optimize merge order. Without this
optimization, the merge order is technically correct, but
not as optimal as it should be and has lots of potential to
trigger issues with built_with_use() or similar things that
require better optimization of merge order.

svn path=/main/trunk/; revision=8358

In the 'there are no ebuilds to satisfy "foo"' message, discard
null/ from failed cpv_expand category expansion.

svn path=/main/trunk/; revision=8357

Properly escape { and } characters in regular expressions even
though it seems to work either way.

svn path=/main/trunk/; revision=8355

Remove an extra \$ from the EbuildQuote.var_reference regex
so that it will properly match things like variable references
without braces, like $S.

svn path=/main/trunk/; revision=8354

Make the EbuildUselessCdS check for both quoted and unquoted ${S}
so the user doesn't have to fix quoting before this check will
recognize the violation.

svn path=/main/trunk/; revision=8353

Avoid making unnecessary copies of PackageSet._atoms by
replacing calls to self.getAtoms() with self._load().

svn path=/main/trunk/; revision=8352

Add a check for redundant cd "${S}" statements on the first
line of src_(compile|install|test) ebuild methods. Thanks to
Petteri Räty <betelgeuse@gentoo.org> for this patch.

svn path=/main/trunk/; revision=8351

Make depgraph.select_files() recursively expand sets given as
arguments so that containment tests in _get_parent_sets()
properly match atoms in nested sets (like if world contains
system). Otherwise, atoms from nested sets would get recorded
in the world file.

svn path=/main/trunk/; revision=8350

Fix diefunc() so that it doesn't report that the ebuild is from
an overlay when EMERGE_FROM == binary.

svn path=/main/trunk/; revision=8349

Update the FEATURES=mirror docs to more accurately reflect behavior.

svn path=/main/trunk/; revision=8348

Defer selection of package dependency atoms until they are
actually needed since the appropriate atom selection behavior
can change between the time that the package is initially
added to the graph and when it's dependencies are traversed
(like when --consistent is enabled).

svn path=/main/trunk/; revision=8347

Gather some ignored dependencies so that they can be properly
processed by the depgraph when "conistent" mode is enabled.

svn path=/main/trunk/; revision=8346

Remove a few unused depgraph attributes.

svn path=/main/trunk/; revision=8345

Fix "args" set handling wrt $ROOT in depgraph._complete_graph().

svn path=/main/trunk/; revision=8344

Implement license filtering for xmatch minimum-visible and
bestmatch-visible. Also, make the gvisible license filtering
conditional on config.local_config since repoman doesn't do
license filtering.

svn path=/main/trunk/; revision=8343

Optimize xmatch "bestmatch-visible" to do fewer metadata
accesses by using the same code as "minimum-visible" but
with a reverse iterator.

svn path=/main/trunk/; revision=8342

Implement a "consistent" depgraph parameter (enabled by --consistent)
that can be used ensure that installation of new packages does not
break any deep dependencies of required sets (args, system, or world).
Unfortunately, the performance penalty for small dep calculations is
too great to enable this parameter by default. At least it will be
useful for testing backtracking behavior when that is implemented.

svn path=/main/trunk/; revision=8341

Use rstrip("\n") to remove trailing newlines from
CONTENTS lines.

svn path=/main/trunk/; revision=8338

Rewrite the dblink.getcontents() code to use str.split(" ")
for splitting CONTENTS lines so that even file paths that
end with spaces can be handled. This patch makes the fix for
bug #196836#c6 more complete. Some code for parsing old
malformed symlink entries has been removed sinces it's
probably not useful or worth maintaining anymore.

svn path=/main/trunk/; revision=8337

Make portdbapi.cp_list() use os.listdir() instead of
portage.listdir() since portage.listdir() has unnecessary
overhead and it's cache isn't needed since cp_list() has
it's own cache.

svn path=/main/trunk/; revision=8336

Fix PackageSet.getAtoms() and getNonAtoms() so that they
don't return references to private data structures.

svn path=/main/trunk/; revision=8335

Fix --depclean to use SetConfig.getSetAtoms() and also fix a
broken reference to packagesets which is now settings.sets.

svn path=/main/trunk/; revision=8334

Fix SetConfig.getSetAtoms() to stop initializing ignorelist
in the parameter list since otherwise the ignorelist persists
between calls and causes unpredictable results for callers.

svn path=/main/trunk/; revision=8333

Optimize stdout_spinner.update() methods so that they don't
waste cpu time by flushing ouput to the tty too frequently.

svn path=/main/trunk/; revision=8332

Fix cp_list() to prevent it from returning a reference
to one of it's internal lists.

svn path=/main/trunk/; revision=8331

Sort all dbapi.cp_list() results in ascending order and
cache the results when possible. The order is preserved
in dbapi.match() so those results are also sorted.

svn path=/main/trunk/; revision=8329

Replace depgraph._slot_node_map with _slot_pkg_map so
that it's easier to get existing Package instances.

svn path=/main/trunk/; revision=8324

Make depgraph._select_atoms() more flexible by allowing
the repositories to be passed in as a parameter.

svn path=/main/trunk/; revision=8319

Reuse an existing EmergeConfig instance instead of
constructing a new one.

svn path=/main/trunk/; revision=8318

Fix broken $ROOT handling for setconfig in the MergeTask
constructor.

svn path=/main/trunk/; revision=8317

In portage.fetch(), condense digest check ouput to a single
line for all digests.

svn path=/main/trunk/; revision=8316

Optimize repoman to share portdbapi.cp_list() results
between all profiles since those results never change.
The cached results also propagate to the xmatch
match-all when appropriate (old-style virtuals are
excluded since they are profile dependent).

svn path=/main/trunk/; revision=8313

Add missing break statement for xmatch minimum-visible.

svn path=/main/trunk/; revision=8310

Optimize repoman visibility checks to access as little
metadata as possible. (improves performance especially
in cases where metadata needs to be generated). This
works by starting at the lowest version since that's
most likely to have keywords and it returns as soon as
the first visible package is found.

svn path=/main/trunk/; revision=8309

Make emerge add sets to the world file as one would expect.

svn path=/main/trunk/; revision=8308

Allow sets to get through world file validation and
expand properly. It's now possible to put @system
in the world file and get the old behavior where
world includes system.

svn path=/main/trunk/; revision=8307

Prevent premature expansion of old-style virtuals
inside depgraph.select_files().

svn path=/main/trunk/; revision=8306

Optimize the algorithm used for expansion of set
arguments into atoms.

svn path=/main/trunk/; revision=8305

update notes about package sets

svn path=/main/trunk/; revision=8304

break potential cycles in set expansion

svn path=/main/trunk/; revision=8303

use SetConfig.getSetAtoms instead of PackageSet.getAtoms for expanding sets to allow recursion, and drop the default 'sets/' prefix for setnames

svn path=/main/trunk/; revision=8302

use a @ prefix for sets, and replace world/system with their real prefixed names if found on the commandline

svn path=/main/trunk/; revision=8301

Allow sets to contain non-atoms

svn path=/main/trunk/; revision=8300

FIX: indentation problem, also end the Portage identification
line with a ) if repoman wasn't forced to do its job.
(branches/prefix r8281)

svn path=/main/trunk/; revision=8296

Fix: Make repoman actually USE -m commit message again (and -M
commit message file). (branches/prefix r8280)

svn path=/main/trunk/; revision=8295

Correct expected split counts for CONTENTS lines.

svn path=/main/trunk/; revision=8294

Handle a potential IndexError.

svn path=/main/trunk/; revision=8293

Remove obsolete whitespace handling code for "obj" filenames
in CONTENTS.

svn path=/main/trunk/; revision=8292

Handle multiple consecutive spaces in filenames as per
bug #196836#c6.

svn path=/main/trunk/; revision=8291

For the emergelog message, send in the original list of
arguments that exists before expansion of sets.

svn path=/main/trunk/; revision=8290

If the title string is too big then xtermTitle() can
misbehave by causing the terminal to echo some of the
characters and generate a "beep" sound. This is easily
triggered by doing things like `emerge world` now since
all the the atoms are expanded.

svn path=/main/trunk/; revision=8289

Filter atoms that come from sets when generating
the list of atoms to record in the world file.

svn path=/main/trunk/; revision=8288

For the global AUTOCLEAN, pass an empty list into unmerge()
so it behaves like it used to.

svn path=/main/trunk/; revision=8287

Spit out a depgraph._get_existing_pkg() method for getting an
existing Package instance added to the graph for a given SLOT.

svn path=/main/trunk/; revision=8286

Make the Package class generate the digraph nodes.

svn path=/main/trunk/; revision=8285

Fix inverted logic error.

svn path=/main/trunk/; revision=8284

Convert depgraph creation from using recursive calls to
using a stack of dependencies which will be more suitable
for implementation of backtracking.

svn path=/main/trunk/; revision=8283

Add back support for greedy SLOTs when --update is enabled as
per bug #150361. This is currently disabled for sets since
greedy SLOT atoms could be a property of the set itself.

svn path=/main/trunk/; revision=8282

Fix broken import.

svn path=/main/trunk/; revision=8270

Add back support for helpful `emaint --check world` suggestions
and also show package masking reasons when appropriate.

svn path=/main/trunk/; revision=8269

Add back support for detecting if the world file contains
atoms that match packages in package.provided.

svn path=/main/trunk/; revision=8268

Add back support for handling missing system/world atoms
that was removed with depgraph.xcreate(). This doesn't
have support for mapping atoms back to the original sets
yet, but at least a masked or unavailable system/world
atom won't compeletely break the depgraph now.

svn path=/main/trunk/; revision=8267

Replace sys.exit() calls with return statements in emerge_main().

svn path=/main/trunk/; revision=8266

Remove --update greedy SLOTs code from depgraph.select_files()
so that any desired SLOTs have to be pulled in explicitly. Any
SLOTs that are not explicitly pulled in will be removed by
--depclean.

svn path=/main/trunk/; revision=8265

Make world atoms non-greedy for SLOTs in action_depclean()
since users can simply add SLOT atoms to world for any
specific SLOTs that they want to keep.

svn path=/main/trunk/; revision=8264

remove 'system' and 'world' as actions, and remove most of the special case code as well

svn path=/main/trunk/; revision=8263

Fix selective logic to work properly with masked packages.

svn path=/main/trunk/; revision=8262

Match packages against arguments earlier in
depgraph._select_package() so that corrupt
PROVIDE is detected sooner.

svn path=/main/trunk/; revision=8261

Fix logic for the "selective" depgraph parameter so
that it behaves correctly in cases where installed
packages provide old-style virtuals but none of the
available packages do.

svn path=/main/trunk/; revision=8260

document PROFILE_ONLY_VARIABLES

svn path=/main/trunk/; revision=8259

revert r8256 (plans changed)

svn path=/main/trunk/; revision=8258

move base classes for package sets into a separate module

svn path=/main/trunk/; revision=8257

just pass the SetConfig instance instead of only the settings and trees attributes

svn path=/main/trunk/; revision=8256

Optimize PROFILE_ONLY_VARIABLES handling.

svn path=/main/trunk/; revision=8255

make 'world' and 'system' behave like their sets/ counterparts

svn path=/main/trunk/; revision=8254

make PROFILE_ONLY_VARIABLES incremental

svn path=/main/trunk/; revision=8253

protect variables specified in PROFILE_ONLY_VARIABLES from being set by the user

svn path=/main/trunk/; revision=8252

add quickie logger function

svn path=/main/trunk/; revision=8251

Begin to use python logging framework.  Remove if quiet < bla logic and instead use loglevels (critical, error, warn, info, debug).  Default to WARN for repoman, which will print CRITICAL, ERROR, and WARN messages.  one -v will print INFO messages and two -v's will print DEBUG messages, each -q will reduce the loglevel by one.  -q and -v can be given in any order.

svn path=/main/trunk/; revision=8250

Don't show the "checking files for package collisions" message
when --quiet is enabled.

svn path=/main/trunk/; revision=8248

aha, i knew that diff was screwy, the mail to portage-commits and grep made it obvious as to why; lets try removing those dupe checks.

svn path=/main/trunk/; revision=8247