Fix Scheduler._choose_pkg() so that it doesn't choose packages prematurely
in some cases.

svn path=/main/trunk/; revision=11265

Enable Scheduler._job_delay() whenever --load-average is enabled, for whole
time the scheduler is running. This protects against too many jobs being
sheduled if the load average temporarily drops.

svn path=/main/trunk/; revision=11264

During the first minute of entering the main scheduler loop, if --load-average
is enabled then limit the rate that new jobs are spawned, so that the load
average measurement has time to respond to the new load introduced by the
new jobs. The time between spawning new jobs is proportional to the number
of currently running jobs.

svn path=/main/trunk/; revision=11263

Fix slightly broken loop logic in insert_optional_args() by converting it to
pop args off of a stack.

svn path=/main/trunk/; revision=11262

Add support for the --jobs option to be specified without an
argument, and also support -j as a short option. Since optparse
doesn't natively support options with non-required args, create an
insert_optional_args() function that inserts the required argument
into the args so that optparse is happy. The function inserts the
string True as a substitute for the argument that is required. This
string is later converted to the True constant when stored in
the emerge opts dict (similar to how normal boolean options are
stored). The PollScheduler and SequentialTaskQueue classes recognize
the meaning of the True constant to mean unlimited concurrent jobs.

svn path=/main/trunk/; revision=11261

In apply_recursive_permissions(), ignore InvalidLocation exceptions such as
FileNotFound and DirectoryNotFound since sometimes things disappear, like
when adjusting permissions on DISTCC_DIR.

svn path=/main/trunk/; revision=11260

Tweak table alignment.

svn path=/main/trunk/; revision=11259

Implement _use_dep.__nonzero__().

svn path=/main/trunk/; revision=11258

Fix _use_dep.__str__() to work correctly in the case when conditional USE
deps have evaluated to nothing (empty string rather than []). Thanks to
ABCD for reporting.

svn path=/main/trunk/; revision=11257

Redirect the FEATURES=buildsyspkg message to the log when in background mode.

svn path=/main/trunk/; revision=11256

Add syntax examples for unconditional USE deps.

svn path=/main/trunk/; revision=11255

Fix alignment.

svn path=/main/trunk/; revision=11254

Tweak the conditional USE deps examples.

svn path=/main/trunk/; revision=11253

Document the doman language code path translation extension from bug #222439.

svn path=/main/trunk/; revision=11252

Make use of the new config.iteritems() method.

svn path=/main/trunk/; revision=11251

Fix broken reference to "categories" in CategorySet.singleBuilder(). Thanks
to Thargor for reporting.

svn path=/main/trunk/; revision=11250

Bug #233165 - When waiting for jobs and merges to finish in
Scheduler._main_loop(), keep scheduling the merge queue since
it doesn't autoschedule, and skip the poll loop if there no
event handlers due to synchronous merge tasks being the only
things left to do.

svn path=/main/trunk/; revision=11249

Bug #233103 - In portage.fetch(), pass all config variables instead of just
those returned by the environ() method which is filtered.

svn path=/main/trunk/; revision=11245

Even though the message is split on $'\n' in elog_base(), it's still
not entirely safe to use it as a delimiter in the log file since
there can still be escaped newlines that will be expanded due to
the echo -e parameter.

svn path=/main/trunk/; revision=11244

Remove pointless generator expression.

svn path=/main/trunk/; revision=11238

Add note about support for EAPI="2_pre0".

svn path=/main/trunk/; revision=11236

Create a table to document conditional USE dependency syntax.

svn path=/main/trunk/; revision=11235

Fix arg count when constructing a TypeError in the SlotDict constructor.

svn path=/main/trunk/; revision=11234

Add support for an new EAPI="2_pre0" value so that people who want to test
USE deps can set the EAPI to something other than 0 or 1. We can support as
many different experimental EAPI values as we need, and drop support for them
when the final EAPI 2 is defined.

svn path=/main/trunk/; revision=11233

Disable the multi-bracket USE deps syntax, so only the comma separated syntax
is now valid.

svn path=/main/trunk/; revision=11232

Implement new conditional USE dep syntax:

Conditional evaluation behavior:

parent state   conditional   result

 x              x?            x
-x              x?
 x             -x?
-x             -x?           -x

 x              x=            x
-x              x=           -x
 x             x!=           -x
-x             x!=            x

Conditional syntax examples:

compact form         equivalent expanded form

 foo[bar?]           foo  bar? (  foo[bar] )
foo[-bar?]           foo !bar? ( foo[-bar] )
 foo[bar=]           foo  bar? (  foo[bar] ) !bar? ( foo[-bar] )
 foo[bar!=]          foo  bar? ( foo[-bar] ) !bar? (  foo[bar] )

svn path=/main/trunk/; revision=11231

Create a SlotDict constructor which can take an optional positional arg that
is passed to the update() method (similar to the dict constructor), and also
pass keyword arguments into the update() method if any are given. This makes
it possible to use the constructor similarly to the way that the
_emerge.SlotObject constructor is used.

svn path=/main/trunk/; revision=11230

* Add support in dep_getusedeps() and isvalidatom() for comma separated USE
  deps that only have one set of square brackets.
* Add test cases for the new comma separated USE deps syntax.

svn path=/main/trunk/; revision=11229

Bug #233137 - Implement Atom.split().

svn path=/main/trunk/; revision=11228

Fix incorrect logging.exception() arguments. The exception instance is not
supposed to be passed into this function.

svn path=/main/trunk/; revision=11227

Fix the new glep56 code to handle missing metadata.xml. Thanks to jmbsvicetto
for reporting.

svn path=/main/trunk/; revision=11226

Fix EbuildFetcher to pass all config variables to the fetcher so things
like http_proxy are included.

svn path=/main/trunk/; revision=11223

Update path to make.conf.example. Thanks to Arfrever.

svn path=/main/trunk/; revision=11222

Use ${NORMAL} to properly restore color when necessary.

svn path=/main/trunk/; revision=11221

Make elog_base() just use \n as the delimiter in the file since it's safe
now that lines are always split.

svn path=/main/trunk/; revision=11220

Make all the elog functions split lines when displaying output, just like
elog_base() does when saving it.

svn path=/main/trunk/; revision=11219

Add support to elog_base() to split messages on newlines automatically.
Thanks to Arfrever for the suggestion.

svn path=/main/trunk/; revision=11218

Fix breakage from r11213 in INHERITED values returned from portdbapi.aux_get().

svn path=/main/trunk/; revision=11217

Fixes from Arfrever:
* Highlight the "Files built without respecting LDFLAGS" QA Notice with red.
* Remove scanelf-ignored-LDFLAGS.log when empty.

svn path=/main/trunk/; revision=11216

Serialize src_unpack() $DISTDIR access for live ebuilds since otherwise they
can interfere with eachother. This will have to rely on a hardcoded list of
eclasses until we create way to properly tag this information in the metadata.

svn path=/main/trunk/; revision=11213

* Define a frozenset of live eclasses for the LIVEVCS.stable check.
* Add "mercurial" to the list of known live eclasses.

svn path=/main/trunk/; revision=11210

Fix repoman not seeing subversion auto-ignored files (such as patch rejects and editor backup copies), thereby causing messed up Manifests.  This fix should be merged in the trunk.
(branches/prefix r11208)

svn path=/main/trunk/; revision=11209

Temporarily `set -o noglob` when splitting QA_DT_HASH.

svn path=/main/trunk/; revision=11206

Bug #233077 - Add QA check which verifies that LDFLAGS are respected. For now
this only works when LDFLAGS contains --hash-style=gnu since in this case the
the elf files should not contain .hash sections and we can use scanelf to
check whether or not the those sections exist. This adds a QA_DT_HASH variable
that is analogous to existing QA control variables documented in the ebuild.5
man page. There is also a complementary QA_STRICT_DT_HASH variable that can
be set in make.conf in order to ignore QA_DT_HASH settings in ebuilds. Thanks
to Arfrever Frehtes Taifersar Arahesis for this patch which I've tweaked in
just a few minor ways.

svn path=/main/trunk/; revision=11205

Schedule ebuild pkg_setup phases on the merge queue,
in order to serialize unsandboxed access to the live
filesystem.

svn path=/main/trunk/; revision=11204

In PollScheduler._poll(), add a call to _schedule() in order to ensure that
event handlers are registered if possible. If not, raise StopIteration in
order to avoid endless blocking in a poll call with no file descriptors
registered. Add StopIteration exception handling for all
PollScheduler._poll._next_poll_event() calls.

svn path=/main/trunk/; revision=11203

Fix AsynchronousTask.removeStartListener() and removeExitListener() to return
early if there are no listeners.

svn path=/main/trunk/; revision=11202

Fix LinkageMap.findConsumers() to check whether the master link for a lib
providing a given soname actually points to that lib. If there is another
version of this lib with the same soname and the master link points to
that other version, this lib will be shadowed and won't have any consumers.
By eliminating false, positives this way, we avoid the following state
after upgrade from media-libs/mesa-7.0.3 to media-libs/mesa-7.1_rc3:

# scanelf -S /usr/lib64/libGLU.so*
 TYPE   SONAME FILE
ET_DYN libGLU.so.1 /usr/lib64/libGLU.so
ET_DYN libGLU.so.1 /usr/lib64/libGLU.so.1
ET_DYN libGLU.so.1 /usr/lib64/libGLU.so.1.3
ET_DYN libGLU.so.1 /usr/lib64/libGLU.so.1.3.070003
ET_DYN libGLU.so.1 /usr/lib64/libGLU.so.1.3.070100 <- shadowed lib

Thanks to Diego "Flameeyes" Pettenò for reporting this issue.

svn path=/main/trunk/; revision=11200

* Use pure bash ${PARAMETER%/*} instead of spawing`dirname`.
* Break out of loop as early as possible when searching for libs in ${D}.

svn path=/main/trunk/; revision=11199

Split out an apply_priorities() function to apply nice and ionice settings.

svn path=/main/trunk/; revision=11198

Bug #232924 - When the user specifies a non-existent set, display a list of
existing sets.

svn path=/main/trunk/; revision=11197

Bug #228085 - In the event of a file collision, the explanation about the
collision and how to solve it may not be visible via a scrollback buffer,
especially if the number of file collisions is large. Therefore, show a
summary at the end and refer the user to the elog messages.

svn path=/main/trunk/; revision=11196

Replace hardcoded i386 machine name in dyn_rpm() with the result of `uname -m`.

svn path=/main/trunk/; revision=11195

* For bug 227625, automatically create the /usr/src/rpm/SOURCES directory when
  necessary.

* Add `cd "${T}"` at the beginning of dyn_rpm() since the spec file is written
  to $PWD.

svn path=/main/trunk/; revision=11194

Reduce the default PORTAGE_IONICE_COMMAND priority to "idle" priority since
it's probably suitable for most people. This way, even when the IO load is
very high, the impact on system responsiveness should be practically
unnoticeable.

svn path=/main/trunk/; revision=11193

Add PORTAGE_IONICE_COMMAND setting for make.conf which is called to adjust
IO priority on portage and it's subprocesses.

svn path=/main/trunk/; revision=11192

Suppress "for /" and "to /" in status messages when ROOT=/. Thanks to
Thargor for the suggestion.

svn path=/main/trunk/; revision=11191

Fix PORTAGE_BIN_PATH typo in EbuildFetcher._start().

svn path=/main/trunk/; revision=11190

Detect an invalid cpv passed into portdbapi.findname2() and raise an
InvalidPackageName exception. This avoids silent or nonsense errors
later on.

svn path=/main/trunk/; revision=11188

Cancel prefetchers if they're the only reason the main poll loop is still
running.

svn path=/main/trunk/; revision=11185

When in background mode and there is a single failure, dump the whole build
log for convenience.

svn path=/main/trunk/; revision=11184

* Refer user to make.conf(5) if PORTAGE_IONICE_COMMAND fails.
* Document that PORTAGE_IONICE_COMMAND can be disabled by setting it
  to an empty string.

svn path=/main/trunk/; revision=11183

Bug #206773 - Add a new PORTAGE_IONICE_COMMAND variable that emerge uses
to adjust ionice priority, similar to PORTAGE_NICENESS but used more like
FETCHCOMMAND since so that portage doesn't have to know anything about
ionice options. The command should include a \${PID} place-holder to be
substituted with an integer pid.

svn path=/main/trunk/; revision=11182

Bug #228117 - Insert a trailing newline in the getconfig() input file as
necessary to avoid a silent error in shlex that is triggered by a source
statement at the end of the file without a trailing newline after the source
statement. To solve this problem, derive a special file class that inserts
a newline just before eof when necessary.

svn path=/main/trunk/; revision=11181

Fix bug in get_repo_path() when called with multiple args.

svn path=/main/trunk/; revision=11179

Fix typo, found by pyflakes.

svn path=/main/trunk/; revision=11178

Avoid "0 files checked ..." messages reported by Pesa.

svn path=/main/trunk/; revision=11177

Fix --depclean/--prune regressions reported by selkin:

 * Make --with-bdeps default to "y" for removal actions.

 * Treat unsatisfied build time dependencies as "soft" for removal actions,
   even when --with-bdeps=y.

svn path=/main/trunk/; revision=11176

Add sandbox write access to PORTAGE_PYM_PATH before importing portage in
order to avoid sandbox violations after python upgrade.

svn path=/main/trunk/; revision=11175

Add GENTOO_MIRRORS to the variables exported by EbuildFetcher.

svn path=/main/trunk/; revision=11173

Make --fetchonly disable background mode.

svn path=/main/trunk/; revision=11170

Handle UnsatisfiedResumeDep in Scheduler._calc_resume_list().

svn path=/main/trunk/; revision=11169

Update --depclean and --prune, removing warnings about libraries since those
are now automatically accounted for.

svn path=/main/trunk/; revision=11168

In dblink.unmerge(), redirect preserve-libs "!needed" messages to the log file
when in background mode.

svn path=/main/trunk/; revision=11167

Fix resume_depgraph() so that it doesn't raise an AssertionError due to
unsatisfied PDEPEND.

svn path=/main/trunk/; revision=11166

Show the number of failed packages in the status display.

svn path=/main/trunk/; revision=11165

Redirect build log eqawarn messages to the log file when in background mode.

svn path=/main/trunk/; revision=11164

Disable "Installing" status messages when in --pretend or --buildpkgonly
mode.

svn path=/main/trunk/; revision=11163

Make --pretend disable background mode and imply --jobs=1.

svn path=/main/trunk/; revision=11162

Redirect dblink._preserve_libs() messages to the log when in background mode.

svn path=/main/trunk/; revision=11161

Adjust status messages for --fetchonly mode.

svn path=/main/trunk/; revision=11160

Adjust --fetchonly failure messages to work better with background mode.

svn path=/main/trunk/; revision=11159

Fix --depclean/--prune to add lib providers and their dependencies to the
graph and create a new clean list when necessary. This completes the fix
for bug #230053.

svn path=/main/trunk/; revision=11158

Add initial lib awareness for --depclean and --prune. Currently it will simply
bail out if the clean list contains a package that will cause link breakage
if removed. TODO: Calculate a new cleanlist instead of bailing out, and
implement a package set for rebuilding consumers.

svn path=/main/trunk/; revision=11157

In dblink.findProviders(), clone the "path" variable before extending it
since obviously it shouldn't grow each time that findProviders() is called.

svn path=/main/trunk/; revision=11156

In dblink._preserve_libs(), strip leading $ROOT from contents paths so that
it works when $ROOT != /.

svn path=/main/trunk/; revision=11155

Fix breakage in the depclean/prune unsatisfied deps handling.

svn path=/main/trunk/; revision=11154

Fix typo.

svn path=/main/trunk/; revision=11153

For --depclean and --prune, eliminate duplicate graph creation code by re-using
the depgraph class to do it. The depgraph class was used in the past for this
purpose but back then it didn't handle USE flags correctly for installed
packages. Now it works fine.

svn path=/main/trunk/; revision=11152

Redirect the 'Recording <pkg> in "world" favorites file...' message through
_status_msg().

svn path=/main/trunk/; revision=11151

Fix broken references to the old elog_modules namespace.

svn path=/main/trunk/; revision=11150

Redirect some more unmerge() output through writemsg_level() so that it can
filtered out when in background mode.

svn path=/main/trunk/; revision=11147

Fix Scheduler emergelog() interaction to properly disable emergelog()
xterm titles whenever the status display is enabled.

svn path=/main/trunk/; revision=11146

* Clean up _schedule_tasks_imp() a bit.
* Make _task() access _background directly instead of as a parameter.

svn path=/main/trunk/; revision=11145

Make PollScheduler._poll() add poll events to the stack instead of returning
them. This makes it more useful as a hook, allowing Scheduler._poll() to
safely call _schedule().

svn path=/main/trunk/; revision=11144

Merge tasks currently run synchronously which makes it necessary to disable
auto_schedule on the merge queue in order to avoid excess recursion which
prevents tasks from being marked complete as soon as they should be.

svn path=/main/trunk/; revision=11143

Fix Scheduler._schedule_tasks_imp() so that it never indicates that there
are remaining tasks in cases when it's supposed to bail out due to a
package failure.

svn path=/main/trunk/; revision=11142

Calling _schedule() from Scheduler._poll() is unsafe since the _schedule()
call itself can consume poll events. Therefore, until a safe way exists,
don't do it.

svn path=/main/trunk/; revision=11141

Use the memoized _choose_pkg() result to return earlier from
_schedule_tasks() when possible.

svn path=/main/trunk/; revision=11140

When Scheduler._choose_pkg() is unable to find a package, memoize the result
until at least one of the existing jobs completes.

svn path=/main/trunk/; revision=11139