b2/e769dc8fce35633e9d7171ead4d4f099c11d04

   1 Return-Path: <dmitry.kurochkin@gmail.com>\r
   2 X-Original-To: notmuch@notmuchmail.org\r
   3 Delivered-To: notmuch@notmuchmail.org\r
   4 Received: from localhost (localhost [127.0.0.1])\r
   5         by olra.theworths.org (Postfix) with ESMTP id 0FEF6429E25\r
   6         for <notmuch@notmuchmail.org>; Tue, 29 Nov 2011 13:04:01 -0800 (PST)\r
   7 X-Virus-Scanned: Debian amavisd-new at olra.theworths.org\r
   8 X-Spam-Flag: NO\r
   9 X-Spam-Score: -0.799\r
  10 X-Spam-Level: \r
  11 X-Spam-Status: No, score=-0.799 tagged_above=-999 required=5\r
  12         tests=[DKIM_SIGNED=0.1, DKIM_VALID=-0.1, DKIM_VALID_AU=-0.1,\r
  13         FREEMAIL_FROM=0.001, RCVD_IN_DNSWL_LOW=-0.7] autolearn=disabled\r
  14 Received: from olra.theworths.org ([127.0.0.1])\r
  15         by localhost (olra.theworths.org [127.0.0.1]) (amavisd-new, port 10024)\r
  16         with ESMTP id jhqC0Hd9ywYT for <notmuch@notmuchmail.org>;\r
  17         Tue, 29 Nov 2011 13:03:57 -0800 (PST)\r
  18 Received: from mail-bw0-f53.google.com (mail-bw0-f53.google.com\r
  19         [209.85.214.53]) (using TLSv1 with cipher RC4-SHA (128/128 bits))\r
  20         (No client certificate requested)\r
  21         by olra.theworths.org (Postfix) with ESMTPS id 2FF82431FB6\r
  22         for <notmuch@notmuchmail.org>; Tue, 29 Nov 2011 13:03:57 -0800 (PST)\r
  23 Received: by bkaq10 with SMTP id q10so11571469bka.26\r
  24         for <notmuch@notmuchmail.org>; Tue, 29 Nov 2011 13:03:56 -0800 (PST)\r
  25 DKIM-Signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=gmail.com; s=gamma;\r
  26         h=from:to:subject:in-reply-to:references:user-agent:date:message-id\r
  27         :mime-version:content-type;\r
  28         bh=qSfejVeexNAlzdgPo5G7Lc2RvCkroozjd4BlgaQ8QLI=;\r
  29         b=RoG8PlyyfxVnkhcHx2Wvn0T8+WEPgdbC8J90bzb1IqugBBwongiNFoBukldnB+Pzav\r
  30         SbaXUG6+DuBydy4+d4+6eXcuMPl9hGiANfSubY/DNceeMae86afb28T8dw4YWQC/bOjp\r
  31         cgVNlX4YCf5Cr73Ibqgbu5aB0ce6o3z20tqG8=\r
  32 Received: by 10.205.123.16 with SMTP id gi16mr52029875bkc.41.1322600633987;\r
  33         Tue, 29 Nov 2011 13:03:53 -0800 (PST)\r
  34 Received: from localhost ([91.144.186.21])\r
  35         by mx.google.com with ESMTPS id d2sm16204720bky.11.2011.11.29.13.03.50\r
  36         (version=TLSv1/SSLv3 cipher=OTHER);\r
  37         Tue, 29 Nov 2011 13:03:51 -0800 (PST)\r
  38 From: Dmitry Kurochkin <dmitry.kurochkin@gmail.com>\r
  39 To: Tomi Ollila <tomi.ollila@iki.fi>, Tomi Ollila <tomi.ollila@iki.fi>,\r
  40         notmuch@notmuchmail.org\r
  41 Subject: Re: [PATCH 1/3] test: add functions to count how much times notmuch\r
  42         was called\r
  43 In-Reply-To: <yf6mxbfxezr.fsf@taco2.nixu.fi>\r
  44 References: <1322271878-32614-1-git-send-email-dmitry.kurochkin@gmail.com>\r
  45         <1322450895-32523-1-git-send-email-dmitry.kurochkin@gmail.com>\r
  46         <1322450895-32523-2-git-send-email-dmitry.kurochkin@gmail.com>\r
  47         <yf6aa7gj7w5.fsf@taco2.nixu.fi> <87hb1ovsz4.fsf@gmail.com>\r
  48         <yf6mxbfxezr.fsf@taco2.nixu.fi>\r
  49 User-Agent: Notmuch/0.10+44~g067c44f (http://notmuchmail.org) Emacs/23.3.1\r
  50         (x86_64-pc-linux-gnu)\r
  51 Date: Wed, 30 Nov 2011 01:03:27 +0400\r
  52 Message-ID: <87aa7evdy8.fsf@gmail.com>\r
  53 MIME-Version: 1.0\r
  54 Content-Type: text/plain; charset=us-ascii\r
  55 X-BeenThere: notmuch@notmuchmail.org\r
  56 X-Mailman-Version: 2.1.13\r
  57 Precedence: list\r
  58 List-Id: "Use and development of the notmuch mail system."\r
  59         <notmuch.notmuchmail.org>\r
  60 List-Unsubscribe: <http://notmuchmail.org/mailman/options/notmuch>,\r
  61         <mailto:notmuch-request@notmuchmail.org?subject=unsubscribe>\r
  62 List-Archive: <http://notmuchmail.org/pipermail/notmuch>\r
  63 List-Post: <mailto:notmuch@notmuchmail.org>\r
  64 List-Help: <mailto:notmuch-request@notmuchmail.org?subject=help>\r
  65 List-Subscribe: <http://notmuchmail.org/mailman/listinfo/notmuch>,\r
  66         <mailto:notmuch-request@notmuchmail.org?subject=subscribe>\r
  67 X-List-Received-Date: Tue, 29 Nov 2011 21:04:01 -0000\r
  68 \r
  69 Hi Tomi.\r
  70 \r
  71 On Tue, 29 Nov 2011 14:58:00 +0200, Tomi Ollila <tomi.ollila@iki.fi> wrote:\r
  72 > Hi Dmitry.\r
  73 > \r
  74 > On Tue, 29 Nov 2011 01:26:39 +0400, Dmitry Kurochkin <dmitry.kurochkin@gmail.com> wrote:\r
  75 > > Hi Tomi.\r
  76 > > \r
  77 > > On Mon, 28 Nov 2011 22:42:50 +0200, Tomi Ollila <tomi.ollila@iki.fi> wrote:\r
  78 > > > On Mon, 28 Nov 2011 07:28:13 +0400, Dmitry Kurochkin <dmitry.kurochkin@gmail.com> wrote:\r
  79 > [ ... ]\r
  80 > > > > +# Creates a script that counts how much time it is executed and calls\r
  81 > > > > +# notmuch.  $notmuch_counter_command is set to the path to the\r
  82 > > > > +# generated script.  Use notmuch_counter_value() function to get the\r
  83 > > > > +# current counter value.\r
  84 > > > > +notmuch_counter_reset () {\r
  85 > > > > +       notmuch_counter_command="$TMP_DIRECTORY/notmuch_counter"\r
  86 > > > > +       if [ ! -x "$notmuch_counter_command" ]; then\r
  87 > > > > +               notmuch_counter_state_path="$TMP_DIRECTORY/notmuch_counter.state"\r
  88 > > > > +               cat >"$notmuch_counter_command" <<EOF || return\r
  89 > > > > +#!/bin/sh\r
  90 > > > > +\r
  91 > > > > +count=\$(cat "$notmuch_counter_state_path")\r
  92 > > > > +echo -n \$(expr \$count + 1) > "$notmuch_counter_state_path"\r
  93 > > > > +\r
  94 > > > > +exec notmuch "\$@"\r
  95 > > > > +EOF\r
  96 > > > > +               chmod +x "$notmuch_counter_command" || return\r
  97 > > > > +       fi\r
  98 > > > > +\r
  99 > > > > +       echo -n 0 > "$notmuch_counter_state_path"\r
 100 > > > > +}\r
 101 > > > > +\r
 102 > > > > +# Returns the current notmuch counter value.\r
 103 > > > > +notmuch_counter_value () {\r
 104 > > > > +       if [ -r "$notmuch_counter_state_path" ]; then\r
 105 > > > > +               count=$(cat "$notmuch_counter_state_path")\r
 106 > > > > +       else\r
 107 > > > > +               count=0\r
 108 > > > > +       fi\r
 109 > > > > +       echo -n $count\r
 110 > > > > +}\r
 111 > > > > +\r
 112 > > > \r
 113 > > > Good work! It would be nice if the state file contained newline after\r
 114 > > > count number.\r
 115 > > \r
 116 > > I wonder why it is actually nice :)  I do not have strong preference\r
 117 > > here.  So a newline is added in v3.  Also a newline is added to\r
 118 > > notmuch_counter_value() output for consistency.\r
 119 > \r
 120 > It is nice when I enter cat /path/to/notmuch_counter from command\r
 121 > line and shell prompt is not appended at the end of the file contents\r
 122 > (but on next line :)\r
 123 > \r
 124 > > \r
 125 > > > Also some optimizations could be done:\r
 126 > > > \r
 127 > > \r
 128 > > (Would be nice if you send a diff, or a human-friendly description of\r
 129 > > the changes.)\r
 130 > \r
 131 > Ok, I'll try to do this according to your wishes next time.\r
 132 > \r
 133 > > >           cat >"$notmuch_counter_command" <<EOF || return\r
 134 > > > #!/bin/sh\r
 135 > > > \r
 136 > > > read count < "$notmuch_counter_state_path"\r
 137 > > \r
 138 > > Nice.  Fixed in the new patch version.\r
 139 > > \r
 140 > > > echo \$((count + 1)) > "$notmuch_counter_state_path"\r
 141 > > > \r
 142 > > \r
 143 > > I do not think this is really an optimization.  And I find expr more\r
 144 > > clear than using $(()).  I always have troubles remembering "random\r
 145 > > special char syntax" (yeah, not a Perl fan :)), prefer human friendly\r
 146 > > words.\r
 147 > \r
 148 > The (posix) shell command language defines 'Arithmetic Expansion' in\r
 149 > \r
 150 > http://pubs.opengroup.org/onlinepubs/007908799/xcu/chap2.html#tag_001_006_004\r
 151 > \r
 152 > I.e. using format $(( expression )) makes shell doing the arithetic itself\r
 153 > instead of forking a process (or two!) to do so.\r
 154 > \r
 155 \r
 156 I though expr was a builtin.  Now I agree that it is better to replace\r
 157 it with $(()), even though I still prefer the expr syntax.\r
 158 \r
 159 > Normally in this case it is not so big deal (and still it isn't, but...)\r
 160 > In this  particular case the shell wrapper counting notmuch launches and\r
 161 > exec'ing it the wrapper could do this without fork(2)ing a single time\r
 162 > (i.e. keep the process count unchanged compared to execing notmuch\r
 163 > directly)\r
 164 > \r
 165 > Anyway, many opinions; as far as it works I'm fine with it :) \r
 166 > \r
 167 > Now that you feel relaxed, check the results of some further\r
 168 > experimentation ;) :\r
 169 > \r
 170 > excerpt from man strace:\r
 171 > \r
 172 >        -ff         If the -o filename option is in effect,  each  processes\r
 173 >                    trace  is  written  to  filename.pid  where  pid  is the\r
 174 >                    numeric process id of each process.\r
 175 > \r
 176 > Executing  rm -f forked.*; strace -ff -o forked bash -c 'echo $(( 5 + 5 ))' \r
 177 > \r
 178 > will output '10' and create just one 'forked.<pid>' file\r
 179 > \r
 180 > Executing  rm -f forked.*; strace -ff -o forked bash -c 'echo $(expr 5 + 5)' \r
 181 > \r
 182 > output 10 as expected, but there is now *3* forked.<pid> files !\r
 183 > \r
 184 > bash does not optmize; it forks subshell to execute $(...) and then\r
 185 > there just works as usual (forks subshell to execute builtin expr))\r
 186 > \r
 187 > Executing  rm -f forked.*; strace -ff -o forked bash -c 'echo $(exec expr 5 + 5)' \r
 188 > \r
 189 > (the added 'exec' takes off one fork -- just 2 forked.<pid> files appear).\r
 190 > \r
 191 > I did the same tests using dash, ksh & zsh on linux system, and every one\r
 192 > of these managed to optimize one fork out in the above 3 fork case.\r
 193 > \r
 194 \r
 195 Thanks for details.\r
 196 \r
 197 Regards,\r
 198   Dmitry\r
 199 \r
 200 > \r
 201 > Tomi\r