63/c180d34d1b83f9e005597519e27e4198647446

   1 Return-Path: <dmishd@gmail.com>\r
   2 X-Original-To: notmuch@notmuchmail.org\r
   3 Delivered-To: notmuch@notmuchmail.org\r
   4 Received: from localhost (localhost [127.0.0.1])\r
   5         by olra.theworths.org (Postfix) with ESMTP id 5E908431FBC\r
   6         for <notmuch@notmuchmail.org>; Mon,  3 Feb 2014 14:18:51 -0800 (PST)\r
   7 X-Virus-Scanned: Debian amavisd-new at olra.theworths.org\r
   8 X-Spam-Flag: NO\r
   9 X-Spam-Score: -0.699\r
  10 X-Spam-Level: \r
  11 X-Spam-Status: No, score=-0.699 tagged_above=-999 required=5\r
  12         tests=[DKIM_SIGNED=0.1, DKIM_VALID=-0.1, FREEMAIL_FROM=0.001,\r
  13         RCVD_IN_DNSWL_LOW=-0.7] autolearn=disabled\r
  14 Received: from olra.theworths.org ([127.0.0.1])\r
  15         by localhost (olra.theworths.org [127.0.0.1]) (amavisd-new, port 10024)\r
  16         with ESMTP id kcWxTA8vypry for <notmuch@notmuchmail.org>;\r
  17         Mon,  3 Feb 2014 14:18:46 -0800 (PST)\r
  18 Received: from mail-qc0-f178.google.com (mail-qc0-f178.google.com\r
  19         [209.85.216.178]) (using TLSv1 with cipher RC4-SHA (128/128 bits))\r
  20         (No client certificate requested)\r
  21         by olra.theworths.org (Postfix) with ESMTPS id 94C5E431FAF\r
  22         for <notmuch@notmuchmail.org>; Mon,  3 Feb 2014 14:18:46 -0800 (PST)\r
  23 Received: by mail-qc0-f178.google.com with SMTP id m20so12140296qcx.23\r
  24         for <notmuch@notmuchmail.org>; Mon, 03 Feb 2014 14:18:46 -0800 (PST)\r
  25 DKIM-Signature: v=1; a=rsa-sha256; c=relaxed/relaxed; d=gmail.com; s=20120113;\r
  26         h=mime-version:sender:from:date:message-id:subject:to:content-type;\r
  27         bh=8q38TB5EwsUB4tS7nIEiP5ROdOm+QkaTZIyb8IwMR6A=;\r
  28         b=h94OXI/ThsY02PTMdAhqKRNLFDlbIyacfxIU0ssXw3aJCy5Uv2ykU++CpccS/qdBXZ\r
  29         AA8LTWHu+1/1bZ0qkl9abG80EA8K1F964SmZpUfp56/9V7lGieJ5uJTjofarghI92FjX\r
  30         RTZcGrCslPJ0D7enXwrPdnhttsUrbvRMtdLEKtApr4GbegHfyvjBMHvzLjLTTN8UEHFo\r
  31         ULXS1FKRgDuo9Jm6yxzU2zHyYxvV4/2U5OH9qdEZQhAXzA9kr/DXFViIZ0ixAoiv4+GE\r
  32         XLDWoX6UWV3yrt+aTPVyZykVBGjZwGs7ZK2zT50ZEMj22Yq9+AK4M2IA8VY7tes7IuvL\r
  33         dmrg==\r
  34 X-Received: by 10.140.49.239 with SMTP id q102mr20790595qga.103.1391465924865;\r
  35         Mon, 03 Feb 2014 14:18:44 -0800 (PST)\r
  36 MIME-Version: 1.0\r
  37 Sender: dmishd@gmail.com\r
  38 Received: by 10.140.49.83 with HTTP; Mon, 3 Feb 2014 14:18:01 -0800 (PST)\r
  39 From: Hamish Downer <hamish@foobacca.co.uk>\r
  40 Date: Mon, 3 Feb 2014 22:18:01 +0000\r
  41 X-Google-Sender-Auth: PXgZdkCFd2VqpUWgRaxR3dw07yU\r
  42 Message-ID:\r
  43  <CAOxvSbfWu3M=M1PyFrZcUhszjW0rpb0wYOiia+3sSSd9AGqD4w@mail.gmail.com>\r
  44 Subject: notmuch killed due to out of memory - how to move forward\r
  45 To: notmuch@notmuchmail.org\r
  46 Content-Type: text/plain; charset=UTF-8\r
  47 X-BeenThere: notmuch@notmuchmail.org\r
  48 X-Mailman-Version: 2.1.13\r
  49 Precedence: list\r
  50 List-Id: "Use and development of the notmuch mail system."\r
  51         <notmuch.notmuchmail.org>\r
  52 List-Unsubscribe: <http://notmuchmail.org/mailman/options/notmuch>,\r
  53         <mailto:notmuch-request@notmuchmail.org?subject=unsubscribe>\r
  54 List-Archive: <http://notmuchmail.org/pipermail/notmuch>\r
  55 List-Post: <mailto:notmuch@notmuchmail.org>\r
  56 List-Help: <mailto:notmuch-request@notmuchmail.org?subject=help>\r
  57 List-Subscribe: <http://notmuchmail.org/mailman/listinfo/notmuch>,\r
  58         <mailto:notmuch-request@notmuchmail.org?subject=subscribe>\r
  59 X-List-Received-Date: Mon, 03 Feb 2014 22:18:51 -0000\r
  60 \r
  61 Hello\r
  62 \r
  63 I recently deleted almost 30000 old messages from my maildirs, and\r
  64 since I did that, notmuch new has not managed to complete.  I have it\r
  65 running on a server with 1 GB of RAM, and the output is telling me\r
  66 \r
  67     Cleaned up 25515 of 29803 messages (1m 10s remaining).\r
  68 \r
  69 at the point it is killed.  I have followed it up to this point with\r
  70 top and free and I can see memory usage growing to something like\r
  71 700MB (RES) at which point the process is killed.\r
  72 \r
  73 I am using notmuch 0.17 (from the debian jessie package 0.17-3) on\r
  74 debian wheezy 64 bit.\r
  75 \r
  76 Any pointers as to what to do to get past this point would be greatly\r
  77 appreciated.  If I have just deleted that many messages should I just\r
  78 expect notmuch to use that much memory?  (Unfortunately the company\r
  79 supplying the server does not allow swap to be enabled so I can't fudge\r
  80 it that way)\r
  81 \r
  82 I did also try running it with NOTMUCH_TALLOC_REPORT, but that didn't\r
  83 produce a report (though I was unsure if I needed to rebuild notmuch\r
  84 before that would work).\r
  85 \r
  86 Happy to build notmuch from source if this might be an interesting bug\r
  87 worth tracking down.\r
  88 \r
  89 Hamish\r
  90 \r
  91 (PS sorry to moderators - I subscribed and then sent this email from the\r
  92 wrong address a couple of times)\r