ce/8f1d684a116ae57afae49c28a9c2d8ff297f47

   1 Return-Path: <nedson@nedson.net>\r
   2 X-Original-To: notmuch@notmuchmail.org\r
   3 Delivered-To: notmuch@notmuchmail.org\r
   4 Received: from localhost (localhost [127.0.0.1])\r
   5         by olra.theworths.org (Postfix) with ESMTP id 4B89E429E21\r
   6         for <notmuch@notmuchmail.org>; Fri, 16 Dec 2011 14:35:00 -0800 (PST)\r
   7 X-Virus-Scanned: Debian amavisd-new at olra.theworths.org\r
   8 X-Spam-Flag: NO\r
   9 X-Spam-Score: 0\r
  10 X-Spam-Level: \r
  11 X-Spam-Status: No, score=0 tagged_above=-999 required=5\r
  12         tests=[RCVD_IN_DNSWL_NONE=-0.0001] autolearn=disabled\r
  13 Received: from olra.theworths.org ([127.0.0.1])\r
  14         by localhost (olra.theworths.org [127.0.0.1]) (amavisd-new, port 10024)\r
  15         with ESMTP id IAzJSXTUFtgS for <notmuch@notmuchmail.org>;\r
  16         Fri, 16 Dec 2011 14:34:59 -0800 (PST)\r
  17 X-Greylist: delayed 2015 seconds by postgrey-1.32 at olra;\r
  18         Fri, 16 Dec 2011 14:34:59 PST\r
  19 Received: from gateway05.websitewelcome.com (gateway05.websitewelcome.com\r
  20         [67.18.21.3])\r
  21         by olra.theworths.org (Postfix) with ESMTP id 776CF431FD0\r
  22         for <notmuch@notmuchmail.org>; Fri, 16 Dec 2011 14:34:59 -0800 (PST)\r
  23 Received: by gateway05.websitewelcome.com (Postfix, from userid 5007)\r
  24         id B502A17E1DA73; Fri, 16 Dec 2011 15:43:38 -0600 (CST)\r
  25 Received: from terminator.websitewelcome.com (terminator.websitewelcome.com\r
  26         [74.53.228.194])\r
  27         by gateway05.websitewelcome.com (Postfix) with ESMTP id AB13A17E1DA53\r
  28         for <notmuch@notmuchmail.org>; Fri, 16 Dec 2011 15:43:38 -0600 (CST)\r
  29 Received: from [76.90.166.13] (port=56105 helo=newb)\r
  30         by terminator.websitewelcome.com with esmtpsa (TLSv1:AES128-SHA:128)\r
  31         (Exim 4.69) (envelope-from <nedson@nedson.net>)\r
  32         id 1RbfZ4-00081V-8t; Fri, 16 Dec 2011 15:43:38 -0600\r
  33 Date: Fri, 16 Dec 2011 13:43:37 -0800\r
  34 From: Nathan Edson <nedson@nedson.net>\r
  35 To: Austin Clements <amdragon@MIT.EDU>\r
  36 Subject: Re: GLib-ERROR Mesage Running notmuch new\r
  37 Message-ID: <20111216214337.GB29172@newb>\r
  38 References: <20111216200714.GA25170@newb> <20111216204529.GA19427@mit.edu>\r
  39         <20111216211237.GA27860@newb> <20111216211734.GB19427@mit.edu>\r
  40         <20111216212622.GA29172@newb> <20111216213815.GD19427@mit.edu>\r
  41 MIME-Version: 1.0\r
  42 Content-Type: text/plain; charset=us-ascii\r
  43 Content-Disposition: inline\r
  44 In-Reply-To: <20111216213815.GD19427@mit.edu>\r
  45 User-Agent: Mutt/1.5.21 (2010-09-15)\r
  46 X-AntiAbuse: This header was added to track abuse,\r
  47         please include it with any abuse report\r
  48 X-AntiAbuse: Primary Hostname - terminator.websitewelcome.com\r
  49 X-AntiAbuse: Original Domain - notmuchmail.org\r
  50 X-AntiAbuse: Originator/Caller UID/GID - [47 12] / [47 12]\r
  51 X-AntiAbuse: Sender Address Domain - nedson.net\r
  52 X-BWhitelist: no\r
  53 X-Source: \r
  54 X-Source-Args: \r
  55 X-Source-Dir: \r
  56 X-Source-Sender: cpe-76-90-166-13.socal.res.rr.com (newb) [76.90.166.13]:56105\r
  57 X-Source-Auth: nedson@nedson.net\r
  58 X-Email-Count: 7\r
  59 X-Source-Cap: bmVkc29ubmU7dHJpY2s7dGVybWluYXRvci53ZWJzaXRld2VsY29tZS5jb20=\r
  60 Cc: notmuch@notmuchmail.org\r
  61 X-BeenThere: notmuch@notmuchmail.org\r
  62 X-Mailman-Version: 2.1.13\r
  63 Precedence: list\r
  64 List-Id: "Use and development of the notmuch mail system."\r
  65         <notmuch.notmuchmail.org>\r
  66 List-Unsubscribe: <http://notmuchmail.org/mailman/options/notmuch>,\r
  67         <mailto:notmuch-request@notmuchmail.org?subject=unsubscribe>\r
  68 List-Archive: <http://notmuchmail.org/pipermail/notmuch>\r
  69 List-Post: <mailto:notmuch@notmuchmail.org>\r
  70 List-Help: <mailto:notmuch-request@notmuchmail.org?subject=help>\r
  71 List-Subscribe: <http://notmuchmail.org/mailman/listinfo/notmuch>,\r
  72         <mailto:notmuch-request@notmuchmail.org?subject=subscribe>\r
  73 X-List-Received-Date: Fri, 16 Dec 2011 22:35:00 -0000\r
  74 \r
  75 On 12/16/11, Austin Clements wrote:\r
  76 > Quoth Nathan Edson on Dec 16 at  1:26 pm:\r
  77 > > On 12/16/11, Austin Clements wrote:\r
  78 > > > Quoth Nathan Edson on Dec 16 at  1:12 pm:\r
  79 > > > > > Since you're now building notmuch from source, could you build it with\r
  80 > > > > > make clean && make CFLAGS=-g and run it under gdb again to get a\r
  81 > > > > > backtrace?  I don't understand why strace didn't show it opening any\r
  82 > > > > > mail, but with debug symbols the backtrace should hopefully tell us\r
  83 > > > > > that.\r
  84 > > > > \r
  85 > > > > First, thanks for your help!  Perhaps I am making progress...\r
  86 > > > > \r
  87 > > > > Here is what I get:\r
  88 > > > > \r
  89 > > > > yabai@newb:~$ gdb --args notmuch new\r
  90 > > > > GNU gdb (Ubuntu/Linaro 7.2-1ubuntu11) 7.2\r
  91 > > > > Copyright (C) 2010 Free Software Foundation, Inc.\r
  92 > > > > License GPLv3+: GNU GPL version 3 or later <http://gnu.org/licenses/gpl.html>\r
  93 > > > > This is free software: you are free to change and redistribute it.\r
  94 > > > > There is NO WARRANTY, to the extent permitted by law.  Type "show copying"\r
  95 > > > > and "show warranty" for details.\r
  96 > > > > This GDB was configured as "i686-linux-gnu".\r
  97 > > > > For bug reporting instructions, please see:\r
  98 > > > > <http://www.gnu.org/software/gdb/bugs/>...\r
  99 > > > > Reading symbols from /usr/local/bin/notmuch...done.\r
 100 > > > > (gdb) run\r
 101 > > > > Starting program: /usr/local/bin/notmuch new\r
 102 > > > > [Thread debugging using libthread_db enabled]\r
 103 > > > > \r
 104 > > > > GLib-ERROR **: /build/buildd/glib2.0-2.28.6/./glib/gmem.c:239: failed to allocate 2147483648 bytes\r
 105 > > > > aborting...\r
 106 > > > > \r
 107 > > > > Program received signal SIGABRT, Aborted.\r
 108 > > > > 0xb7fe1424 in __kernel_vsyscall ()\r
 109 > > > > (gdb) bt\r
 110 > > > > #0  0xb7fe1424 in __kernel_vsyscall ()\r
 111 > > > > #1  0xb7ce3e71 in raise () from /lib/i386-linux-gnu/libc.so.6\r
 112 > > > > #2  0xb7ce734e in abort () from /lib/i386-linux-gnu/libc.so.6\r
 113 > > > > #3  0xb7e87f27 in g_logv () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 114 > > > > #4  0xb7e87f62 in g_log () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 115 > > > > #5  0xb7e85c3c in g_realloc () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 116 > > > > #6  0xb7e50965 in ?? () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 117 > > > > #7  0xb7e50d5d in g_array_append_vals () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 118 > > > > #8  0xb7e520c0 in g_byte_array_append () from /lib/i386-linux-gnu/libglib-2.0.so.0\r
 119 > > > > #9  0xb7f7fc94 in ?? () from /usr/lib/libgmime-2.4.so.2\r
 120 > > > > #10 0xb7f80fbf in ?? () from /usr/lib/libgmime-2.4.so.2\r
 121 > > > > #11 0xb7f81761 in ?? () from /usr/lib/libgmime-2.4.so.2\r
 122 > > > > #12 0xb7f829ea in g_mime_parser_construct_message () from /usr/lib/libgmime-2.4.so.2\r
 123 > > > > #13 0xb7fc1168 in _notmuch_message_index_file (message=0x13714078, \r
 124 > > > >     filename=0x80d0600 "/home/yabai/Mail/old.mail") at lib/index.cc:437\r
 125 > > > > #14 0xb7fbef9f in notmuch_database_add_message (notmuch=0x806cd40, \r
 126 > > > >     filename=0x80d0600 "/home/yabai/Mail/old.mail", message_ret=0xbffff414) at lib/database.cc:1734\r
 127 > > > \r
 128 > > > Ah!  It did show up in the strace.  /home/yabai/Mail/old.mail appears\r
 129 > > > to be the offending file.  What's in it?\r
 130 > > \r
 131 > > This is my file full of old mail.  I believe it is in mbox format. It contains approximately 40K emails...could the format of this file affect things?  Orginally, this mail was exported from Apple Mail.\r
 132 > \r
 133 > notmuch doesn't support mbox files, but an mbox file looks enough like\r
 134 > a maildir message that notmuch will *try* to index it (but as a\r
 135 > single, gigantic message).  This is certainly the cause of the\r
 136 > failure.  The immediate solution is to move this file out of the tree\r
 137 > you're indexing with notmuch.\r
 138 > \r
 139 > Still, notmuch should fail more gracefully and you are probably\r
 140 > hitting a real gmime bug (given that it's trying to allocate\r
 141 > (unsigned)-1 bytes of memory).  How big is old.mail?\r
 142 \r
 143 old.mail is about 5gb.  I guess the file type is the problem...forgive me, I thought notmuch supported mbox.\r