由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Hardware版 - 2,000,000封email,怎么处理好?
相关主题
配个处理access的电脑求建议【转帖】Linode 被 Hack 事件始末
问个软件问题请教Xeon E5选型
有什么装在NAS上的邮件客户端嘛?真爽死了!M.2 SSD四路并联:狂飙9GB/s
gmail出问题了?好口水新蛋的intel 750 aic ssd的deal
win 10这个2502015年度回顾:十大固态硬盘
t450s 温8系统升级包子求救: X99主板+SSD安装win7失败,请问如何正确安装系统
请问Win10Pad怎么把SD卡变成固定硬盘X1C 2015 128G --> AMAZON SM951 AHCI OEM 512GB
WD Elements 1.5T外挂硬盘被摔了问一下460s能自己加硬盘吗?
相关话题的讨论汇总
话题: folder话题: emails话题: inbox话题: replace
进入Hardware版参与讨论
1 (共1页)
d*****e
发帖数: 515
1
工作上要处理大量的email,有2百万封左右,现在公司在用thunderbird,非常慢。老
板让升级一下电脑试试,我就买了 i7 8700k 的cpu 和 samsung 960的 ssd的新电脑,
应该都是非常快的了吧。可是thunderbird的速度更慢了。
请问大神一下,是不是因为 8700k这种gaming cpu不适合处理office文案这类的工作?
还用thunderbird怎么样才能变快些?
谢谢谢谢!
y**b
发帖数: 10166
2
这种事没啥软件能快
a*o
发帖数: 19981
3
什么形式存在?你要做什么处理?

【在 d*****e 的大作中提到】
: 工作上要处理大量的email,有2百万封左右,现在公司在用thunderbird,非常慢。老
: 板让升级一下电脑试试,我就买了 i7 8700k 的cpu 和 samsung 960的 ssd的新电脑,
: 应该都是非常快的了吧。可是thunderbird的速度更慢了。
: 请问大神一下,是不是因为 8700k这种gaming cpu不适合处理office文案这类的工作?
: 还用thunderbird怎么样才能变快些?
: 谢谢谢谢!

F***Q
发帖数: 6599
4

depends on what you meant by "process".
if you want to do simple text match/replacement in those emails, you can use
perl/sed and directly operate in the thunderbird mailbox files.
For example, if all your emails are stored under the Local_FolderInbox in
Thunderbird, you can find this file under a folder (Linux: ~/.thunderbird/
xxxxxxx.default/Mail/Local Folder/Inbox, Windows: C:
UsersUsernameAppDataRoamingThunderbird).
you just delete the Inbox.msf file and run
perl -pi -e 's/replace_from_string/replace_to_string/g' Inbox
or
sed -i 's/replace_from_string/replace_to_string/g' Inbox
this takes only takes 10-20 seconds processing a 5-10GB mailbox file on an
NVME drive.
remember to make a copy before the replacement. you can use regular
expression for the above command to replace more complex patterns.

【在 d*****e 的大作中提到】
: 工作上要处理大量的email,有2百万封左右,现在公司在用thunderbird,非常慢。老
: 板让升级一下电脑试试,我就买了 i7 8700k 的cpu 和 samsung 960的 ssd的新电脑,
: 应该都是非常快的了吧。可是thunderbird的速度更慢了。
: 请问大神一下,是不是因为 8700k这种gaming cpu不适合处理office文案这类的工作?
: 还用thunderbird怎么样才能变快些?
: 谢谢谢谢!

d*****e
发帖数: 515
5
就是下载到公司电脑thunderbird里面,回复邮件,查询搜索邮件,简单的处理。
[在 amo (牛肉炖熊掌) 的大作中提到:]
:什么形式存在?你要做什么处理?
d*****e
发帖数: 515
6
我们主要回复邮件,查询搜索邮件,简单的处理。
thunderbird主要是在下载和index邮件的时候特别的慢,经常freeze。 我在
thunderbird里面增加了catch的size到1024M,重启一次就变回到350M默认的catch
[在 FangQ (光芒之神) 的大作中提到:]
:depends on what you meant by "process".
:if you want to do simple text match/replacement in those emails, you can
use perl/sed and directly operate in the thunderbird mailbox files.
:For example, if all your emails are stored under the Local_FolderInbox in
:Thunderbird, you can find this file under a folder (Linux: ~/.thunderbird/
:xxxxxxx.default/Mail/Local Folder/Inbox, Windows: C:
:UsersUsernameAppDataRoamingThunderbird).
:you just delete the Inbox.msf file and run
:perl -pi -e 's/replace_from_string/replace_to_string/g' Inbox
:or
:sed -i 's/replace_from_string/replace_to_string/g' Inbox
:..........
c******n
发帖数: 16666
7
re 这个
这个数量级的话我觉得完全可以存到数据库里面 然后外边做检索和回复
thunderbird其实挺多年没更新 也就最近才开始重新开始开发
我记得win下面都没有64位的安装包 何况你这么大的数据量

use

【在 F***Q 的大作中提到】
:
: depends on what you meant by "process".
: if you want to do simple text match/replacement in those emails, you can use
: perl/sed and directly operate in the thunderbird mailbox files.
: For example, if all your emails are stored under the Local_FolderInbox in
: Thunderbird, you can find this file under a folder (Linux: ~/.thunderbird/
: xxxxxxx.default/Mail/Local Folder/Inbox, Windows: C:
: UsersUsernameAppDataRoamingThunderbird).
: you just delete the Inbox.msf file and run
: perl -pi -e 's/replace_from_string/replace_to_string/g' Inbox

a*o
发帖数: 19981
8
可以存到老克家地下室

【在 c******n 的大作中提到】
: re 这个
: 这个数量级的话我觉得完全可以存到数据库里面 然后外边做检索和回复
: thunderbird其实挺多年没更新 也就最近才开始重新开始开发
: 我记得win下面都没有64位的安装包 何况你这么大的数据量
:
: use

c******n
发帖数: 16666
9
嗯 直接发信让nsa帮着检索 然后存到收信人桌面上

【在 a*o 的大作中提到】
: 可以存到老克家地下室
F***Q
发帖数: 6599
10

you don't want to put everything under a single inbox folder. it just make
that file huge in size.
split those into multiple folders, manually, or automatically using filters,
see instructions
http://support.mozilla.org/en-US/questions/1027435
http://computing.artsci.wustl.edu/help/194
http://support.mozilla.org/en-US/kb/organize-your-messages-using-filters#w_move-to-a-folder
this way, each folder contains a fraction of emails, easy to index, easy to
navigate.
My thunderbird manages all my past emails (I kept at least those for the
past 10 years, older ones are backed up and removed). Once a folder grows to
a point, I will create a folder in the format of the year under a folder
named Archives, and move all emails of that year to that folder. I have had
little issue navigate/search in those folders.

【在 d*****e 的大作中提到】
: 我们主要回复邮件,查询搜索邮件,简单的处理。
: thunderbird主要是在下载和index邮件的时候特别的慢,经常freeze。 我在
: thunderbird里面增加了catch的size到1024M,重启一次就变回到350M默认的catch
: [在 FangQ (光芒之神) 的大作中提到:]
: :depends on what you meant by "process".
: :if you want to do simple text match/replacement in those emails, you can
: use perl/sed and directly operate in the thunderbird mailbox files.
: :For example, if all your emails are stored under the Local_FolderInbox in
: :Thunderbird, you can find this file under a folder (Linux: ~/.thunderbird/
: :xxxxxxx.default/Mail/Local Folder/Inbox, Windows: C:

相关主题
t450s 温8系统升级【转帖】Linode 被 Hack 事件始末
请问Win10Pad怎么把SD卡变成固定硬盘请教Xeon E5选型
WD Elements 1.5T外挂硬盘被摔了真爽死了!M.2 SSD四路并联:狂飙9GB/s
进入Hardware版参与讨论
F***Q
发帖数: 6599
11

thunderbird uses sqlite under the hood, you can load the .sqlite file
directly to sqlite3, or use an extension
http://support.mozilla.org/en-US/kb/rebuilding-global-database
http://developer.mozilla.org/en-US/docs/Mozilla/Thunderbird/Thunderbird_extensions/HowTos/Common_Thunderbird_Extension_Techniques/Use_SQLite
there were regular updates, both on linux and windows. My thunderbird on one
of my remote windows desktop was installed circa 2005, and has been
automatically upgraded since (copied from winxp to win7 once, but never
reinstalled).

【在 c******n 的大作中提到】
: re 这个
: 这个数量级的话我觉得完全可以存到数据库里面 然后外边做检索和回复
: thunderbird其实挺多年没更新 也就最近才开始重新开始开发
: 我记得win下面都没有64位的安装包 何况你这么大的数据量
:
: use

F***Q
发帖数: 6599
12

so, you are not "processing" 2 million emails, really, you just want to
process new incoming emails to an Inbox with 2 mil existing emails.
in that case, all you need to do is to create a new folder, move most of the
existing emails to the folder, and the compress. after that, your default
inbox will be responsive again.
also, delete junks and compress regularly, I doubt all your emails are worth
keeping.

【在 d*****e 的大作中提到】
: 就是下载到公司电脑thunderbird里面,回复邮件,查询搜索邮件,简单的处理。
: [在 amo (牛肉炖熊掌) 的大作中提到:]
: :什么形式存在?你要做什么处理?

c******n
发帖数: 16666
13
https://news.ycombinator.com/item?id=15963223
我用tb也十几年了 不过这几年确实一直没有大的改进
特别是calendar那块 和exchange server对接后邮件的处理也是
不过真还不知道他用的是sqlite 之前迁移profile 倒是看到.db 没往那边想

one

【在 F***Q 的大作中提到】
:
: so, you are not "processing" 2 million emails, really, you just want to
: process new incoming emails to an Inbox with 2 mil existing emails.
: in that case, all you need to do is to create a new folder, move most of the
: existing emails to the folder, and the compress. after that, your default
: inbox will be responsive again.
: also, delete junks and compress regularly, I doubt all your emails are worth
: keeping.

g*****2
发帖数: 863
14
用gmail,search天下无敌,比如何客户端都强,
d*****e
发帖数: 515
15
谢谢大神,做了以下几点,现在好多了。
1. 信多的文件夹分成多个文件夹。
2. 不用的email就在gmail里面备份。在gmail里面archive不需要的email,并且加上
label,这些label选择不下载到IMAP,这样就不会显示在thunderbird里面。偶尔需要
这些email,就到gmail里面去找。
3. 勾选自动compress email。这个不知道有什么效果。之前也在自动compress,只是
有的时候compress的时候,thunderbird就freeze,反而更慢了。
[在 FangQ (光芒之神) 的大作中提到:]
:you don't want to put everything under a single inbox folder. it just
make
:that file huge in size.
:split those into multiple folders, manually, or automatically using filters
, see instructions
:http://support.mozilla.org/en-US/questions/1027435
:http://computing.artsci.wustl.edu/help/194
:http://support.mozilla.org/en-US/kb/organize-your-messages-using-filters#w_move-to-a-folder
:this way, each folder contains a fraction of emails, easy to index, easy to
navigate.
:My thunderbird manages all my past emails (I kept at least those for the
:past 10 years, older ones are backed up and removed). Once a folder grows
to a point, I will create a folder in the format of the year under a folder
:named Archives, and move all emails of that year to that folder. I have had
little issue navigate/search in those folders.
d*b
发帖数: 21830
16
thunderbird处理你几百万email完全没问题,我的thunderbird的mail folder都几百G
了也没见慢。你的问题是email不是日积月累逐渐增加的,而是一次处理几百万,如果
你开index的话自然就死机了
所以把thunderbird的global index关了,然后进mail folder把你的mailx文件copy到
folder里,再打开thunderbird,把email分类,然后对每个folder逐个建index. 完成后
再开global index.
compact的意思是说把你删掉的email从系统里删除---thunderbird并不删email,删的只
是sqlite的index.所以你看不到email了,但email其实还在。
thunderbird其实就是当年linux上的mailx加个图形界面,这玩意现在的blade server
上几乎是企业邮件一半的江山,

【在 d*****e 的大作中提到】
: 谢谢大神,做了以下几点,现在好多了。
: 1. 信多的文件夹分成多个文件夹。
: 2. 不用的email就在gmail里面备份。在gmail里面archive不需要的email,并且加上
: label,这些label选择不下载到IMAP,这样就不会显示在thunderbird里面。偶尔需要
: 这些email,就到gmail里面去找。
: 3. 勾选自动compress email。这个不知道有什么效果。之前也在自动compress,只是
: 有的时候compress的时候,thunderbird就freeze,反而更慢了。
: [在 FangQ (光芒之神) 的大作中提到:]
: :you don't want to put everything under a single inbox folder. it just
: make

1 (共1页)
进入Hardware版参与讨论
相关主题
问一下460s能自己加硬盘吗?win 10这个250
买了950pro nvme 插上不识别怎么办?t450s 温8系统升级
是时候开始准备配电脑了请问Win10Pad怎么把SD卡变成固定硬盘
PCIe SSD能当启动盘用吗?WD Elements 1.5T外挂硬盘被摔了
配个处理access的电脑求建议【转帖】Linode 被 Hack 事件始末
问个软件问题请教Xeon E5选型
有什么装在NAS上的邮件客户端嘛?真爽死了!M.2 SSD四路并联:狂飙9GB/s
gmail出问题了?好口水新蛋的intel 750 aic ssd的deal
相关话题的讨论汇总
话题: folder话题: emails话题: inbox话题: replace