T*U
发帖数: 22634 | 1 做模拟，程序产生的数据巨大，基本是写操作，比如一天10TB，运行要好几周。
10TB一天好像是我们现有系统的瓶颈，平均下来也就0.1GB/s，所以有可能更高。
什么样的硬盘配置大概能满足这样的要求，钱先不考虑，看看有什么选择没，
包括什么公司生产的机器能允许这样的硬盘配置？
目前能找到的就15KRPM SAS drive和SSD，因为是考虑硬盘的transfer rate
不是access rate，考虑SSD不是很经济，而且单个硬盘容量比较小。不过不考虑钱，
不妨碍技术讨论。
比如Seagate 2TB 6Gb/s SAS Enterprise Drive， sustained data rate up to
0.15GB/s，提高才50%。
HP SSD IO Accelerator 能达到0.8GB/s，但容量才320G.
大家有见过这方面的最新技术和产品吗？ |
t**t
发帖数: 27760 | 2 Raid0不就是解决这个问题的吗？
access
论。
【在 T*U 的大作中提到】
: 做模拟，程序产生的数据巨大，基本是写操作，比如一天10TB，运行要好几周。
: 10TB一天好像是我们现有系统的瓶颈，平均下来也就0.1GB/s，所以有可能更高。
: 什么样的硬盘配置大概能满足这样的要求，钱先不考虑，看看有什么选择没，
: 包括什么公司生产的机器能允许这样的硬盘配置？
: 目前能找到的就15KRPM SAS drive和SSD，因为是考虑硬盘的transfer rate
: 不是access rate，考虑SSD不是很经济，而且单个硬盘容量比较小。不过不考虑钱，
: 不妨碍技术讨论。
: 比如Seagate 2TB 6Gb/s SAS Enterprise Drive， sustained data rate up to
: 0.15GB/s，提高才50%。
: HP SSD IO Accelerator 能达到0.8GB/s，但容量才320G.
|
T*U
发帖数: 22634 | 3 目前raid0最大传输速率是多少？看了一下也就0.1GB/s
【在 t**t 的大作中提到】
: Raid0不就是解决这个问题的吗？
:
: access
: 论。
|
t**t
发帖数: 27760 | 4 0.1GB/s，不过100MB/s，现在是个3.5寸硬盘都可以达到这个速度。
Raid0，基本是n块硬盘就能达到n倍。0.1GB/s不是小轻松。
我倒是想知道你这10T数据是怎么存储的。
【在 T*U 的大作中提到】
: 目前raid0最大传输速率是多少？看了一下也就0.1GB/s
|
T*U
发帖数: 22634 | 5 我倒是想知道你这10T数据是怎么存储的
怎么存储这具体是什么意思？
【在 t**t 的大作中提到】
: 0.1GB/s，不过100MB/s，现在是个3.5寸硬盘都可以达到这个速度。
: Raid0，基本是n块硬盘就能达到n倍。0.1GB/s不是小轻松。
: 我倒是想知道你这10T数据是怎么存储的。
|
t**t
发帖数: 27760 | 6 就是说你根本不存这些数据？
【在 T*U 的大作中提到】
: 我倒是想知道你这10T数据是怎么存储的
: 怎么存储这具体是什么意思？
|
T*U
发帖数: 22634 | 7 存啊，你是问文件太大了，怎么存的？还是问storage server是怎么配置的？
【在 t**t 的大作中提到】
: 就是说你根本不存这些数据？
|
t**t
发帖数: 27760 | 8 是啊
每天10T啊，现在最大的硬盘是2T，一天就5个硬盘，你怎么存的？
你必须要 存储服务器才行，现在存储服务器怎么可能才100MB/s的速度呢。
【在 T*U 的大作中提到】
: 存啊，你是问文件太大了，怎么存的？还是问storage server是怎么配置的？
|
T*U
发帖数: 22634 | 9 good question
有事出去一下，回来再ZK聊。
【在 t**t 的大作中提到】
: 是啊
: 每天10T啊，现在最大的硬盘是2T，一天就5个硬盘，你怎么存的？
: 你必须要 存储服务器才行，现在存储服务器怎么可能才100MB/s的速度呢。
|
a*****t
发帖数: 184 | 10 钱的问题不用考虑的话
你可以看看EMC做的SSD的SAN，平台名字叫Symmetrix DMX
HITACHI也做，但是市场份额没有EMC大了
【在 T*U 的大作中提到】
: 做模拟，程序产生的数据巨大，基本是写操作，比如一天10TB，运行要好几周。
: 10TB一天好像是我们现有系统的瓶颈，平均下来也就0.1GB/s，所以有可能更高。
: 什么样的硬盘配置大概能满足这样的要求，钱先不考虑，看看有什么选择没，
: 包括什么公司生产的机器能允许这样的硬盘配置？
: 目前能找到的就15KRPM SAS drive和SSD，因为是考虑硬盘的transfer rate
: 不是access rate，考虑SSD不是很经济，而且单个硬盘容量比较小。不过不考虑钱，
: 不妨碍技术讨论。
: 比如Seagate 2TB 6Gb/s SAS Enterprise Drive， sustained data rate up to
: 0.15GB/s，提高才50%。
: HP SSD IO Accelerator 能达到0.8GB/s，但容量才320G.
|
