由买买提看人间百态

topics

全部话题 - 话题: gfs
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)
i***r
发帖数: 536
1
一个HD800就奔1500去了,2000怎么搞全套?GFS不知道DS的苦,站着说话不腰痛啊。

★ 发自iPhone App: ChineseWeb 8.2.2
w**t
发帖数: 1037
2
都说了不要认真, 扣字眼就没意思拉。 就那意思。大家都懂的。
真喜欢音乐, 想想看现场音乐会要多少钱。
当然入手的话还是要等个稍微好点的价格。
我也非GFS。
p*******m
发帖数: 20761
3
来自主题: HiFi版 - 有人知道incus gfs-6音箱吗
google说Pinnacle造的
免费的 音质还不错
s**********9
发帖数: 1238
4
来自主题: JobHunting版 - 哪位筒子在微软工作?有事请教!
刚接到secheduler通知,可能一周后去MS的GFS部门面试一个网络工程师的职位。
这里应该不少筒子是MS的人吧?能给个电话号码,我打来聊聊?
万分感谢!
我现在LOS ANGELES!
S*******h
发帖数: 7021
5
来自主题: JobHunting版 - 哪位筒子在微软工作?有事请教!
GFS group is laying out backend infrastructure, and data center for MS's
online service division- the group run by Qi Lu, providing MSN, AdCenter,
cloud computing, and Bing services.
As for the network engineer role, I have no ideas what they are looking for.
I guess they are looking for someone with Windows server, IIS, Active
Directory knowledge.
s**********9
发帖数: 1238
6
来自主题: JobHunting版 - 哪位筒子在微软工作?有事请教!

for.
GFS似乎要整合各个BRANCH的网络,确实在找网工。我也是猎头介绍的。
呵呵,我也认为我不适合的,PHONEINTERVIEW的时候我都说了,我不是软工。。。他们
说没关系,就是要找网络的,估计可能要DATA CENTER的LOAD BALANCE吧
请问QI LU是谁啊?看名字很中国。。。。我对MS没啥了解,本来就没打算去APPLY的
s**********9
发帖数: 1238
7
来自主题: JobHunting版 - 哪位筒子在微软工作?有事请教!
有哪位筒子有去面GFS网工的经验啊?说说吧!谢谢了
s**********9
发帖数: 1238
8
来自主题: JobHunting版 - 我在微软做interviewer的经验
请问GFS的网络工程师职位面试一般咋面?
下周应该有个ONSITE在MSFT,心里没底啊!
M7
发帖数: 219
9
来自主题: JobHunting版 - A和M offer求助
how about GFS?
r********3
发帖数: 2998
10
那你知道Google真的优势是在于Map-Reduce的并行计算和存储系统,GFS这些不?
Google那种级别的海量存储,关键在于存储I/O,进程调度这些的优化。至于实际的算
法,用来用去都是O(n),实际差别太大了。
学校里面研究算法分析,只看什么O(n),O(nlogn),O(n^2),和工业界比起来。太native
了,太simple了。
更何况,同样一个O(n)的算法,能够在内存,还是外存实现,千差万别。你不会不知道
硬盘的速度比内存慢1000倍吧。还有,你访问数据的顺序,周期,对你的算法影响也很
大。你知道为什么CPU总线速度,CPU的L2 Cache那么重要?那才是决定你的计算速度的
优势,不是说你写几页纸,证明你的算法是一个O(N),你就牛了。

(
r********3
发帖数: 2998
11
那么GFS和bigTable呢?
s*******f
发帖数: 1114
12
来自主题: JobHunting版 - 问个google面试题
以菜鸟的经验,读完G三篇(GFS,BIGtable,mapreduce)之后,你的回答能从40分提高
到70分。

function
userId,
w****o
发帖数: 2260
13
来自主题: JobHunting版 - 问个google面试题
什么是 GFS?
y**********u
发帖数: 6366
14
来自主题: JobHunting版 - 问个google面试题
google file system
因为gfs只有single master node,所以google早就打算重写了

提高
s*******f
发帖数: 1114
15
来自主题: JobHunting版 - 问个google面试题
u can check Amazon dynamo, p2p distributed system, more reliable, but not as
efficient as gfs, i think.
y*******g
发帖数: 6599
16
来自主题: JobHunting版 - guangyi的面经和总结
我觉得google的那几篇paper是经典,gfs,map-reduce , bigtable
y*******g
发帖数: 6599
17
来自主题: JobHunting版 - guangyi的面经和总结
我觉得google的那几篇paper是经典,gfs,map-reduce , bigtable
d********w
发帖数: 363
18
来自主题: JobHunting版 - hadoop面试和学习总结
随着大数据的盛行,Hadoop也流行起来。我面过很多hadoop相关的公司,包括一线公司
(hadoop就是公司主要产品)如cloudera, hortonworks, mapr, teradata, greenplum,
二线的(使用hadoop):apple, expedia,comScore. 当然还有很多公司facebook,
twitter, baidu, 感觉这块还是机会挺多的,我就把我知道的一些给大家分享一下。
书籍和paper
: 里面内容非常好,既有高屋建瓴,又有微观把握,
比如mapreduce各个子阶段,经常问道join在里面也有代码实现,
google的三量马车,GFS, MapReduce, BigTable
入门:
知道MapReduce大致流程,map, shuffle, reduce
知道combiner, partition作用,设置compression
搭建hadoop集群,master/slave 都运行那些服务
HDFS,replica如何定位
版本0.20.2->0.20.203->... 阅读全帖
d********w
发帖数: 363
19
来自主题: JobHunting版 - hadoop面试和学习总结
随着大数据的盛行,Hadoop也流行起来。我面过很多hadoop相关的公司,包括一线公司
(hadoop就是公司主要产品)如cloudera, hortonworks, mapr, teradata, greenplum,
二线的(使用hadoop):apple, expedia,comScore. 当然还有很多公司facebook,
twitter, baidu, 感觉这块还是机会挺多的,我就把我知道的一些给大家分享一下。
书籍和paper
: 里面内容非常好,既有高屋建瓴,又有微观把握,
比如mapreduce各个子阶段,经常问道join在里面也有代码实现,
google的三量马车,GFS, MapReduce, BigTable
入门:
知道MapReduce大致流程,map, shuffle, reduce
知道combiner, partition作用,设置compression
搭建hadoop集群,master/slave 都运行那些服务
HDFS,replica如何定位
版本0.20.2->0.20.203->... 阅读全帖
d********w
发帖数: 363
20
来自主题: JobHunting版 - 我的面试高频题
coding:
- JOIN: nested join, hash join, sort-merge join
- Number: Fibonacci, prime,随机取文件某一行
- String: strstr, wordcount
- Tree: height, lca, balance tree
- Heap: 查找最大的k个数
- DP: 最大连续子串和
- array: find a key in rotated array, 去除重复字符
- linkedlist: 是否有环,插入结点,删除重复结点
- 递归回溯:变化很多,这方面需要大量练习
知识性:
多线程,mutex/semaphore
java GC
C++ virtual, smart pointer
regex使用
数据库:知道btree, 索引
search engine: 倒排表,拉链,稀疏索引,空间向量模型,tf*idf,
large scale data: hash, consistent hash, bloom filter, bitmap, 外排序,
partition
分布式:CAP理论,gos... 阅读全帖
d********w
发帖数: 363
21
来自主题: JobHunting版 - 我的面试高频题
coding:
- JOIN: nested join, hash join, sort-merge join
- Number: Fibonacci, prime,随机取文件某一行
- String: strstr, wordcount
- Tree: height, lca, balance tree
- Heap: 查找最大的k个数
- DP: 最大连续子串和
- array: find a key in rotated array, 去除重复字符
- linkedlist: 是否有环,插入结点,删除重复结点
- 递归回溯:变化很多,这方面需要大量练习
知识性:
多线程,mutex/semaphore
java GC
C++ virtual, smart pointer
regex使用
数据库:知道btree, 索引
search engine: 倒排表,拉链,稀疏索引,空间向量模型,tf*idf,
large scale data: hash, consistent hash, bloom filter, bitmap, 外排序,
partition
分布式:CAP理论,gos... 阅读全帖
h**********l
发帖数: 6342
22
来自主题: JobHunting版 - 求解 system design题
google file system
用一个变量存上次写的东西就好了,其他 disk failure用gfs可以自己弄
c*******1
发帖数: 589
23
做storage 领域的internal file system有 前途么? 不是gfs那种上层的分布式文件系
统, 是single node file system, 类似ext3, ext4, zfs 这种. 版上有人搞这个么?
能说说前途不? 谢谢了.
y**********u
发帖数: 6366
24
来自主题: JobHunting版 - G電面 大家參詳一下怎麼個狀況
只说n台机器啊
可能就和gfs那样的烂机器
如果server的话,nonblocking-call+bypass user buffer可以吗?比如
sendfile

机器
v***a
发帖数: 365
25
来自主题: JobHunting版 - G電面 大家參詳一下怎麼個狀況
啊?GFS的机器烂?那他们网卡什么级别的
g*********e
发帖数: 14401
26
后端就是提取数据这种吗?
我的理解是后端是做优化,整合,研究怎么提升效率速度。比如aws, gfs这种。就像二
爷说的那样。
偶贴一段linkedin上一个人的summary大家帮忙看看这是哪种后端。如果是前者貌似也
没啥意思。我只写C++对这些不太懂。
Consumer and enterprise software professional with expertise in Java,
Webservices, JMS, JSP, JBOSS, Cache, Flex, Database technologies, ORM, ETL
Tools and Oracle Applications Development Tools.
Techno-Functional experience in Customer Experience Management, Oracle
Applications, Supply Chain Management, Procurement, Order Management,
Document management and Product lifec... 阅读全帖
m*********a
发帖数: 47
27
来自主题: JobHunting版 - 详解知名网站的技术发展历程(zz)
(小道消息: Google内部已完成了GFS、MapReduce、BigTable的替换)
这个是什么意思?
是说替换掉还是替换成?
Z*****Z
发帖数: 723
c****e
发帖数: 9482
29
来自主题: JobHunting版 - (Updated) CS opening @ Santa Clara, CA
Updated on Aug. 23rd : 这个HPC的Engineer位置还没招到人。。。 :S 要求可以适
当放宽。
此外一个Product Engineer的位置也急需fill (主要是linux下的perl scripting).
也一并附加在这里。 谢谢!
1. High Performance Computing Engineer
My company currently has a opening for high performance computing Engineer.
This position is located at the headquarter at Santa Clara, CA. Please PM me
for details if you are interested, Thanks!
Quick summary:
It is a less senior position, so 3-5 years C++ coding experience in Unix env
and MS/PhD in CS should be good
De... 阅读全帖
y*******g
发帖数: 6599
30
来自主题: JobHunting版 - 狗 onsite 最后死在烙印上!
那要么问实际工作能遇到的?比如debug一下gfs的failure ?
d********w
发帖数: 363
31
为啥那这本书来准备面试呢?如果你没有hadoop的经验,也不用看这些的。
如果你的职位要求里面确实有hadoop,可以去检查或者搜索一下以下问题
1. mapreduce的几个阶段
2. pig, hive的大致设计和比较,(结合sql写法)
3. wordcount, terasort的mapreduce程序写法
4. hadoop在不同节点启动了那些服务
5. secondary sort, partition如何用
6. 什么是nosql,ACID跟BASE比较
7. hadoop的不足和最新改进(next generation)
8. HDFS的如何做到scalability和高可靠性
这些基本问题掌握后,可以找找资源,比如你提到那边书,GFS/MapReduce/BigTable
paper, hadoop summit 2012大会上的slides,youtube或者cloudera上面的hadoop视频
海量数据处理倒是经常会问到,比如如何在多台机器上找中位数,n个数找最大k个数,
搜索如何做索引,以前有个帖子专门总结过。
G******i
发帖数: 5226
32
来自主题: JobHunting版 - [合集] guangyi的面经和总结
☆─────────────────────────────────────☆
guangyi ( 光一) 于 (Sat Oct 29 00:10:37 2011, 美东) 提到:
**********************************
M:
phone interview (1 round):
why MS?
biggest challenge
why like coding and algorithm?
what is good code?
your longest code
biggest accomplishment
if you don't want some functions to be modified in java, what to do?
does java allow multiple inheritance?
what does synchronized keyword mean in java?
CEO wants a book, you find it in the system of a nearby bookshop. You ... 阅读全帖
j*******9
发帖数: 21
33
来自主题: JobHunting版 - 求问hadoop学习资料
先读google发表的三篇paper,关于mapreduce, gfs, bigtable
然后apache hadoop上有些documentation.
读下这本书:Hadoop: The Definitive Guide。
然后在hortonworks, cloudera上有些video,blog可以看下,了解下。
m****t
发帖数: 2329
34
来自主题: JobHunting版 - 为什么程序员社会地位不高?
硅工 里好多都是gFS的吧。难道进了字母派公司就不是码农了?
B*******1
发帖数: 2454
35
来自主题: JobHunting版 - G家 system design 和 open ended questions
话说我超过 一半的面试题都是large scale system design,可是我是完全没有这方面
背景的ee码工,就算我现在要去g的组也不需要large scale的。
我感觉准备一下差不多了:
hackie大牛的帖子
http://www.mitbbs.com/article_t/JobHunting/32134627.html
要看的paper:
1. gogole gfs
2. google map reduce
3. google bigtable
4. facebook cassandra
5.facebook hdfs
6 facebook hadoop
7 facebook hive
8 facebook hbase
9 amazon dynamo
以上paper一定要熟读,并且对比设计的不同和为什么不同,起码要理解80%里面的概念
,其实比想算法容易多了。
faceboook的tech blog
dropbox的tech blog
http://highscalability.com/
还有这个我最近发现的很有意思的,
淘宝核心系统团队博客
http://rdc... 阅读全帖
j*****y
发帖数: 1071
36
来自主题: JobHunting版 - 过两天就要 G家 onsite了
多谢:)
gfs 和 map reduce的paper下载来了,不知道好不好看, 明天看能不能把这
两篇paper 过一遍
c******3
发帖数: 60
37
来自主题: JobHunting版 - 周四要去G家onsite求祝福!
谢谢大家的bless。今天总体还是算顺利的没有见到新的算法题(庆幸?),就不贴了。
比如tree non-recursive iteration (inorder), interval merge and insert,
binary matrix coloring (0->1, 1->0 except 1s surrounded by 0s)
不过 open ended 的system design的问题一大堆,不好过关。
比如:
how would you design youtube?
do you know about GFS? what could you do to improve it? and why?
what would you improve gmail? why?
How would you design counters for youtube videos?
c******3
发帖数: 60
38
来自主题: JobHunting版 - 周四要去G家onsite求祝福!
谢谢大家的bless。今天总体还是算顺利的没有见到新的算法题(庆幸?),就不贴了。
比如tree non-recursive iteration (inorder), interval merge and insert,
binary matrix coloring (0->1, 1->0 except 1s surrounded by 0s)
不过 open ended 的system design的问题一大堆,不好过关。
比如:
how would you design youtube?
do you know about GFS? what could you do to improve it? and why?
what would you improve gmail? why?
How would you design counters for youtube videos?
s***u
发帖数: 101
39
来自主题: JobHunting版 - F,G,M offer 及 面试经历
找工作以来在这个版上获益良多,现在找工作告一段落,打算写个经历总结,算是回馈
本版,希望能对后来人有一点帮助。
背景:
本人 CS fresh PhD , 本科及硕士在国内学的是自动化,算法与编程的基础比较薄弱。
记得我来美国第一年,才见到算法导论这本书,当时惊为天书。。惊叹原来学计算机的
人是这么思考问题的,一个sorting 问题被玩出那么多花样!可见当时的孤陋寡闻。。
。 PhD的研究很偏,属于拓扑图论相关的,十分理论,所以我在整个PhD过程中,主要
写的代码来自课程项目。。
去年8月份的时候,被老板告知可以滚蛋了,因为研究的项目暂时没有看到太多的研究
前景,遂决定投身码工。。
准备与面试:
9月份正式开始准备找码工工作,经朋友介绍先看的是PIE 和 CC 150. 当时CC150的题
目,觉得挺难,而且每次看到答案解法十分优美,简短,勾起了我很大的兴趣。。.
150 前几大章看完一遍以后,当时自我感觉非常的良好,觉得算法考试也就那样嘛。正
巧,MS来校园招聘,就投了简历。M说要过一个月才能回来校园面试,这段时间我开始
做leetcode。 话说leetcode还是我们实验室的... 阅读全帖
a***o
发帖数: 1182
40
来自主题: JobHunting版 - F,G,M offer 及 面试经历
con!
那个很多interval找最多那个怎么做的?

找工作以来在这个版上获益良多,现在找工作告一段落,打算写个经历总结,算是回馈
本版,希望能对后来人有一点帮助。
背景:
本人 CS fresh PhD , 本科及硕士在国内学的是自动化,算法与编程的基础比较薄弱。
记得我来美国第一年,才见到算法导论这本书,当时惊为天书。。惊叹原来学计算机的
人是这么思考问题的,一个sorting 问题被玩出那么多花样!可见当时的孤陋寡闻。。
。 PhD的研究很偏,属于拓扑图论相关的,十分理论,所以我在整个PhD过程中,主要
写的代码来自课程项目。。
去年8月份的时候,被老板告知可以滚蛋了,因为研究的项目暂时没有看到太多的研究
前景,遂决定投身码工。。
准备与面试:
9月份正式开始准备找码工工作,经朋友介绍先看的是PIE 和 CC 150. 当时CC150的题
目,觉得挺难,而且每次看到答案解法十分优美,简短,勾起了我很大的兴趣。。.
150 前几大章看完一遍以后,当时自我感觉非常的良好,觉得算法考试也就那样嘛。正
巧,MS来校园招聘,就投了简历。M说要过一个月才能回来校园面试,这段时间我开始
... 阅读全帖
s***u
发帖数: 101
41
来自主题: JobHunting版 - F,G,M offer 及 面试经历
找工作以来在这个版上获益良多,现在找工作告一段落,打算写个经历总结,算是回馈
本版,希望能对后来人有一点帮助。
背景:
本人 CS fresh PhD , 本科及硕士在国内学的是自动化,算法与编程的基础比较薄弱。
记得我来美国第一年,才见到算法导论这本书,当时惊为天书。。惊叹原来学计算机的
人是这么思考问题的,一个sorting 问题被玩出那么多花样!可见当时的孤陋寡闻。。
。 PhD的研究很偏,属于拓扑图论相关的,十分理论,所以我在整个PhD过程中,主要
写的代码来自课程项目。。
去年8月份的时候,被老板告知可以滚蛋了,因为研究的项目暂时没有看到太多的研究
前景,遂决定投身码工。。
准备与面试:
9月份正式开始准备找码工工作,经朋友介绍先看的是PIE 和 CC 150. 当时CC150的题
目,觉得挺难,而且每次看到答案解法十分优美,简短,勾起了我很大的兴趣。。.
150 前几大章看完一遍以后,当时自我感觉非常的良好,觉得算法考试也就那样嘛。正
巧,MS来校园招聘,就投了简历。M说要过一个月才能回来校园面试,这段时间我开始
做leetcode。 话说leetcode还是我们实验室的... 阅读全帖
a***o
发帖数: 1182
42
来自主题: JobHunting版 - F,G,M offer 及 面试经历
con!
那个很多interval找最多那个怎么做的?

找工作以来在这个版上获益良多,现在找工作告一段落,打算写个经历总结,算是回馈
本版,希望能对后来人有一点帮助。
背景:
本人 CS fresh PhD , 本科及硕士在国内学的是自动化,算法与编程的基础比较薄弱。
记得我来美国第一年,才见到算法导论这本书,当时惊为天书。。惊叹原来学计算机的
人是这么思考问题的,一个sorting 问题被玩出那么多花样!可见当时的孤陋寡闻。。
。 PhD的研究很偏,属于拓扑图论相关的,十分理论,所以我在整个PhD过程中,主要
写的代码来自课程项目。。
去年8月份的时候,被老板告知可以滚蛋了,因为研究的项目暂时没有看到太多的研究
前景,遂决定投身码工。。
准备与面试:
9月份正式开始准备找码工工作,经朋友介绍先看的是PIE 和 CC 150. 当时CC150的题
目,觉得挺难,而且每次看到答案解法十分优美,简短,勾起了我很大的兴趣。。.
150 前几大章看完一遍以后,当时自我感觉非常的良好,觉得算法考试也就那样嘛。正
巧,MS来校园招聘,就投了简历。M说要过一个月才能回来校园面试,这段时间我开始
... 阅读全帖
z*********8
发帖数: 2070
43
来自主题: JobHunting版 - F,G,M offer 及 面试经历
这个能展开说说?
第二个问题是一个design 问题,一个类似
GFS的系统,问用什么数据结构描述文件名到文件存储位置之间关系 能够有效的支持查
找,删除,重命名。 我说了 hashtable 和 tree 两种方式,说了一下优劣,面试官
抓住重命名这点,问这两种结构分别如何实现重命名。
c******3
发帖数: 60
44
来自主题: JobHunting版 - 看来design题还真多!
GFS的design题不是我一个人遇到啊
m******s
发帖数: 165
45
来自主题: JobHunting版 - 看来design题还真多!
大概知道HDFS或者GFS v2的trade off就能扯了恩
c********r
发帖数: 286
46
来自主题: JobHunting版 - 看来design题还真多!
请问什么事GFS design题
y***u
发帖数: 205
47
GFS BigTable Borg 这类的infrastrcture呢?
p*****2
发帖数: 21240
48

GFS
看了一下,其实system design呢,其实是我很长时间以前就喜欢的东西。
i**d
发帖数: 357
49
哪三架?
spanner, bigtable, gfs?
p*****2
发帖数: 21240
50
来自主题: JobHunting版 - System design总结
1. System design 是一个很大的话题,大的System一般都是由Architect来设计的,因
此就算工作过若干年的也未必有很丰富的system design的经验。如果想对system
design有一个初步了解,我发现这个文章不错,http://www.palantir.com/2011/10/how-to-rock-a-systems-design-interview/
2. 因为我们jobhunting的主要目标集中在了FLGT等互联网公司,因此在这个范畴里的
system design也就集中在了分布式计算和分布式存储的design上了。想对这些设计理
念有个大体的了解可以读读Google的三驾马车,GFS, MapReduce和BigTable。
3. 有大牛建议读读各个公司的engineering blogs,我觉得是非常好的建议。不但能学
习system design,面试的时候很有可能被问到相关的话题。如果你准备过,不但能更
好的回答问题,还能带给面试官好感,从而产生所谓的化学反应。
4. 如果想在system design上提高,则需要真正的实践。加... 阅读全帖
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)