由买买提看人间百态

topics

全部话题 - 话题: kafka
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)
s******r
发帖数: 5309
1
Detention centers for migrant families are like ‘summer camp,’ Trump
official tells senators
Trump administration officials mounted a fierce defense Tuesday of the
controversial family separation policy at the border, defending sites as “
more like a summer camp” than holding facilities, and arguing that the
detention system simply was not set up to facilitate court-ordered reunions
easily.
“I’m very comfortable with the level of service and protection that is
being provided,” top Immigration an... 阅读全帖
g******t
发帖数: 11249
2
来自主题: Military版 - 刚跳了,给大家介绍一下
【 以下文字转载自 JobHunting 讨论区 】
发信人: swjtuer (码农的小船说翻就翻), 信区: JobHunting
标 题: 刚跳了,给大家介绍一下
发信站: BBS 未名空间站 (Fri Aug 30 01:48:47 2019, 美东)
新公司是个startup,在山景城,离101的路口很近,交通便利,离狗家非常近,俺就是
中午说有事,开车几分钟就去的onsite
不是doordash,俺们不送外卖。虽然不送外卖,但提供中午和晚上中餐外卖,而且工作
时也可以讲中文,毫无违和感
想去startup又不愿意天天往三番跑的同学,完全应该考虑
公司主要做大数据ML,tech stack涉及你能想到的开源项目,spark, flink, kafka,
cassandra, tensor flow, docker, kubernetes, prometheus等等,时间紧任务多,
保证人人有机会学新技术,从此职业生涯步入快车道,一年半载就能成为技术大拿
本司在高速成长阶段,热烈欢迎热爱学习的大厂码农投条,与其在大厂当个可有可无的
螺丝钉,天天在浪费青春,慢慢变成老青蛙,... 阅读全帖
S***e
发帖数: 2072
3
来自主题: RuralChina版 - [毕业往事征文]他们和我
基础课我在国内还真上过,就是alice & bob。。。在美国倒真不大接触security
平心而论,征文首先是为了伪币。。汗,不关注伪币好久了,回忆这几位老师--情谊
是真实得没错,回忆他们令我愉快,不过写得就比较挫了,本意希望有所变化,alice&
bob也算一种有意识得试验;当然和kafka写墓碑上得名字K那种判若云泥。turns out,
哈哈,还是邯郸学步。whatever,几位老师做过得事情或许平常,仿佛清早得露珠,经
不起微风晨曦,转瞬即逝,然而那明朗得片刻,我还是贪婪得常常拿出来摩挲。:D
哎,伪币也木有太大意思,还是老实干活要紧啊~~~ :D
P********d
发帖数: 53
4
公司位于加州湾区redwood city,现在有5个人。现在进去股份还是不错的,薪水也可
以给到市场价。工作描述见下。如感兴趣,请先站内联系吧,谢谢。
We're working to change how companies utilize data for mobile apps. You
might know our founding team from popular social and mobile games that
scaled to 80M monthly active unique users, an $80M annual revenue run rate
and was the #1 Top grossing app in iOS and Android.
What's in it for you?
• Competitive salary
• Meaningful Equity
• Full benefits (medical, dental, vision)
In this senior role, you will b... 阅读全帖
k********o
发帖数: 236
5
来自主题: Classified版 - Full time: Java Developer
Java backend Developer
Job Description
Development of network facing interfaces and value-added processing of
collected data. Feature and platform work including fast methods of data
movement for streaming as well as other traditional models of data transfer.
Design, code, test, and support such functions for both waterfall and
Agile projects.
Required Skill Set
Java, mutlithreading, Perl, Shell, XML, XSLT, JSON, secure file transfer (e.
g., SSH, SCP), Linux, network interfaces
Desired Skil... 阅读全帖
k********o
发帖数: 236
6
来自主题: Classified版 - Full time: Java Developer (转载)
【 以下文字转载自 NewJersey 讨论区 】
发信人: kittyhello (HelloKitty), 信区: NewJersey
标 题: Full time: Java Developer
发信站: BBS 未名空间站 (Tue Feb 10 14:35:16 2015, 美东)
Java backend Developer
Job Description
Development of network facing interfaces and value-added processing of
collected data. Feature and platform work including fast methods of data
movement for streaming as well as other traditional models of data transfer.
Design, code, test, and support such functions for both waterfall and
Agile projects.
R... 阅读全帖
m********u
发帖数: 3942
7
JD只作为参考哈~ 有四年左右经验就差不多了,主要的要求就是backend和cloud的经验
,有兴趣进一步了解的欢迎站内或者发邮件联系 [email protected]
Software Architect Engineer
Our Client: Our client is one of the most known consumer electronic brands
around the world. The R&D lab in Bellevue owns advanced technology
collaboration with wireless carriers in the broad communication, computing,
and entertainment domains covering technologies such as mobile wireless, big
data, AR/VR, and AI. The lab is also responsible for carrier technical
requirement a... 阅读全帖

发帖数: 1
8
来自主题: Classified版 - 西雅图招Engineer,待遇好
Location: Bellevue, WA (no remote option!!)
Job Description:
This is a technical position in cutting-edge startup-like small team
developing fundamental-research level technologies for NFV, SDN, and cloud (
OpenStack). Our mission is to revolutionize the telecom industry. We are
looking for a DevOps/Test engineer with a hacker soul who loves to explore
new technologies. Someone who can understand the customer point of view and
help us drive product quality to the max. We are looking for a self-... 阅读全帖

发帖数: 1
9
来自主题: Classified版 - 招Senior data engineer
Company: Okta
Location: SF or San Jose
如果感兴趣,请发简历到 [email protected]
https://www.okta.com/company/careers/ga/senior-data-engineer--983309/
Senior Data Engineer
Position Description:
We are looking for an exceptional Senior Data Engineer who is responsible
for designing and developing robust, scalable solutions for large-scale data
infrastructure in a fast-paced agile environment. You will be encouraged to
initiate new projects to collect, store, and analyze data and to partner
with analysts... 阅读全帖
j*********r
发帖数: 24733
10
哎, 说几句吧, TA2020 4欧22W就有10%的失真了, 8欧13W有10%的失真.
http://www.kafka.elektroda.eu/pdf/tripath/TA2020.pdf
j*********r
发帖数: 24733
11
哎, 说几句吧, TA2020 4欧22W就有10%的失真了, 8欧13W有10%的失真.
http://www.kafka.elektroda.eu/pdf/tripath/TA2020.pdf
d********w
发帖数: 363
12
最近几个月收到不少同胞来信,我也尽力去回复和refer,跟大家说明一些情况
1. 如果最近半年已经在网站上投了的朋友,一般不能再去refer了,会纪录下来,如果
你的背景不错,会有HR follow up.
2. 如果你觉得编程技术能力足够,投了没有效果,也可以给我些详细资料,比如一段
英文介绍,我再跟hr说明,但不能乱用。
3. 由于我投了不少,本人影响力就会下降,下面我也要把质量关:我们希望你是 对
Java很熟练,对某个专业领域有一些成绩:数据挖掘,大数据分析,分布式系统,算法
,快速coding。不可能都具备了,只要有一个不错的就好。
4. 招聘职位; APPLICATION ENGINEER需求最大,做产品,就是其他公司的 SDE,
system&infra engineer需要很多年有经验的,data scientist, mobile,SE in test
需要相关背景,大体上还是application engineer容易。
5. 候选人条件入选可能大的
一线公司实习或者工作经验 >1y(来源上来看最近很多Amazon,M$, Google, FB,
Yahoo... 阅读全帖
d********w
发帖数: 363
13
大家好,
目前Linkedin还是在高速上升期,对员工待遇算是很好的,提供free food,给的
股票也比较慷慨给力,做的事情也挺有影响力,用数据来驱动,很多新的项目,开源了
很多,今年也是大力在招聘,去年底研发部门大概1000,今年应该要double。主要还是
推荐Engineer,工作地点Mountain view/New York/SF, 其他职位感兴趣的也可以联系。
邮箱请发到:d********[email protected]
一些招聘JD:
http://www.linkedin.com/company/1337/ (大家看到1337熟悉吗:)
http://www.linkedin.com/jobs?viewJob=&jobId=6541655
http://www.linkedin.com/jobs?viewJob=&jobId=5080591
http://www.linkedin.com/jobs?viewJob=&jobId=4861300
注:不建议直接网站投,如果投了我再refer系统里面就显示已经存在,
而那时候有可能你连简历关都没过。
有用的有趣的:
历史介绍 h... 阅读全帖
d********w
发帖数: 363
14
最近几个月收到不少同胞来信,我也尽力去回复和refer,跟大家说明一些情况
1. 如果最近半年已经在网站上投了的朋友,一般不能再去refer了,会纪录下来,如果
你的背景不错,会有HR follow up.
2. 如果你觉得编程技术能力足够,投了没有效果,也可以给我些详细资料,比如一段
英文介绍,我再跟hr说明,但不能乱用。
3. 由于我投了不少,本人影响力就会下降,下面我也要把质量关:我们希望你是 对
Java很熟练,对某个专业领域有一些成绩:数据挖掘,大数据分析,分布式系统,算法
,快速coding。不可能都具备了,只要有一个不错的就好。
4. 招聘职位; APPLICATION ENGINEER需求最大,做产品,就是其他公司的 SDE,
system&infra engineer需要很多年有经验的,data scientist, mobile,SE in test
需要相关背景,大体上还是application engineer容易。
5. 候选人条件入选可能大的
一线公司实习或者工作经验 >1y(来源上来看最近很多Amazon,M$, Google, FB,
Yahoo... 阅读全帖
j********x
发帖数: 2330
15
来自主题: JobHunting版 - 新鲜的T电面题
补两道
一面
最长回文,只要求实现N^2
online stream 最长回文,记录最右端在目前字符串最右端的所有回文,依次扩展
讨论大数据处理中应该用什么system,考虑storm, mapreduce, kafka
最后一题问给定一个queue,两个接口put(int), findSum(T), 找出当前时刻结束的长
度为T(T有给定的最大值)的时间窗口内的值的总和,多线程;按每秒的边界组成子区
间,put 更新最右端区间,findSum顺序查找
二面
LRU cache,考虑实现get(key)的接口如何处理cache miss
Linux System call,write(file descriptor)从invoke到return发生了什么
d**********r
发帖数: 4
16
来自主题: JobHunting版 - 新鲜的T电面题
所以说一面果然是三道题吗
这是面的什么组?题目就假设被面者熟悉storm, mapreduce, kafka等系统。。。
r****s
发帖数: 1025
17
来自主题: JobHunting版 - 我也来说说烙印的事吧
和不少烙印共事过,有些很差,有些很不错,我现在还在linked in上endorse他们。
如果你是个美国人manager,手里有一个很tough的项目,关系到自己的生死安危...ok,
首先不能交给白人,美国的多方面全面发展乐趣式教学只重视演讲不重视数学的k12+
college教育已经毁了整整两代人,你只要看过他们做出来的东西,都不能想象居然能
放到production上,而且还慢得要死,还牛逼,还敢跟你吵起来,你还未必能辩得过这
帮从小耍嘴皮子的东西。算了,别自找麻烦了。
交给老中?感觉不太好,首先语言上就不同,这帮人和老白是两个极端,一个说起来滔
滔不绝,一个根本不说话,或者说的broken english你都不知道怎么断句。另外这个中
国是属于敌对国家,这个得放一放。
这样,烙印们就coming to the rescue。首先这帮人的数学教育和逻辑水平和老白不在
一个层次上,能干得下这个活,然后能说会道,没有语言障碍,虽说干活慢,但终究还
能干完了。也不是个个项目都搞砸。而且人还多,便宜,ICC大量地从印度贩人过来,
10个人干不完的活,那就翻一倍,20个人,反正便宜。就他... 阅读全帖
l*****t
发帖数: 2019
18
来自主题: JobHunting版 - 问个面经里的题
LinkedIn的题目?越看越像Kafka.
r****s
发帖数: 1025
19
omfg, 少侠,你就不能想想办法?
比如那个每10秒钟的thread,读完数据之后你就不能扔到Kafka里面按时间查询?或者随
便一个数据库Mongo之类的都可以。对不对?
sorting on-the-fly是一个very bad idea,注意为什么那个10秒的thread要把数据结构
抄一遍下来,就是因为如果你有几千个url,每秒有几千个点击进来(比如Amazon),你
不可以做logN的insertion,只能做constant time的hash.
r****s
发帖数: 1025
20
有人有任务?
其实烙印抱团老中单打独斗之类的“传奇”没那么夸张,烙印大多数都是印度的本科(
这些鸡巴本科的水平估计就和国内大专一类,有些根本就是三年制),加上国家太差,
水平还得降一个档次,算是国内计算机中专出来的吧。然后这些low selfesteem的货色
被ICC贩到美国来做blue colar,唯一的依靠就是英语,然后就是同乡互相照应了,老
乡见老乡,两眼泪汪汪。三哥们到美国,进了ICC,就像一群群的老鼠过河,载沉载浮
,大多数人belly up,只有一部分人上了岸。大家看看绿卡和h1的比例就知道了。
至于烙印把美国蛀空的问题,大家没必要为美国着急,老美眼睛一瞪,交给印度人,总
好过交给中国人吧?烙印好歹是来美国参加资本主义建设的,哭着喊着要加入美国国籍
。这中国人我就拿不准了,这刁总上台整天制度自信道路自信的,啥意思啊?明摆着要
颠覆资本主义专政的政治制度。我每年都抓几个中国间谍,看看你还敢用中国人?
至于不能在美国拿h1就嚷嚷着中国要亡国的,我劝你看看英德意日这些老牌法西斯,按
h1比例,这些国家的公民应该到经济第一大国印度去申请工作签证了。
好吧,废话少说,下面是一个清单... 阅读全帖
y*c
发帖数: 904
21
来自主题: JobHunting版 - L家前辈请看选组问题

终于看到牛魔王的回复了:)激动
现在给的不是sr. 准备negotiate一下。感觉做data infrastructure的很牛,kafka,
voldemort什么的。
f********l
发帖数: 49
22
Job description如下,有兴趣的同胞可以把简历发我,我的邮箱是cantalise@gmail.
com,背景合适的本人将大力推荐。
Job description for Python Sr. Software Developer Role : ( note : its okay
if they have done most of their development in Java / C++ , but should have
done at least 2 years in Python)
- atleast 8 years of software development experience building complex multi-
tier IT applications
- Skills : Python, Flask, Django, REST API, No SQL( Cassandra, MongoDB,etc)
, Messaging Bus (Active MQ, RabbitMQ, Kafka, etc), Web services, HTML5... 阅读全帖
p*****2
发帖数: 21240
23
感觉wwzz已经是expert了
z****e
发帖数: 54598
24
现在版本号还在0.8,等项目毕业了之后再说了
你们跟wwzz如果有什么心得,记得分享
我们对messaging的需求还是有的
w**z
发帖数: 8232
25
没有啦,就是过了下doc, 写了个Java consumer, 现在的项目离上线还有段时间。 感
觉不错,比rabbit mq 强, throughput 大。 和Cassandra有点象, sequential
writes to disk. 而且support multiple consumers on the same queue. zookeeper
store each consumer(group) offset. unlike rabbitmq which keeps state for
each msg.comes with storm consumer. 但 scala 不好懂。
p*****2
发帖数: 21240
26

嗯。我们这里都是hbase。大牛你们公司也用storm吗?
现在好难找到用akka的范例呀。
w**z
发帖数: 8232
27
就做了个prototype. scala 不懂。
w**z
发帖数: 8232
28
capture API log. we try yo log every API invocation. it can be consumed by
storm, hadoop or fraud detection module.
s********r
发帖数: 2308
29
大牛说说storm在实时处理log上的应用吧。
我们现在的系统是hadoop做long term storage and BI, 实时处理还是靠appliance里
的in-memory处理。Storm的话,怎么样来handle大概10TB/day or 150k EPS的吞吐。有
没有可能能不能把传统的realtime monitoring和后期的
BI一起扛起来?
z****e
发帖数: 54598
30
能aop不?
我现在用aop+cassandra用得蛮好的
就怕不能aop,那样代码混在一起,就很痛苦了
h*****a
发帖数: 1718
31
L的Kafka相当不错。Rest.li也还可以。
d***n
发帖数: 832
32
Kafka是不错
已经看了它的design doc
将来面试时用得上
w**z
发帖数: 8232
33
Kafka is really nice 还能顺便了解一下Scala.
s*****r
发帖数: 43070
34
还有Kafka和Hadoop地借口叫camus,这些玩意都要学啊
p*****2
发帖数: 21240
35
这些message queue主要流行的都有哪些呀?都什么特点?
z****e
发帖数: 54598
36
不知道,我对mq没有太多经验
p*****2
发帖数: 21240
37

那你们backend都是service吗?
z****e
发帖数: 54598
38
messaging部分用jms
p*****2
发帖数: 21240
39

一般来说怎么考虑用service还是mq?
s*****r
发帖数: 43070
40
卡夫卡不是message queue,应该算tracking system
z****e
发帖数: 54598
41
其实都是service
如果你只是用来传递message的话
随便上哪个都好,这个我觉得wwzz的很多经验可以直接参考
它不是正在用这些么?
p*****2
发帖数: 21240
42

大牛说说message queue最流行的都有哪些,有分类吗?各有什么特点呢?
s*****r
发帖数: 43070
43
当然可以,不过设计理念确实不是mq,个人感觉latency过大
p*****2
发帖数: 21240
44

latency大概什么情况呀?是因为什么造成的呢?
s*****r
发帖数: 43070
45
里面有很多buffer,适合复杂大型系统tracking,数据量很大的那种。想搞成MQ,估计
要把各种buffer去了
w**z
发帖数: 8232
46
我们用mq, 完全是 async, non mission ctitical, latency 不是 issue,只要
reliable 就行。
s*****r
发帖数: 43070
47
他的优势就是数据量大和可靠性,牺牲了一些速度
w**z
发帖数: 8232
48
consumer group offset is in zookeeper, each consumer group can have multiple
consumers.
msgs are persisted for a configurable period of time.
p*****2
发帖数: 21240
49

multiple
多谢大牛
p*****2
发帖数: 21240
50

看大牛说的。几个月之前我还在用C呢。
首页 上页 1 2 3 4 5 6 7 8 9 10 下页 末页 (共10页)