由买买提看人间百态

topics

全部话题 - 话题: kibana
1 (共1页)

发帖数: 1
1
来自主题: Programming版 - Re: kibana dashboard 疑问,求高手支招
用kibana 制作两级的 dashboard,如果想点击第一级的dashboard 中的某一天,弹出
第二级的 dashboard,并且只显示这一天的结果。怎么实现呢?就是说怎么把day作为
参数传给第二级的 dashboard?
d*******r
发帖数: 3299
2
来自主题: Programming版 - ES怎么玩?
还在摸索中... 目前在试着当 backend 的 logging service 用, 公司没人懂这个, 希
望这项目不要夭折了.
先分享点不成熟经验吧.
主要感觉是,ES 可以配置可使用的功能太多了
querying / indexing 功能上讲,我感觉
ES >> mongo > dynamoDB (我没用过 Cassandra, 就用 dynamoDB 来比较了)
ES 内置那些 field 内的全文检索太给力,还可以配置不同的文本 analyzer,甚至有
中文的,
用来做 searching engine 都可以了.
反应速度上讲,据说是
ES < mongo ? dynamoDB
看了一堆 online posts,是不支持把 ES 当 primary DB 用的,
也就是说用 mongo/dynamoDB/Cassandra 存商业逻辑的 data,ES 存那些需要全文检索
的 (文本啊, log啊, analysis data 啊), ES 自己的定位也是 near-real-time
searching (就是存入到能 indexing,有个 delay).
ES... 阅读全帖
s******4
发帖数: 24
3
最近要做一个BI的项目,想请问大家一般用什么tech stack?我的想法是尽量leverage
现成的tool,不排除部分commercial产品,比如Jasper, tableau之类的。
我现在是用Camel收集数据以后,都放到Spark里面去算,然后扔到一个mysql里面去。
最后用community的Jasper做visualization。现在遇到的问题就是画出来的吐很丑。不
知道大家有什么更好的推荐吗?
另外,我看到有人用elastichsearch+kibana来做BI,不知道这样是否适合。我个人的感
觉是kibana比较难用,不太适合给非tech的同学们用。
请大家随便指教。
m********u
发帖数: 3942
4
公司为全球领先的信息与通信技术(ICT)解决方案供应商,薪资丰厚,工作地点Santa
Clara,CA
有兴趣的同学可以站内信或者发邮件:[email protected]/* */
Responsibilities:
• Design a comprehensive metadata support for the platform that
supports various data governance and security capabilities.
• Enhance the distributed query engine for various use cases,
especially in the area of heterogeneous data sources and cross-data-centers
query optimization.
• Develop algorithms that analyze query workload, derive common
workload ch... 阅读全帖
m********u
发帖数: 3942
5
工作地点在Santa Clara, CA
有兴趣可以站内或者发邮件联系 [email protected]/* */
Requirements:
• BS or higher degree in Computer Science or related field.
• 5+ years of software development experience, including
performance analysis.
• Strong SQL knowledge in query processing, optimization and
execution, query performance, Explain, database tooling
• Metadata, data governance, and data security a strong plus
• Extensive experience in JDBC
• Spark is a big pl... 阅读全帖
m********u
发帖数: 3942
6
工作地点Santa Clara,CA
有兴趣的同学可以站内信或者发邮件:[email protected]/* */
Responsibilities:
• Design a comprehensive metadata support for the platform that
supports various data governance and security capabilities.
• Enhance the distributed query engine for various use cases,
especially in the area of heterogeneous data sources and cross-data-centers
query optimization.
• Develop algorithms that analyze query workload, derive common
workload characteristics, generate recommend... 阅读全帖
R*****n
发帖数: 355
7
来自主题: JobMarket版 - 【内推】计算机H1B职位SQL/ETL/BI
请写明你想申请的职位, email简历至[email protected]/* */
-----------------------------------------------
1, Access/SQL
Financial/Banking in Minnetonka, MN
Our client is looking for someone that loves data! This candidate’s ideal
background for this role would be SQL, ETL, Data Warehouse, Access, and
business intelligence in their background. The client needs someone with a
change management and price improvement mindset. This person must support
best practices and will be joining a team that will con... 阅读全帖
m********u
发帖数: 3942
8
【 以下文字转载自 JobHunting 讨论区 】
发信人: missingyou (miss), 信区: JobHunting
标 题: 【工作机会】Principal Big Data Platform Engineer -- CA
发信站: BBS 未名空间站 (Wed Nov 9 13:38:11 2016, 美东)
公司为全球领先的信息与通信技术(ICT)解决方案供应商,薪资丰厚,工作地点Santa
Clara,CA
有兴趣的同学可以站内信或者发邮件:[email protected]/* */
Responsibilities:
• Design a comprehensive metadata support for the platform that
supports various data governance and security capabilities.
• Enhance the distributed query engine for various use cases,
especially in... 阅读全帖
d*******r
发帖数: 3299
9
对于分布式的backend servers,做一般性的logging,实时要求不高,要能scale out
,在logging里面搜索要方便。
请问大牛们,这2个哪个比较好。
貌似 ElasticSearch 那一套看着很完善了: logstash (JRuby) -> ElasticSearch ->
kibana (GUI)
http://www.elasticsearch.org/overview/
用的话, 不需要去折腾 Ruby gems 什么的吧,我看了下,好像不需要折腾 Ruby
ElasticSearch 这一套看官网介绍,还能跑 hadoop?
另外,ElasticSearch 公司哪些服务要收钱的?
Cassandra 的话,写效率高
请板上大牛们评比下这2个轮子哪个做一般 log 比较好
d*******r
发帖数: 3299
10
大牛所谓“准时”大概 latency 如何,
比如从开始写log,到从 elasticsearch 上可以 search 出来,到从他自带的 GUI
kibana 可以显示出来,大概多少 latency?几秒,十几秒,几十秒 或者 1 min?
我看你们 Netflix 也用
http://www.elasticsearch.org/videos/netflix-using-elasticsearch
d*******r
发帖数: 3299
11
来自主题: Programming版 - ES怎么玩?
看着好亲切,前几天也搞了个这种。
问问大牛,知道怎么定制自己的 theme 或者 外观啥的吗?
我琢磨着 kibana 是不是只能内部用,不容易做二次开发,给客户用.
c*******e
发帖数: 621
12
来自主题: Programming版 - ES怎么玩?
在它的框架下确实很难改出完全不同的外观
要么像我们这样改一点凑合着用,其实kibana本身也挺漂亮的了
要么只能动手自己写javascript,html5
btw, kibana4界面完全变了,你也可以试试
c*******e
发帖数: 621
13
来自主题: Programming版 - ES怎么玩?
看了angular 2.0心哇哇凉,完全要重新学了
kibana也是,4跟3完全不同
版本不稳定的时候,还是凑合用用得了
d*******r
发帖数: 3299
14
来自主题: Programming版 - ES怎么玩?
之前看了下 kibana, AngularJS 和 JQuery 都有用
w********m
发帖数: 1137
15
来自主题: Programming版 - 这种情况该用那种big data tool?
理论上java可以满足需求。不管多少个线程,这个是disk IO bound。SSD的max read可
以0.5GB/s。5TB的可以10秒钟处理完。
当然这个是理论的。实践中,用Elasticsearch 加 kibana 应该是比较好的解决办法。
s********k
发帖数: 6180
16
来自主题: Programming版 - 搜索 lucene 之类是不是不流行了?
现在是不是都在用elastic search?和kibana结合起来用还是挺方便的

发帖数: 1
17
来自主题: Programming版 - 搜索 lucene 之类是不是不流行了?
有postman 还需要kibana么?
s*********y
发帖数: 6151
18
来自主题: Programming版 - 搜索 lucene 之类是不是不流行了?
妈妈咪呀 Kibana可不是一个简单的dev tool
s*********y
发帖数: 6151
19
来自主题: Programming版 - 搜索 lucene 之类是不是不流行了?
内核一样 。外延的差别可大了
Solr最初是不支持JSON,不支持多node运行的 Elasticsearch 火了 Solr才逐渐跟
上的
Logstash, Kibana 这些Solr都在抄
Solr的流行度一年不如一年 。 Elasticsearch去年刚进入Top 10 DB Engine
https://db-engines.com/en/ranking_trend
s*********y
发帖数: 6151
20
来自主题: Programming版 - Re: kibana dashboard 疑问,求高手支招
你只要加一个时间的filter 把时间作为一个query传给搜索对象就可以了
d****n
发帖数: 233
21
我最近对Open Source Business Solution很感兴趣。试着搭建了一个Prototype网站:
http://pbies.cloudapp.net/kibana3
这个网站利用ElasticSearch,Logstash,Kibana三个开源项目,提供两个Dashboards
,其中一个能从Twitter用户的Tweets搜索关键字,显示hot topic以及用户地理分布信
息。
http://pbies.cloudapp.net/kibana3/index.html#/dashboard/elasticsearch/Twitter%20Live%20Dashboard
另一个Dashboard主要是能够对本站的访问情况就是实时展示: http://pbies.cloudapp.net/kibana3/index.html#/dashboard/elasticsearch/Apache%20Acess%20Log
我更感兴趣的是Live Data Stream Analysis, 比如这个视频中Databricks的Demo:
https://www.yo... 阅读全帖
d****n
发帖数: 233
22
是的,不过我到目前为止还没有找到一个带Web App的例子,个人对JavaScript不太熟
悉也没有太多时间搞Web前端。能想到的是把分析数据放到ElasticSearch中,再通过
Kibana做visualization。
1 (共1页)