0推荐
51K 浏览

记录一下互联网日志实时收集和实时计算的简单方案

作为互联网公司,网站监测日志当然是数据的最大来源。我们目前的规模也不大,每天的日志量大约1TB。后续90%以上的业务都是需要基于日志来完 成,之前,业务中对实时的要求并不高,最多也就是准实时(延...
jopen 9年前   
0推荐
77K 浏览

新浪是如何分析处理32亿条实时日志的?

我从2014年初入职新浪后就开始接触实时日志分析相关的技术,主要是ELK(Elasticsearch、Logstash、Kibana),当时是学 习+ELK优化,接一些日志,小打小闹。从2015...
f627 9年前   
日志  
0推荐
11K 浏览

提高日志质量的 5 大技巧

最近涌现出各种各样能帮助你理解日志的新工具,有类似 Scribe、Logstash 这样的开源项目,也有类似 Splunk 的预付费工具,还有托管服务如 SumoLogic 和 PaperTra...
jopen 9年前   
日志  
0推荐
16K 浏览

殷鹏翔:51信用卡的日志分析变迁史和技术细节

编者按: 51 信用卡管家是国内信用卡管理第一品牌。自 12 年创业开始,至 14年开始的“瞬时贷”上线,15年完成p2p金融信贷服务。51 信用卡 的 CTO 殷鹏翔在 UPYUN Open ...
jopen 10年前   
日志  
0推荐
15K 浏览

通用的调度框架:iquartz

通用任务调度框架iquartz提供定时任务的定制化,能够开发出特定的任务并进行调度,如数据交换、数据处理、文件上传下载等各类任务,iquartz采用类似tomcat的class加载机制,通过自定...
gx4air 10年前   
0推荐
57K 浏览

来网易运维的最佳日志实践

日志用来记录用户操作、系统运行状态等,是一个系统的重要组成部分。然而由于日志并非系统核心功能,通常情况下并不受团队的重视。在出现问题需要通过日志来定位时,才发现日志还存在很多问题。 日志记录的...
jopen 11年前   
0推荐
66K 浏览

可视化日志分析工具:glTail

GlTail.rb 是一款带有浓郁的 Geek 风格的可视化日志分析工具,它采用 Ruby 技术构建,并利用 OpenGL 图形技术进行渲染,呈现可视化的日志分析数据,以气泡数量来反映网站的访问情况。
0推荐
80K 浏览

Java快速异步日志记录框架 - Blitz4j

Blitz4j是一个构建在log4j之上的日志框架,目的是减少占用程序自身的资源。实现高度可扩展的日志记录,而不会影响应用程序的性能特性。
jopen 12年前   
0推荐
493K 浏览

开源项目之C++日志框架 Google Glog

Google Glog 是一个C++语言的应用级日志记录框架,提供了 C++ 风格的流操作和各种助手宏。
jopen 12年前   
0推荐
29K 浏览

日志工具 NSLogger

NSLogger 是一种在Mac OS X,iOS 和Andriod上都能用的日志工具,object-c专用
openkk 13年前   
0推荐
33K 浏览

HTTP请求日志查看 Glasswall

开发和测试时, 你想不想在浏览器的页面上直接看到本次http请求所产生的log4j日志? 开源项目“玻璃墙”(Glasswall)就是这样一种工具。它让你在页面上直接看到日志输出,帮你在遇到...
fmms 13年前   
0推荐
30K 浏览

分布式日志收集系统: Facebook Scribe之日志收集方案

Scribe日志收集服务器只负责收集主动写入它的日志,它本身不会去主动抓取某一个日志,所以为了把日志写入到 scribe服务器,我们必须主动向scribe服务器发送日志信息。由于scribe服务...
0推荐
43K 浏览

分布式日志收集系统:Facebook Scribe

Scribe是facebook开源的日志收集系统,在facebook内部已经得到大量的应用。 Scribe是基于一个使用非阻断C++服务器的thrift服务的实现。它能够从各种日志源上收集日志,...
0推荐
23K 浏览

分布式日志收集系统: Facebook Scribe之配置文件

其实我们研究一个开源的系统,第一步通常是先把它用起来,因为一个开源的系统能够出现在大家的面前肯定是比较出名和流行的,所有功能是比较出色的。所以我们必须很清楚的这些功能,而scribe最大的...

经验分享,提升职场影响力

投稿

热门问答

    热门文档