Fluentd是一个收集日志文件的开源软件,目前提供数百个插件可用于存储大数据用于日志搜索,数据分析和存储。
Fluentd适用于以下场景。
收集多台服务器的访问日志进行可视化...
fluentd 大数据采集平台
在大数据采集平台中,有这样一个特殊的平台,它的各部分均是可定制化的,你可以通过简单的配置,将日志收集到任何地方。这是一个目前非常火热的大数据采集平台,被众多企业所应用,所以本期就为大家介绍这个特殊的平...
FastDFS动态添加组(卷)(4)
-- 可以随时动态增加一个组(卷) 为FastDFS集群的容量扩容 新组的容量会叠加 相当于与原来的组做了raid0
服务器角色
192.168.5.231 tracker +...
FastDFS多tracker配置(3)
-- tracker 所有服务器都是对等的,可以根据服务器的压力情况随时增加或减少。
服务器角色
192.168.5.231 tracker + nginx
192.168.5.232...
FastDFS+Nginx实现http协议下载(2)
-- nginx结合 fastdfs-nginx-module插件去实现http协议下载 在所有storage节点和tracker节点都需要安装nginx
原理介绍
1. stor...
FastDFS 部署(1)
FastDFS
-- 开源的分布式文件系统 由阿里巴巴开发
工作原理
1. FastDFS服务端有2个角色 分别是tracker(跟踪器(或说是调度器会更合适)) 和 storage...
MySQL分区表和HBase永结连理
啰哩八嗦
时常都会有人问MySQL分区表要如何使用,MySQL分区表的和Oracle的差远了,该不该用MySQL分区表。其实该不该用,我也不能给予很好的建议。还是那句话,觉得适合自己才是最好的。觉得...
物品推荐-Pandas-Python数据分析(22)
数据
具体数据和代码在网盘:链接: https://pan.baidu.com/s/1qYyAyvi密码: rnbj
相关文件: 01_user_goods_score.data。
数...
物品推荐-MRJob-Python数据分析(21)
数据
具体数据和代码在网盘:链接: https://pan.baidu.com/s/1qYyAyvi密码: rnbj
相关文件: 01_user_goods_score.data。
数...
riak中的CAP理论
在 Riak 这样的分布式key-value数据库中,CAP理论是怎么起作用的。
Nodes/Writes/Reads
首先还是让我们来明确几个概念。
N odes
需要"最终"包含正...
Riak分布式数据库模型
Riak 是什么
Riak 是一个 erlang 开发的开源的分布式 key-value 数据库,
在 High Availability, Fault Tolerance, Scalabilit...
elasticsearch 安装 ik 中文分词
首先要安装java 和 elasticsearch,相关步骤参见之前文章。
1. 安装maven
# wget -c http://mirror.cc.columbia.edu/pub/softw...
ELK(Elasticsearch + Logstash + Kibana) 日志分析平台
Elasticsearch + Logstash + Kibana(ELK)是一套开源的日志管理方案,分析网站的访问情况时我们一般会借助Google/百度/CNZZ等方式嵌入JS做...
hadoop家族介绍
Apache Hadoop是一款支持数据密集型分布式应用并以Apache 2.0许可协议发布的开源软件框架。它支持在商品硬件构建的大型集群上运行的应用程序。Hadoop是根据Google公司发表的Ma...
FastDFS 使用经验分享
经验一:FastDFS文件下载恢复原始文件名
应用背景
文件被上传到FastDFS后Storage服务端将返回的文件索引(FID),其中文件名是根据FastDFS自定义规则重新生成的,而不是原始文...