Amas:基于大数据平台技术开发的统一监控平台
EaconTang
基于大数据平台技术开发的统一监控平台Amas开源项目核心开发者。
GitHub ID:EaconTang
https://github.com/amas-eye/amas
Amas是什么
Amas是基于大数据平台技术开发的统一监控平台,其特点包括:
全维度监控指标,覆盖从操作系统、中间件、大数据平台(Hadoop/Spark/HBase/Kakfa等)到代码级别
可扩展、自定义的采集框架,支持不同语言(Python/Perl/Shell/...)开发的采集器
基于OpenTSDB/HBase的海量数据存储架构,可快速读写大量监控指标,满足真实生产环境
清新简约的Web界面,功能强大但简单易用
基于Python原生multiprocess和async/await实现的分布式异步告警引擎,可水平扩展系统处理能力
多渠道、可自定义的通知方式(微信/邮件/Slack/API...)
可分组聚合的告警信息,避免海量数据监控场景下的告警风暴
基于Jagger的分布式链路追踪数据提取和展示,历史事件可追溯
可对接基于机器学习的异常检测服务,落地AIOps智能运维
微服务架构,支持docker和docker-compose方式的部署 ...
技术栈
编程语言:
(Backend)Python
(Web)Javascript
Web服务:
Vue, ECharts, Webpack
Express(NodeJS)
后台服务:
HBase, OpenTSDB, MongoDB, Redis
Spark, Kafka...
Jagger, Tornado
Pandas, Scikit-learn
Docker, Swarm
服务端运行情况
Linux(内核版本2.6+)
Centos7(推荐)
Docker快速部署
目前Amas的代码已经通过DockerHub实现自动构建,推荐使用docker来快速体验:
1、安装docker
2、保存如下shell脚本并执行:
#!/usr/bin/env bash# 创建docker网络docker network create amas# 运行数据库服务# opentsdb(v2.3.0+)# mongo(v3.10.0+)# redis(v3.10.0+)docker run -d -p 4242:4242 --name opentsdb --network amas eacon/docker-opentsdbdocker run -d -p 27017:27017 --name mongo --network amas mongodocker run -d -p 6379:6379 --name redis --network amas redis# 运行采集Agent(含Agent Manager):docker run -d --name collector --network amas -p 8001:8001 eacon/argus_collector# 运行告警模块:docker run -d --name alert --network amas eacon/argus_alert# 运行统计模块:docker run -d --name statistics --network amas eacon/argus_statistics# 运行Web服务:docker run -d --name web --network amas -p 8080:8080 eacon/argus-web
3、访问界面:本地8080端口(通过127.0.0.1而不是localhost):http://127.0.0.1:8080
4、初始化:执行web容器的命令,初始化默认账户(用户名/密码:admin/123):
docker exec -it web init_user
Docker-Compose
如果你使用了docker-compose,可以通过如下方式快速运行:
1、git clone本仓库:
git clone https://github.com/amas-eye/amas.git; cd amas/docker/compose/
或者直接获取文件:
mkdir amas; cd amas; curl https://raw.githubusercontent.com/amas-eye/amas/master/docker/compose/docker-compose.yml > docker-compose.yml
2、执行:
docker-compose up -d
指标说明
详见 Metrics.md。
部分功能截图
Dashboard
监控图表
告警规则和记录
Slack通知
调用链
架构
模块划分(对应repo)
Web服务:argus-web
后台:
采集器:arguscollector
告警:argusalert
调用链:arguschain
统计中心:argusstatistics
AIOps框架:argus_aiops
项目成员
Amas现由@Eacon和他的开发团队负责维护
其他
Amas的内部开发代号为argus,这也会保留在开源项目的源码中。
ToDoList
告警引擎,支持DSL语言定义规则
集成开源的Zabbix、Nagios等监控数据
基于AspectJ的Java字节码注入监控
基于pyrasite的python字节码注入监控 更多AIOps方案的落地...
写在最后
前几天有私信小编要Python的学习资料,小编整理了一些有深度的Python教程和参考资料,从入门到高级的都有,文件已经打包好了,正在学习Python的同学可以下载学习学习。文件下载方式:点击小编头像,关注后私信回复“资料”即可下载。首先把代码撸起来!首先把代码撸起来!首先把代码撸起来!重要的事说三遍,哈哈。“编程是门手艺活”。什么意思?得练啊。