数据-服务器日志查询监控功能

问题描述

服务器日志查询监控功能
最近在做一个项目,企业每天大概产生20G左右日志(txt格式,4台服务器分别存储),每次出问题都要远程上服务器通过windows search服务搜索文件内容查日志,维护很繁琐。
想开发一个软件来方便维护人员查询日志,有想过将日志存在数据库里,如SQL Server,但是考虑到每天产生的日志量过大,维护更麻烦。
所以,请问下,有没有什么方法保存日志,而且能通过软件或者服务来查询?

解决方案

具体要看你什么样的日志,文本文件肯定没有效率,而且你的日志肯定包含大量的冗余,先预处理然后入库。

解决方案二:
1个日志1天就20G?也太大了,出了问题不要说查错,就是打开文件都非常费劲。
是不是设计不太合理?1天1个日志100多兆都大。

解决方案三:
zabbix监控服务器日志
监控和日志
监控日志

时间: 2024-11-29 06:32:35

数据-服务器日志查询监控功能的相关文章

EXTJS4 Grid Filter 插件的使用 与后台数据解析------Extjs 查询筛选功能的实现

  先汗一个,一个小功能又踢腾了一天.本来这个带Demo的,但是上面介绍的不是很详细.用的时候问题不大,主要问题在文件导入方面.以为这个插件的使用和其他的不一样. 1.首先是需要引入文件的位置:如图 需要把整个grid都考到vs下,vs中结构如下: 2.设置路径,将文件导入 Ext.Loader.setConfig({ enabled: true }); Ext.Loader.setPath('Ext.ux', '../ext-js4.2/ux'); Ext.require([ '*', 'Ex

javaweb-如何实现类似浏览器调试中的网络数据监控功能?

问题描述 如何实现类似浏览器调试中的网络数据监控功能? 各位好 本人想实现在javaweb项目中,进入某个jsp页面,将这个jsp页面加载的情况保存到excel中,加载情况就浏览器自带的网络数据监控功能一致,包含具体资源,加载时间等,如下图. 有没有办法在js或者java中直接调用火狐或者IE的这种功能获取加载完成后的这种资源情况就行了,不需要实时的,包含具体资源.大小.耗时就行了 或者有没有什么开源的jar包工具,能引入项目调用 不能使用外部软件输入地址等方式获取, 多谢各位了! 解决方案 这

mybatis-MyBatis关联查询查不到数据,日志没有报错

问题描述 MyBatis关联查询查不到数据,日志没有报错 shoppingcard表 food表 Sql语句查询 ShoppingCardMapper.xml 实体类ShoppingCard 测试类 日志 麻烦这方便比较熟悉的高手指点一下.谢谢 解决方案 MyBatis 关联查询Mybatis关联查询Mybatis关联查询(嵌套查询) 解决方案二: http://bbs.csdn.net/topics/391836443 解决方案三: 你的实体类和表的字段不一致,所以sql语句要用别名

mysql-Hibernate 原生sql多表查询在Linux服务器上查询不到数据

问题描述 Hibernate 原生sql多表查询在Linux服务器上查询不到数据 String sql = "SELECT Area.* FROM area AS Area,district AS d WHERE Area.districtid=d.districtid AND Area.areaname= '" + areaname + "' AND d.districtname='" + cityname + "'"; @SuppressWa

Web 服务器日志工具点评

查看记录文件是很乏味的.记录文件令人厌恶,包含了太多的信息,经常使人非常头疼.幸运的是,这些枯燥的工作有代劳者,利用一些日志分析工具,不仅可以利用日志信息进行调试而且可以提供更多的内容.利用它们可以制作出有意义的各种报告.有很多用来分析服务器日志的工具.本文将重点介绍这些工具的和它们的发展方向. 在评估这些软件包之前,先确定你希望用它们来分析的日志类型.虽然大多数日志分析软件不仅仅支持Web服务器日志,但是,本文仅讨论web服务器的日志记录.记录分析软件能够显示从连接到服务器的IP地址到以饼图表

使用云监控自定义监控实现GPU云服务器的GPU监控和报警

1 背景NVIDIA提供了nvidia-smi命令工具用于查询和监控GPU的相关数据,但是对于使用者来说,每次手动查看很不方便,无法做到实时监控,而且也无法可视化,不直观.本文将会介绍如何利用阿里云云监控服务提供的自定义监控功能来实现GPU云服务器的GPU监控和报警的可视化.2 自定义监控和报警阿里云云监控服务提供了自定义监控功能,用户可以利用它实现自定义的数据监控和报警.我们利用自定义监控提供的API或者SDK,可以将GPU云主机内采集的GPU数据上报,在云监控控制台上添加相应的GPU监控项,

使用云监控自定义监控实现GPU云服务器的GPU监控

本文将介绍如何利用阿里云云监控服务提供的自定义监控实现GPU云服务器的GPU监控和报警的可视化,从而达到对GPU使用情况实时掌握的目的. 1 背景 NVIDIA提供了nvidia-smi命令工具用于查询和监控GPU的相关数据,但是对于使用者来说,每次手动查看很不方便,无法做到实时监控,而且也无法可视化,不直观. 本文将会介绍如何利用阿里云云监控服务提供的自定义监控功能来实现GPU云服务器的GPU监控和报警的可视化. 2 自定义监控和报警 阿里云云监控服务提供了自定义监控功能,用户可以利用它实现自

mysql(slow-query)快速开启慢日志查询的方法

mysql(slow-query)快速开启慢日志查询的方法 mysql有一个功能就是可以log下来运行的比较慢的sql语句,默认是没有这个log的 打开 my.ini ,找到 [mysql] 在其下面添加 long_query_time = 2 log-slow-queries = D:/mysql/logs/slow.log #设置把日志写在那里,可以为空,系统会给 一个缺省的文件 #log-slow-queries = /var/youpath/slow.log linux下host_nam

用户洞察的秘密武器:阿里中间件ARMS前端监控功能正式上线

近日,阿里中间件(Aliware)旗下的业务实时监控产品(ARMS)推出了前端监控服务.该技术通过对网站页面上动态数据的采集监测和实时反馈,可帮助企业更高效地进行运营决策. 实时获知站点真实情况 前端监控的重要性 随着互联网的高速发展,现在的网络环境千变万化,网站往往会遇到意想不到的情况.因此我们需要了解的更多,如用户实际访问本站点遇到的错误:各个国家.地区的用户访问本站点的真实速度是多少:每个应用内有大量的异步数据调用的成功率有多高等. 如今互联网产品获取流量的渠道越来越多样化,通常是一个后端