首页 > 系统相关 >在Linux中,如何统计ip访问情况?分析 nginx 访问日志?如何找出访问页面数量在前十位的ip?

在Linux中,如何统计ip访问情况?分析 nginx 访问日志?如何找出访问页面数量在前十位的ip?

时间:2024-06-23 23:55:14浏览次数:24  
标签:sort IP 访问 ip nginx IP地址 日志 页面

在Linux中统计IP访问情况并分析Nginx访问日志,以找出访问页面数量在前十位的IP地址,可以通过一系列命令行工具高效完成。这里以一个典型的工作流程为例,说明如何进行这一分析:

1. 确定日志文件位置

首先,需要知道Nginx的访问日志文件位置。通常,这个文件位于/var/log/nginx/access.log,但具体位置可能会根据Nginx配置有所不同。你可以检查Nginx的配置文件(如/etc/nginx/nginx.conf或相应的site配置文件)来确定确切位置。

2. 分析日志文件

接下来,使用awksortuniq等命令来统计IP地址和访问页面的数量。下面是一个示例命令,演示如何统计访问页面数量最多的前十个IP地址:

cat /var/log/nginx/access.log | \
awk '{print $1 " " $7}' |            # 提取IP地址和请求的URL路径
cut -d '?' -f1 |                     # 移除URL中的查询字符串,确保只统计页面路径
sort |                               # 排序以便后续统计
uniq -c |                            # 计算每行(即每个IP和页面组合)的数量
sort -nr |                           # 按照访问次数降序排序
awk '{print $2}' |                   # 只保留IP地址
uniq -c |                            # 再次统计每个IP的总访问次数
sort -nr |                           # 再次按访问次数降序排序
head -n 10                          # 显示访问次数最多的前10个IP
3. 解释步骤
  • 使用cat读取日志文件内容。
  • awk '{print $1 " " $7}'提取每行的第一列(即客户端IP地址)和第七列(即请求的URL路径)。
  • cut -d '?' -f1确保统计的是页面路径而不是带有查询参数的完整URL。
  • sort对提取的数据进行初步排序,为后续统计做准备。
  • uniq -c统计每行出现的次数,生成每条记录的计数。
  • 第一次sort -nr按访问次数降序排序,以便后续步骤能正确统计每个IP的访问页面总数。
  • 第一次awk '{print $2}'和第二次uniq -c是为了确保我们计算的是每个IP总的访问页面数,而不仅仅是单一页面的访问次数。
  • 第二次sort -nr确保最终结果是按照IP总的访问次数降序排列的。
  • head -n 10显示排名前十的IP地址及其访问次数。

请注意,这个命令可能需要根据实际日志格式和需求进行适当调整。如果你的日志格式有所不同,字段的位置可能需要相应调整。此外,如果日志文件非常大,考虑使用awk直接处理文件而不是通过cat管道,以提高效率。

标签:sort,IP,访问,ip,nginx,IP地址,日志,页面
From: https://www.cnblogs.com/huangjiabobk/p/18264173

相关文章

  • 在Linux中,如何将本地 80 端口的请求转发到 8080 端口?当前主机 IP 为10.0.0.104。
    在Linux系统中,将本地80端口的请求转发到8080端口,可以通过使用iptables命令来实现。当前主机IP为10.0.0.104,具体命令如下:iptables-tnat-APREROUTING-d10.0.0.104-ptcp--dport80-jDNAT--to-destination10.0.0.104:8080解析:iptables:iptables命令用于配置Linux内核......
  • How to get all subarrays from an array by using JavaScript All In One
    HowtogetallsubarraysfromanarraybyusingJavaScriptAllInOneJavaScript动态生成其所有的子数组算法difficulty:Medium/难度:中等solutionsdemos//双指针???//functionnumberOfSubarrays(nums:number[],k:number):number{//letcount=0......
  • A Completed Python Scripter and File Handle with Matplotlib
    importosimportrequestsimportrequestsfrombs4importBeautifulSoupfromtypingimportDicttotal_div:Dict[str,BeautifulSoup]=dict()defthe_big_div(text:str):soup=BeautifulSoup(text,'lxml')count=soup.find_all('div......
  • Nginx实操学习
    1.配置文件分析1.nginx官网nginx官网:http://nginx.org/en/nginx文档:http://nginx.org/en/docs/nginx官网(中文):http://nginx.p2hp.com/nginx文档(中文):http://nginx.p2hp.com/en/docs/index.html推荐看英文2.配置文件(带注释)#usernobody;worker_processes1;......
  • [题解]CF1061C Multiplicity
    题意给定一个长度为\(n\)的序列\(\{a_1,a_2,\dots,a_n\}\)。现在要在\(a\)选出非空子序列\(\{b_1,b_2,\dots,b_m\}\),使得所有的\(i\in[1,m]\),都有\(b_i\bmodi=0\)。求能够选取\(b\)序列的方案数模\(10^9+7\)的值。思路定义\(dp_{i,j}\)表示在\(\{a_1,a......
  • Nginx优化与防盗链
    一、隐藏版本号1.普通版[root@localhost~]#vim /usr/local/nginx/conf/nginx.confhttp{  include   mime.types;  default_type application/octet-stream;  server_tokensoff;   (隐藏版本号)查看信息:方法一[root@localhostconf]#......
  • JavaScript与Go后端服务连接方法
    1.概述本文档描述了如何使用JavaScript(在浏览器或Node.js环境中)与使用Go语言编写的后端服务进行通信。我们将通过HTTP请求来实现前后端的数据交互。2.前提条件后端服务已经部署并运行在指定的URL上。JavaScript环境已经配置好,如果是Node.js,需要安装axios或fetch库。3.Go......
  • javascript浏览器对象模型
    BOM对象:BOM是浏览器对象模型的简称。JavaScript将整个浏览器窗口按照实现的功能不同拆分成若干个对象;包含:window对象、history对象、location对象和document对象等window对象:常用方法:1.prompt();显示可提示用户输入的对话框window.prompt("请输入您的名字");返......
  • 如何开启MySQL远程访问权限允许远程连接?
    如何开启MySQL远程访问权限允许远程连接? 当需要允许远程连接MySQL时,你可以按照以下方法进行配置:1.改表法:如果你的MySQL帐号仅允许在本地登陆,而不允许远程登陆,你可以通过更改\mysql\数据库中的\user\表来修改\host\项。-在本地MySQL中,执行以下命令:mysql-uroot-p-进......
  • nginx架构&&基本数据结构&&配置&&模块&&请求详解
    初探nginx架构众所周知,nginx性能高,而nginx的高性能与其架构是分不开的。那么nginx究竟是怎么样的呢?这一节我们先来初识一下nginx框架吧。nginx在启动后,在unix系统中会以daemon的方式在后台运行,后台进程包含一个master进程和多个worker进程。我们也可以手动地关掉后台模式,让ng......