]> git.openfabrics.org - ~shefty/rdma-dev.git/blob - Documentation/filesystems/proc.txt
/proc/pid/status: add "Seccomp" field
[~shefty/rdma-dev.git] / Documentation / filesystems / proc.txt
1 ------------------------------------------------------------------------------
2                        T H E  /proc   F I L E S Y S T E M
3 ------------------------------------------------------------------------------
4 /proc/sys         Terrehon Bowden <terrehon@pacbell.net>        October 7 1999
5                   Bodo Bauer <bb@ricochet.net>
6
7 2.4.x update      Jorge Nerin <comandante@zaralinux.com>      November 14 2000
8 move /proc/sys    Shen Feng <shen@cn.fujitsu.com>                 April 1 2009
9 ------------------------------------------------------------------------------
10 Version 1.3                                              Kernel version 2.2.12
11                                               Kernel version 2.4.0-test11-pre4
12 ------------------------------------------------------------------------------
13 fixes/update part 1.1  Stefani Seibold <stefani@seibold.net>       June 9 2009
14
15 Table of Contents
16 -----------------
17
18   0     Preface
19   0.1   Introduction/Credits
20   0.2   Legal Stuff
21
22   1     Collecting System Information
23   1.1   Process-Specific Subdirectories
24   1.2   Kernel data
25   1.3   IDE devices in /proc/ide
26   1.4   Networking info in /proc/net
27   1.5   SCSI info
28   1.6   Parallel port info in /proc/parport
29   1.7   TTY info in /proc/tty
30   1.8   Miscellaneous kernel statistics in /proc/stat
31   1.9 Ext4 file system parameters
32
33   2     Modifying System Parameters
34
35   3     Per-Process Parameters
36   3.1   /proc/<pid>/oom_adj & /proc/<pid>/oom_score_adj - Adjust the oom-killer
37                                                                 score
38   3.2   /proc/<pid>/oom_score - Display current oom-killer score
39   3.3   /proc/<pid>/io - Display the IO accounting fields
40   3.4   /proc/<pid>/coredump_filter - Core dump filtering settings
41   3.5   /proc/<pid>/mountinfo - Information about mounts
42   3.6   /proc/<pid>/comm  & /proc/<pid>/task/<tid>/comm
43   3.7   /proc/<pid>/task/<tid>/children - Information about task children
44
45   4     Configuring procfs
46   4.1   Mount options
47
48 ------------------------------------------------------------------------------
49 Preface
50 ------------------------------------------------------------------------------
51
52 0.1 Introduction/Credits
53 ------------------------
54
55 This documentation is  part of a soon (or  so we hope) to be  released book on
56 the SuSE  Linux distribution. As  there is  no complete documentation  for the
57 /proc file system and we've used  many freely available sources to write these
58 chapters, it  seems only fair  to give the work  back to the  Linux community.
59 This work is  based on the 2.2.*  kernel version and the  upcoming 2.4.*. I'm
60 afraid it's still far from complete, but we  hope it will be useful. As far as
61 we know, it is the first 'all-in-one' document about the /proc file system. It
62 is focused  on the Intel  x86 hardware,  so if you  are looking for  PPC, ARM,
63 SPARC, AXP, etc., features, you probably  won't find what you are looking for.
64 It also only covers IPv4 networking, not IPv6 nor other protocols - sorry. But
65 additions and patches  are welcome and will  be added to this  document if you
66 mail them to Bodo.
67
68 We'd like  to  thank Alan Cox, Rik van Riel, and Alexey Kuznetsov and a lot of
69 other people for help compiling this documentation. We'd also like to extend a
70 special thank  you to Andi Kleen for documentation, which we relied on heavily
71 to create  this  document,  as well as the additional information he provided.
72 Thanks to  everybody  else  who contributed source or docs to the Linux kernel
73 and helped create a great piece of software... :)
74
75 If you  have  any comments, corrections or additions, please don't hesitate to
76 contact Bodo  Bauer  at  bb@ricochet.net.  We'll  be happy to add them to this
77 document.
78
79 The   latest   version    of   this   document   is    available   online   at
80 http://tldp.org/LDP/Linux-Filesystem-Hierarchy/html/proc.html
81
82 If  the above  direction does  not works  for you,  you could  try the  kernel
83 mailing  list  at  linux-kernel@vger.kernel.org  and/or try  to  reach  me  at
84 comandante@zaralinux.com.
85
86 0.2 Legal Stuff
87 ---------------
88
89 We don't  guarantee  the  correctness  of this document, and if you come to us
90 complaining about  how  you  screwed  up  your  system  because  of  incorrect
91 documentation, we won't feel responsible...
92
93 ------------------------------------------------------------------------------
94 CHAPTER 1: COLLECTING SYSTEM INFORMATION
95 ------------------------------------------------------------------------------
96
97 ------------------------------------------------------------------------------
98 In This Chapter
99 ------------------------------------------------------------------------------
100 * Investigating  the  properties  of  the  pseudo  file  system  /proc and its
101   ability to provide information on the running Linux system
102 * Examining /proc's structure
103 * Uncovering  various  information  about the kernel and the processes running
104   on the system
105 ------------------------------------------------------------------------------
106
107
108 The proc  file  system acts as an interface to internal data structures in the
109 kernel. It  can  be  used to obtain information about the system and to change
110 certain kernel parameters at runtime (sysctl).
111
112 First, we'll  take  a  look  at the read-only parts of /proc. In Chapter 2, we
113 show you how you can use /proc/sys to change settings.
114
115 1.1 Process-Specific Subdirectories
116 -----------------------------------
117
118 The directory  /proc  contains  (among other things) one subdirectory for each
119 process running on the system, which is named after the process ID (PID).
120
121 The link  self  points  to  the  process reading the file system. Each process
122 subdirectory has the entries listed in Table 1-1.
123
124
125 Table 1-1: Process specific entries in /proc
126 ..............................................................................
127  File           Content
128  clear_refs     Clears page referenced bits shown in smaps output
129  cmdline        Command line arguments
130  cpu            Current and last cpu in which it was executed   (2.4)(smp)
131  cwd            Link to the current working directory
132  environ        Values of environment variables
133  exe            Link to the executable of this process
134  fd             Directory, which contains all file descriptors
135  maps           Memory maps to executables and library files    (2.4)
136  mem            Memory held by this process
137  root           Link to the root directory of this process
138  stat           Process status
139  statm          Process memory status information
140  status         Process status in human readable form
141  wchan          If CONFIG_KALLSYMS is set, a pre-decoded wchan
142  pagemap        Page table
143  stack          Report full stack trace, enable via CONFIG_STACKTRACE
144  smaps          a extension based on maps, showing the memory consumption of
145                 each mapping and flags associated with it
146 ..............................................................................
147
148 For example, to get the status information of a process, all you have to do is
149 read the file /proc/PID/status:
150
151   >cat /proc/self/status
152   Name:   cat
153   State:  R (running)
154   Tgid:   5452
155   Pid:    5452
156   PPid:   743
157   TracerPid:      0                                             (2.4)
158   Uid:    501     501     501     501
159   Gid:    100     100     100     100
160   FDSize: 256
161   Groups: 100 14 16
162   VmPeak:     5004 kB
163   VmSize:     5004 kB
164   VmLck:         0 kB
165   VmHWM:       476 kB
166   VmRSS:       476 kB
167   VmData:      156 kB
168   VmStk:        88 kB
169   VmExe:        68 kB
170   VmLib:      1412 kB
171   VmPTE:        20 kb
172   VmSwap:        0 kB
173   Threads:        1
174   SigQ:   0/28578
175   SigPnd: 0000000000000000
176   ShdPnd: 0000000000000000
177   SigBlk: 0000000000000000
178   SigIgn: 0000000000000000
179   SigCgt: 0000000000000000
180   CapInh: 00000000fffffeff
181   CapPrm: 0000000000000000
182   CapEff: 0000000000000000
183   CapBnd: ffffffffffffffff
184   Seccomp:        0
185   voluntary_ctxt_switches:        0
186   nonvoluntary_ctxt_switches:     1
187
188 This shows you nearly the same information you would get if you viewed it with
189 the ps  command.  In  fact,  ps  uses  the  proc  file  system  to  obtain its
190 information.  But you get a more detailed  view of the  process by reading the
191 file /proc/PID/status. It fields are described in table 1-2.
192
193 The  statm  file  contains  more  detailed  information about the process
194 memory usage. Its seven fields are explained in Table 1-3.  The stat file
195 contains details information about the process itself.  Its fields are
196 explained in Table 1-4.
197
198 (for SMP CONFIG users)
199 For making accounting scalable, RSS related information are handled in
200 asynchronous manner and the vaule may not be very precise. To see a precise
201 snapshot of a moment, you can see /proc/<pid>/smaps file and scan page table.
202 It's slow but very precise.
203
204 Table 1-2: Contents of the status files (as of 2.6.30-rc7)
205 ..............................................................................
206  Field                       Content
207  Name                        filename of the executable
208  State                       state (R is running, S is sleeping, D is sleeping
209                              in an uninterruptible wait, Z is zombie,
210                              T is traced or stopped)
211  Tgid                        thread group ID
212  Pid                         process id
213  PPid                        process id of the parent process
214  TracerPid                   PID of process tracing this process (0 if not)
215  Uid                         Real, effective, saved set, and  file system UIDs
216  Gid                         Real, effective, saved set, and  file system GIDs
217  FDSize                      number of file descriptor slots currently allocated
218  Groups                      supplementary group list
219  VmPeak                      peak virtual memory size
220  VmSize                      total program size
221  VmLck                       locked memory size
222  VmHWM                       peak resident set size ("high water mark")
223  VmRSS                       size of memory portions
224  VmData                      size of data, stack, and text segments
225  VmStk                       size of data, stack, and text segments
226  VmExe                       size of text segment
227  VmLib                       size of shared library code
228  VmPTE                       size of page table entries
229  VmSwap                      size of swap usage (the number of referred swapents)
230  Threads                     number of threads
231  SigQ                        number of signals queued/max. number for queue
232  SigPnd                      bitmap of pending signals for the thread
233  ShdPnd                      bitmap of shared pending signals for the process
234  SigBlk                      bitmap of blocked signals
235  SigIgn                      bitmap of ignored signals
236  SigCgt                      bitmap of catched signals
237  CapInh                      bitmap of inheritable capabilities
238  CapPrm                      bitmap of permitted capabilities
239  CapEff                      bitmap of effective capabilities
240  CapBnd                      bitmap of capabilities bounding set
241  Seccomp                     seccomp mode, like prctl(PR_GET_SECCOMP, ...)
242  Cpus_allowed                mask of CPUs on which this process may run
243  Cpus_allowed_list           Same as previous, but in "list format"
244  Mems_allowed                mask of memory nodes allowed to this process
245  Mems_allowed_list           Same as previous, but in "list format"
246  voluntary_ctxt_switches     number of voluntary context switches
247  nonvoluntary_ctxt_switches  number of non voluntary context switches
248 ..............................................................................
249
250 Table 1-3: Contents of the statm files (as of 2.6.8-rc3)
251 ..............................................................................
252  Field    Content
253  size     total program size (pages)            (same as VmSize in status)
254  resident size of memory portions (pages)       (same as VmRSS in status)
255  shared   number of pages that are shared       (i.e. backed by a file)
256  trs      number of pages that are 'code'       (not including libs; broken,
257                                                         includes data segment)
258  lrs      number of pages of library            (always 0 on 2.6)
259  drs      number of pages of data/stack         (including libs; broken,
260                                                         includes library text)
261  dt       number of dirty pages                 (always 0 on 2.6)
262 ..............................................................................
263
264
265 Table 1-4: Contents of the stat files (as of 2.6.30-rc7)
266 ..............................................................................
267  Field          Content
268   pid           process id
269   tcomm         filename of the executable
270   state         state (R is running, S is sleeping, D is sleeping in an
271                 uninterruptible wait, Z is zombie, T is traced or stopped)
272   ppid          process id of the parent process
273   pgrp          pgrp of the process
274   sid           session id
275   tty_nr        tty the process uses
276   tty_pgrp      pgrp of the tty
277   flags         task flags
278   min_flt       number of minor faults
279   cmin_flt      number of minor faults with child's
280   maj_flt       number of major faults
281   cmaj_flt      number of major faults with child's
282   utime         user mode jiffies
283   stime         kernel mode jiffies
284   cutime        user mode jiffies with child's
285   cstime        kernel mode jiffies with child's
286   priority      priority level
287   nice          nice level
288   num_threads   number of threads
289   it_real_value (obsolete, always 0)
290   start_time    time the process started after system boot
291   vsize         virtual memory size
292   rss           resident set memory size
293   rsslim        current limit in bytes on the rss
294   start_code    address above which program text can run
295   end_code      address below which program text can run
296   start_stack   address of the start of the main process stack
297   esp           current value of ESP
298   eip           current value of EIP
299   pending       bitmap of pending signals
300   blocked       bitmap of blocked signals
301   sigign        bitmap of ignored signals
302   sigcatch      bitmap of catched signals
303   wchan         address where process went to sleep
304   0             (place holder)
305   0             (place holder)
306   exit_signal   signal to send to parent thread on exit
307   task_cpu      which CPU the task is scheduled on
308   rt_priority   realtime priority
309   policy        scheduling policy (man sched_setscheduler)
310   blkio_ticks   time spent waiting for block IO
311   gtime         guest time of the task in jiffies
312   cgtime        guest time of the task children in jiffies
313   start_data    address above which program data+bss is placed
314   end_data      address below which program data+bss is placed
315   start_brk     address above which program heap can be expanded with brk()
316   arg_start     address above which program command line is placed
317   arg_end       address below which program command line is placed
318   env_start     address above which program environment is placed
319   env_end       address below which program environment is placed
320   exit_code     the thread's exit_code in the form reported by the waitpid system call
321 ..............................................................................
322
323 The /proc/PID/maps file containing the currently mapped memory regions and
324 their access permissions.
325
326 The format is:
327
328 address           perms offset  dev   inode      pathname
329
330 08048000-08049000 r-xp 00000000 03:00 8312       /opt/test
331 08049000-0804a000 rw-p 00001000 03:00 8312       /opt/test
332 0804a000-0806b000 rw-p 00000000 00:00 0          [heap]
333 a7cb1000-a7cb2000 ---p 00000000 00:00 0
334 a7cb2000-a7eb2000 rw-p 00000000 00:00 0
335 a7eb2000-a7eb3000 ---p 00000000 00:00 0
336 a7eb3000-a7ed5000 rw-p 00000000 00:00 0          [stack:1001]
337 a7ed5000-a8008000 r-xp 00000000 03:00 4222       /lib/libc.so.6
338 a8008000-a800a000 r--p 00133000 03:00 4222       /lib/libc.so.6
339 a800a000-a800b000 rw-p 00135000 03:00 4222       /lib/libc.so.6
340 a800b000-a800e000 rw-p 00000000 00:00 0
341 a800e000-a8022000 r-xp 00000000 03:00 14462      /lib/libpthread.so.0
342 a8022000-a8023000 r--p 00013000 03:00 14462      /lib/libpthread.so.0
343 a8023000-a8024000 rw-p 00014000 03:00 14462      /lib/libpthread.so.0
344 a8024000-a8027000 rw-p 00000000 00:00 0
345 a8027000-a8043000 r-xp 00000000 03:00 8317       /lib/ld-linux.so.2
346 a8043000-a8044000 r--p 0001b000 03:00 8317       /lib/ld-linux.so.2
347 a8044000-a8045000 rw-p 0001c000 03:00 8317       /lib/ld-linux.so.2
348 aff35000-aff4a000 rw-p 00000000 00:00 0          [stack]
349 ffffe000-fffff000 r-xp 00000000 00:00 0          [vdso]
350
351 where "address" is the address space in the process that it occupies, "perms"
352 is a set of permissions:
353
354  r = read
355  w = write
356  x = execute
357  s = shared
358  p = private (copy on write)
359
360 "offset" is the offset into the mapping, "dev" is the device (major:minor), and
361 "inode" is the inode  on that device.  0 indicates that  no inode is associated
362 with the memory region, as the case would be with BSS (uninitialized data).
363 The "pathname" shows the name associated file for this mapping.  If the mapping
364 is not associated with a file:
365
366  [heap]                   = the heap of the program
367  [stack]                  = the stack of the main process
368  [stack:1001]             = the stack of the thread with tid 1001
369  [vdso]                   = the "virtual dynamic shared object",
370                             the kernel system call handler
371
372  or if empty, the mapping is anonymous.
373
374 The /proc/PID/task/TID/maps is a view of the virtual memory from the viewpoint
375 of the individual tasks of a process. In this file you will see a mapping marked
376 as [stack] if that task sees it as a stack. This is a key difference from the
377 content of /proc/PID/maps, where you will see all mappings that are being used
378 as stack by all of those tasks. Hence, for the example above, the task-level
379 map, i.e. /proc/PID/task/TID/maps for thread 1001 will look like this:
380
381 08048000-08049000 r-xp 00000000 03:00 8312       /opt/test
382 08049000-0804a000 rw-p 00001000 03:00 8312       /opt/test
383 0804a000-0806b000 rw-p 00000000 00:00 0          [heap]
384 a7cb1000-a7cb2000 ---p 00000000 00:00 0
385 a7cb2000-a7eb2000 rw-p 00000000 00:00 0
386 a7eb2000-a7eb3000 ---p 00000000 00:00 0
387 a7eb3000-a7ed5000 rw-p 00000000 00:00 0          [stack]
388 a7ed5000-a8008000 r-xp 00000000 03:00 4222       /lib/libc.so.6
389 a8008000-a800a000 r--p 00133000 03:00 4222       /lib/libc.so.6
390 a800a000-a800b000 rw-p 00135000 03:00 4222       /lib/libc.so.6
391 a800b000-a800e000 rw-p 00000000 00:00 0
392 a800e000-a8022000 r-xp 00000000 03:00 14462      /lib/libpthread.so.0
393 a8022000-a8023000 r--p 00013000 03:00 14462      /lib/libpthread.so.0
394 a8023000-a8024000 rw-p 00014000 03:00 14462      /lib/libpthread.so.0
395 a8024000-a8027000 rw-p 00000000 00:00 0
396 a8027000-a8043000 r-xp 00000000 03:00 8317       /lib/ld-linux.so.2
397 a8043000-a8044000 r--p 0001b000 03:00 8317       /lib/ld-linux.so.2
398 a8044000-a8045000 rw-p 0001c000 03:00 8317       /lib/ld-linux.so.2
399 aff35000-aff4a000 rw-p 00000000 00:00 0
400 ffffe000-fffff000 r-xp 00000000 00:00 0          [vdso]
401
402 The /proc/PID/smaps is an extension based on maps, showing the memory
403 consumption for each of the process's mappings. For each of mappings there
404 is a series of lines such as the following:
405
406 08048000-080bc000 r-xp 00000000 03:02 13130      /bin/bash
407 Size:               1084 kB
408 Rss:                 892 kB
409 Pss:                 374 kB
410 Shared_Clean:        892 kB
411 Shared_Dirty:          0 kB
412 Private_Clean:         0 kB
413 Private_Dirty:         0 kB
414 Referenced:          892 kB
415 Anonymous:             0 kB
416 Swap:                  0 kB
417 KernelPageSize:        4 kB
418 MMUPageSize:           4 kB
419 Locked:              374 kB
420 VmFlags: rd ex mr mw me de
421
422 the first of these lines shows the same information as is displayed for the
423 mapping in /proc/PID/maps.  The remaining lines show the size of the mapping
424 (size), the amount of the mapping that is currently resident in RAM (RSS), the
425 process' proportional share of this mapping (PSS), the number of clean and
426 dirty private pages in the mapping.  Note that even a page which is part of a
427 MAP_SHARED mapping, but has only a single pte mapped, i.e.  is currently used
428 by only one process, is accounted as private and not as shared.  "Referenced"
429 indicates the amount of memory currently marked as referenced or accessed.
430 "Anonymous" shows the amount of memory that does not belong to any file.  Even
431 a mapping associated with a file may contain anonymous pages: when MAP_PRIVATE
432 and a page is modified, the file page is replaced by a private anonymous copy.
433 "Swap" shows how much would-be-anonymous memory is also used, but out on
434 swap.
435
436 "VmFlags" field deserves a separate description. This member represents the kernel
437 flags associated with the particular virtual memory area in two letter encoded
438 manner. The codes are the following:
439     rd  - readable
440     wr  - writeable
441     ex  - executable
442     sh  - shared
443     mr  - may read
444     mw  - may write
445     me  - may execute
446     ms  - may share
447     gd  - stack segment growns down
448     pf  - pure PFN range
449     dw  - disabled write to the mapped file
450     lo  - pages are locked in memory
451     io  - memory mapped I/O area
452     sr  - sequential read advise provided
453     rr  - random read advise provided
454     dc  - do not copy area on fork
455     de  - do not expand area on remapping
456     ac  - area is accountable
457     nr  - swap space is not reserved for the area
458     ht  - area uses huge tlb pages
459     nl  - non-linear mapping
460     ar  - architecture specific flag
461     dd  - do not include area into core dump
462     mm  - mixed map area
463     hg  - huge page advise flag
464     nh  - no-huge page advise flag
465     mg  - mergable advise flag
466
467 Note that there is no guarantee that every flag and associated mnemonic will
468 be present in all further kernel releases. Things get changed, the flags may
469 be vanished or the reverse -- new added.
470
471 This file is only present if the CONFIG_MMU kernel configuration option is
472 enabled.
473
474 The /proc/PID/clear_refs is used to reset the PG_Referenced and ACCESSED/YOUNG
475 bits on both physical and virtual pages associated with a process.
476 To clear the bits for all the pages associated with the process
477     > echo 1 > /proc/PID/clear_refs
478
479 To clear the bits for the anonymous pages associated with the process
480     > echo 2 > /proc/PID/clear_refs
481
482 To clear the bits for the file mapped pages associated with the process
483     > echo 3 > /proc/PID/clear_refs
484 Any other value written to /proc/PID/clear_refs will have no effect.
485
486 The /proc/pid/pagemap gives the PFN, which can be used to find the pageflags
487 using /proc/kpageflags and number of times a page is mapped using
488 /proc/kpagecount. For detailed explanation, see Documentation/vm/pagemap.txt.
489
490 1.2 Kernel data
491 ---------------
492
493 Similar to  the  process entries, the kernel data files give information about
494 the running kernel. The files used to obtain this information are contained in
495 /proc and  are  listed  in Table 1-5. Not all of these will be present in your
496 system. It  depends  on the kernel configuration and the loaded modules, which
497 files are there, and which are missing.
498
499 Table 1-5: Kernel info in /proc
500 ..............................................................................
501  File        Content                                           
502  apm         Advanced power management info                    
503  buddyinfo   Kernel memory allocator information (see text)     (2.5)
504  bus         Directory containing bus specific information     
505  cmdline     Kernel command line                               
506  cpuinfo     Info about the CPU                                
507  devices     Available devices (block and character)           
508  dma         Used DMS channels                                 
509  filesystems Supported filesystems                             
510  driver      Various drivers grouped here, currently rtc (2.4)
511  execdomains Execdomains, related to security                   (2.4)
512  fb          Frame Buffer devices                               (2.4)
513  fs          File system parameters, currently nfs/exports      (2.4)
514  ide         Directory containing info about the IDE subsystem 
515  interrupts  Interrupt usage                                   
516  iomem       Memory map                                         (2.4)
517  ioports     I/O port usage                                    
518  irq         Masks for irq to cpu affinity                      (2.4)(smp?)
519  isapnp      ISA PnP (Plug&Play) Info                           (2.4)
520  kcore       Kernel core image (can be ELF or A.OUT(deprecated in 2.4))   
521  kmsg        Kernel messages                                   
522  ksyms       Kernel symbol table                               
523  loadavg     Load average of last 1, 5 & 15 minutes                
524  locks       Kernel locks                                      
525  meminfo     Memory info                                       
526  misc        Miscellaneous                                     
527  modules     List of loaded modules                            
528  mounts      Mounted filesystems                               
529  net         Networking info (see text)                        
530  pagetypeinfo Additional page allocator information (see text)  (2.5)
531  partitions  Table of partitions known to the system           
532  pci         Deprecated info of PCI bus (new way -> /proc/bus/pci/,
533              decoupled by lspci                                 (2.4)
534  rtc         Real time clock                                   
535  scsi        SCSI info (see text)                              
536  slabinfo    Slab pool info                                    
537  softirqs    softirq usage
538  stat        Overall statistics                                
539  swaps       Swap space utilization                            
540  sys         See chapter 2                                     
541  sysvipc     Info of SysVIPC Resources (msg, sem, shm)          (2.4)
542  tty         Info of tty drivers
543  uptime      System uptime                                     
544  version     Kernel version                                    
545  video       bttv info of video resources                       (2.4)
546  vmallocinfo Show vmalloced areas
547 ..............................................................................
548
549 You can,  for  example,  check  which interrupts are currently in use and what
550 they are used for by looking in the file /proc/interrupts:
551
552   > cat /proc/interrupts 
553              CPU0        
554     0:    8728810          XT-PIC  timer 
555     1:        895          XT-PIC  keyboard 
556     2:          0          XT-PIC  cascade 
557     3:     531695          XT-PIC  aha152x 
558     4:    2014133          XT-PIC  serial 
559     5:      44401          XT-PIC  pcnet_cs 
560     8:          2          XT-PIC  rtc 
561    11:          8          XT-PIC  i82365 
562    12:     182918          XT-PIC  PS/2 Mouse 
563    13:          1          XT-PIC  fpu 
564    14:    1232265          XT-PIC  ide0 
565    15:          7          XT-PIC  ide1 
566   NMI:          0 
567
568 In 2.4.* a couple of lines where added to this file LOC & ERR (this time is the
569 output of a SMP machine):
570
571   > cat /proc/interrupts 
572
573              CPU0       CPU1       
574     0:    1243498    1214548    IO-APIC-edge  timer
575     1:       8949       8958    IO-APIC-edge  keyboard
576     2:          0          0          XT-PIC  cascade
577     5:      11286      10161    IO-APIC-edge  soundblaster
578     8:          1          0    IO-APIC-edge  rtc
579     9:      27422      27407    IO-APIC-edge  3c503
580    12:     113645     113873    IO-APIC-edge  PS/2 Mouse
581    13:          0          0          XT-PIC  fpu
582    14:      22491      24012    IO-APIC-edge  ide0
583    15:       2183       2415    IO-APIC-edge  ide1
584    17:      30564      30414   IO-APIC-level  eth0
585    18:        177        164   IO-APIC-level  bttv
586   NMI:    2457961    2457959 
587   LOC:    2457882    2457881 
588   ERR:       2155
589
590 NMI is incremented in this case because every timer interrupt generates a NMI
591 (Non Maskable Interrupt) which is used by the NMI Watchdog to detect lockups.
592
593 LOC is the local interrupt counter of the internal APIC of every CPU.
594
595 ERR is incremented in the case of errors in the IO-APIC bus (the bus that
596 connects the CPUs in a SMP system. This means that an error has been detected,
597 the IO-APIC automatically retry the transmission, so it should not be a big
598 problem, but you should read the SMP-FAQ.
599
600 In 2.6.2* /proc/interrupts was expanded again.  This time the goal was for
601 /proc/interrupts to display every IRQ vector in use by the system, not
602 just those considered 'most important'.  The new vectors are:
603
604   THR -- interrupt raised when a machine check threshold counter
605   (typically counting ECC corrected errors of memory or cache) exceeds
606   a configurable threshold.  Only available on some systems.
607
608   TRM -- a thermal event interrupt occurs when a temperature threshold
609   has been exceeded for the CPU.  This interrupt may also be generated
610   when the temperature drops back to normal.
611
612   SPU -- a spurious interrupt is some interrupt that was raised then lowered
613   by some IO device before it could be fully processed by the APIC.  Hence
614   the APIC sees the interrupt but does not know what device it came from.
615   For this case the APIC will generate the interrupt with a IRQ vector
616   of 0xff. This might also be generated by chipset bugs.
617
618   RES, CAL, TLB -- rescheduling, call and TLB flush interrupts are
619   sent from one CPU to another per the needs of the OS.  Typically,
620   their statistics are used by kernel developers and interested users to
621   determine the occurrence of interrupts of the given type.
622
623 The above IRQ vectors are displayed only when relevant.  For example,
624 the threshold vector does not exist on x86_64 platforms.  Others are
625 suppressed when the system is a uniprocessor.  As of this writing, only
626 i386 and x86_64 platforms support the new IRQ vector displays.
627
628 Of some interest is the introduction of the /proc/irq directory to 2.4.
629 It could be used to set IRQ to CPU affinity, this means that you can "hook" an
630 IRQ to only one CPU, or to exclude a CPU of handling IRQs. The contents of the
631 irq subdir is one subdir for each IRQ, and two files; default_smp_affinity and
632 prof_cpu_mask.
633
634 For example 
635   > ls /proc/irq/
636   0  10  12  14  16  18  2  4  6  8  prof_cpu_mask
637   1  11  13  15  17  19  3  5  7  9  default_smp_affinity
638   > ls /proc/irq/0/
639   smp_affinity
640
641 smp_affinity is a bitmask, in which you can specify which CPUs can handle the
642 IRQ, you can set it by doing:
643
644   > echo 1 > /proc/irq/10/smp_affinity
645
646 This means that only the first CPU will handle the IRQ, but you can also echo
647 5 which means that only the first and fourth CPU can handle the IRQ.
648
649 The contents of each smp_affinity file is the same by default:
650
651   > cat /proc/irq/0/smp_affinity
652   ffffffff
653
654 There is an alternate interface, smp_affinity_list which allows specifying
655 a cpu range instead of a bitmask:
656
657   > cat /proc/irq/0/smp_affinity_list
658   1024-1031
659
660 The default_smp_affinity mask applies to all non-active IRQs, which are the
661 IRQs which have not yet been allocated/activated, and hence which lack a
662 /proc/irq/[0-9]* directory.
663
664 The node file on an SMP system shows the node to which the device using the IRQ
665 reports itself as being attached. This hardware locality information does not
666 include information about any possible driver locality preference.
667
668 prof_cpu_mask specifies which CPUs are to be profiled by the system wide
669 profiler. Default value is ffffffff (all cpus if there are only 32 of them).
670
671 The way IRQs are routed is handled by the IO-APIC, and it's Round Robin
672 between all the CPUs which are allowed to handle it. As usual the kernel has
673 more info than you and does a better job than you, so the defaults are the
674 best choice for almost everyone.  [Note this applies only to those IO-APIC's
675 that support "Round Robin" interrupt distribution.]
676
677 There are  three  more  important subdirectories in /proc: net, scsi, and sys.
678 The general  rule  is  that  the  contents,  or  even  the  existence of these
679 directories, depend  on your kernel configuration. If SCSI is not enabled, the
680 directory scsi  may  not  exist. The same is true with the net, which is there
681 only when networking support is present in the running kernel.
682
683 The slabinfo  file  gives  information  about  memory usage at the slab level.
684 Linux uses  slab  pools for memory management above page level in version 2.2.
685 Commonly used  objects  have  their  own  slab  pool (such as network buffers,
686 directory cache, and so on).
687
688 ..............................................................................
689
690 > cat /proc/buddyinfo
691
692 Node 0, zone      DMA      0      4      5      4      4      3 ...
693 Node 0, zone   Normal      1      0      0      1    101      8 ...
694 Node 0, zone  HighMem      2      0      0      1      1      0 ...
695
696 External fragmentation is a problem under some workloads, and buddyinfo is a
697 useful tool for helping diagnose these problems.  Buddyinfo will give you a 
698 clue as to how big an area you can safely allocate, or why a previous
699 allocation failed.
700
701 Each column represents the number of pages of a certain order which are 
702 available.  In this case, there are 0 chunks of 2^0*PAGE_SIZE available in 
703 ZONE_DMA, 4 chunks of 2^1*PAGE_SIZE in ZONE_DMA, 101 chunks of 2^4*PAGE_SIZE 
704 available in ZONE_NORMAL, etc... 
705
706 More information relevant to external fragmentation can be found in
707 pagetypeinfo.
708
709 > cat /proc/pagetypeinfo
710 Page block order: 9
711 Pages per block:  512
712
713 Free pages count per migrate type at order       0      1      2      3      4      5      6      7      8      9     10
714 Node    0, zone      DMA, type    Unmovable      0      0      0      1      1      1      1      1      1      1      0
715 Node    0, zone      DMA, type  Reclaimable      0      0      0      0      0      0      0      0      0      0      0
716 Node    0, zone      DMA, type      Movable      1      1      2      1      2      1      1      0      1      0      2
717 Node    0, zone      DMA, type      Reserve      0      0      0      0      0      0      0      0      0      1      0
718 Node    0, zone      DMA, type      Isolate      0      0      0      0      0      0      0      0      0      0      0
719 Node    0, zone    DMA32, type    Unmovable    103     54     77      1      1      1     11      8      7      1      9
720 Node    0, zone    DMA32, type  Reclaimable      0      0      2      1      0      0      0      0      1      0      0
721 Node    0, zone    DMA32, type      Movable    169    152    113     91     77     54     39     13      6      1    452
722 Node    0, zone    DMA32, type      Reserve      1      2      2      2      2      0      1      1      1      1      0
723 Node    0, zone    DMA32, type      Isolate      0      0      0      0      0      0      0      0      0      0      0
724
725 Number of blocks type     Unmovable  Reclaimable      Movable      Reserve      Isolate
726 Node 0, zone      DMA            2            0            5            1            0
727 Node 0, zone    DMA32           41            6          967            2            0
728
729 Fragmentation avoidance in the kernel works by grouping pages of different
730 migrate types into the same contiguous regions of memory called page blocks.
731 A page block is typically the size of the default hugepage size e.g. 2MB on
732 X86-64. By keeping pages grouped based on their ability to move, the kernel
733 can reclaim pages within a page block to satisfy a high-order allocation.
734
735 The pagetypinfo begins with information on the size of a page block. It
736 then gives the same type of information as buddyinfo except broken down
737 by migrate-type and finishes with details on how many page blocks of each
738 type exist.
739
740 If min_free_kbytes has been tuned correctly (recommendations made by hugeadm
741 from libhugetlbfs http://sourceforge.net/projects/libhugetlbfs/), one can
742 make an estimate of the likely number of huge pages that can be allocated
743 at a given point in time. All the "Movable" blocks should be allocatable
744 unless memory has been mlock()'d. Some of the Reclaimable blocks should
745 also be allocatable although a lot of filesystem metadata may have to be
746 reclaimed to achieve this.
747
748 ..............................................................................
749
750 meminfo:
751
752 Provides information about distribution and utilization of memory.  This
753 varies by architecture and compile options.  The following is from a
754 16GB PIII, which has highmem enabled.  You may not have all of these fields.
755
756 > cat /proc/meminfo
757
758 The "Locked" indicates whether the mapping is locked in memory or not.
759
760
761 MemTotal:     16344972 kB
762 MemFree:      13634064 kB
763 Buffers:          3656 kB
764 Cached:        1195708 kB
765 SwapCached:          0 kB
766 Active:         891636 kB
767 Inactive:      1077224 kB
768 HighTotal:    15597528 kB
769 HighFree:     13629632 kB
770 LowTotal:       747444 kB
771 LowFree:          4432 kB
772 SwapTotal:           0 kB
773 SwapFree:            0 kB
774 Dirty:             968 kB
775 Writeback:           0 kB
776 AnonPages:      861800 kB
777 Mapped:         280372 kB
778 Slab:           284364 kB
779 SReclaimable:   159856 kB
780 SUnreclaim:     124508 kB
781 PageTables:      24448 kB
782 NFS_Unstable:        0 kB
783 Bounce:              0 kB
784 WritebackTmp:        0 kB
785 CommitLimit:   7669796 kB
786 Committed_AS:   100056 kB
787 VmallocTotal:   112216 kB
788 VmallocUsed:       428 kB
789 VmallocChunk:   111088 kB
790 AnonHugePages:   49152 kB
791
792     MemTotal: Total usable ram (i.e. physical ram minus a few reserved
793               bits and the kernel binary code)
794      MemFree: The sum of LowFree+HighFree
795      Buffers: Relatively temporary storage for raw disk blocks
796               shouldn't get tremendously large (20MB or so)
797       Cached: in-memory cache for files read from the disk (the
798               pagecache).  Doesn't include SwapCached
799   SwapCached: Memory that once was swapped out, is swapped back in but
800               still also is in the swapfile (if memory is needed it
801               doesn't need to be swapped out AGAIN because it is already
802               in the swapfile. This saves I/O)
803       Active: Memory that has been used more recently and usually not
804               reclaimed unless absolutely necessary.
805     Inactive: Memory which has been less recently used.  It is more
806               eligible to be reclaimed for other purposes
807    HighTotal:
808     HighFree: Highmem is all memory above ~860MB of physical memory
809               Highmem areas are for use by userspace programs, or
810               for the pagecache.  The kernel must use tricks to access
811               this memory, making it slower to access than lowmem.
812     LowTotal:
813      LowFree: Lowmem is memory which can be used for everything that
814               highmem can be used for, but it is also available for the
815               kernel's use for its own data structures.  Among many
816               other things, it is where everything from the Slab is
817               allocated.  Bad things happen when you're out of lowmem.
818    SwapTotal: total amount of swap space available
819     SwapFree: Memory which has been evicted from RAM, and is temporarily
820               on the disk
821        Dirty: Memory which is waiting to get written back to the disk
822    Writeback: Memory which is actively being written back to the disk
823    AnonPages: Non-file backed pages mapped into userspace page tables
824 AnonHugePages: Non-file backed huge pages mapped into userspace page tables
825       Mapped: files which have been mmaped, such as libraries
826         Slab: in-kernel data structures cache
827 SReclaimable: Part of Slab, that might be reclaimed, such as caches
828   SUnreclaim: Part of Slab, that cannot be reclaimed on memory pressure
829   PageTables: amount of memory dedicated to the lowest level of page
830               tables.
831 NFS_Unstable: NFS pages sent to the server, but not yet committed to stable
832               storage
833       Bounce: Memory used for block device "bounce buffers"
834 WritebackTmp: Memory used by FUSE for temporary writeback buffers
835  CommitLimit: Based on the overcommit ratio ('vm.overcommit_ratio'),
836               this is the total amount of  memory currently available to
837               be allocated on the system. This limit is only adhered to
838               if strict overcommit accounting is enabled (mode 2 in
839               'vm.overcommit_memory').
840               The CommitLimit is calculated with the following formula:
841               CommitLimit = ('vm.overcommit_ratio' * Physical RAM) + Swap
842               For example, on a system with 1G of physical RAM and 7G
843               of swap with a `vm.overcommit_ratio` of 30 it would
844               yield a CommitLimit of 7.3G.
845               For more details, see the memory overcommit documentation
846               in vm/overcommit-accounting.
847 Committed_AS: The amount of memory presently allocated on the system.
848               The committed memory is a sum of all of the memory which
849               has been allocated by processes, even if it has not been
850               "used" by them as of yet. A process which malloc()'s 1G
851               of memory, but only touches 300M of it will only show up
852               as using 300M of memory even if it has the address space
853               allocated for the entire 1G. This 1G is memory which has
854               been "committed" to by the VM and can be used at any time
855               by the allocating application. With strict overcommit
856               enabled on the system (mode 2 in 'vm.overcommit_memory'),
857               allocations which would exceed the CommitLimit (detailed
858               above) will not be permitted. This is useful if one needs
859               to guarantee that processes will not fail due to lack of
860               memory once that memory has been successfully allocated.
861 VmallocTotal: total size of vmalloc memory area
862  VmallocUsed: amount of vmalloc area which is used
863 VmallocChunk: largest contiguous block of vmalloc area which is free
864
865 ..............................................................................
866
867 vmallocinfo:
868
869 Provides information about vmalloced/vmaped areas. One line per area,
870 containing the virtual address range of the area, size in bytes,
871 caller information of the creator, and optional information depending
872 on the kind of area :
873
874  pages=nr    number of pages
875  phys=addr   if a physical address was specified
876  ioremap     I/O mapping (ioremap() and friends)
877  vmalloc     vmalloc() area
878  vmap        vmap()ed pages
879  user        VM_USERMAP area
880  vpages      buffer for pages pointers was vmalloced (huge area)
881  N<node>=nr  (Only on NUMA kernels)
882              Number of pages allocated on memory node <node>
883
884 > cat /proc/vmallocinfo
885 0xffffc20000000000-0xffffc20000201000 2101248 alloc_large_system_hash+0x204 ...
886   /0x2c0 pages=512 vmalloc N0=128 N1=128 N2=128 N3=128
887 0xffffc20000201000-0xffffc20000302000 1052672 alloc_large_system_hash+0x204 ...
888   /0x2c0 pages=256 vmalloc N0=64 N1=64 N2=64 N3=64
889 0xffffc20000302000-0xffffc20000304000    8192 acpi_tb_verify_table+0x21/0x4f...
890   phys=7fee8000 ioremap
891 0xffffc20000304000-0xffffc20000307000   12288 acpi_tb_verify_table+0x21/0x4f...
892   phys=7fee7000 ioremap
893 0xffffc2000031d000-0xffffc2000031f000    8192 init_vdso_vars+0x112/0x210
894 0xffffc2000031f000-0xffffc2000032b000   49152 cramfs_uncompress_init+0x2e ...
895   /0x80 pages=11 vmalloc N0=3 N1=3 N2=2 N3=3
896 0xffffc2000033a000-0xffffc2000033d000   12288 sys_swapon+0x640/0xac0      ...
897   pages=2 vmalloc N1=2
898 0xffffc20000347000-0xffffc2000034c000   20480 xt_alloc_table_info+0xfe ...
899   /0x130 [x_tables] pages=4 vmalloc N0=4
900 0xffffffffa0000000-0xffffffffa000f000   61440 sys_init_module+0xc27/0x1d00 ...
901    pages=14 vmalloc N2=14
902 0xffffffffa000f000-0xffffffffa0014000   20480 sys_init_module+0xc27/0x1d00 ...
903    pages=4 vmalloc N1=4
904 0xffffffffa0014000-0xffffffffa0017000   12288 sys_init_module+0xc27/0x1d00 ...
905    pages=2 vmalloc N1=2
906 0xffffffffa0017000-0xffffffffa0022000   45056 sys_init_module+0xc27/0x1d00 ...
907    pages=10 vmalloc N0=10
908
909 ..............................................................................
910
911 softirqs:
912
913 Provides counts of softirq handlers serviced since boot time, for each cpu.
914
915 > cat /proc/softirqs
916                 CPU0       CPU1       CPU2       CPU3
917       HI:          0          0          0          0
918    TIMER:      27166      27120      27097      27034
919   NET_TX:          0          0          0         17
920   NET_RX:         42          0          0         39
921    BLOCK:          0          0        107       1121
922  TASKLET:          0          0          0        290
923    SCHED:      27035      26983      26971      26746
924  HRTIMER:          0          0          0          0
925      RCU:       1678       1769       2178       2250
926
927
928 1.3 IDE devices in /proc/ide
929 ----------------------------
930
931 The subdirectory /proc/ide contains information about all IDE devices of which
932 the kernel  is  aware.  There is one subdirectory for each IDE controller, the
933 file drivers  and a link for each IDE device, pointing to the device directory
934 in the controller specific subtree.
935
936 The file  drivers  contains general information about the drivers used for the
937 IDE devices:
938
939   > cat /proc/ide/drivers
940   ide-cdrom version 4.53
941   ide-disk version 1.08
942
943 More detailed  information  can  be  found  in  the  controller  specific
944 subdirectories. These  are  named  ide0,  ide1  and  so  on.  Each  of  these
945 directories contains the files shown in table 1-6.
946
947
948 Table 1-6: IDE controller info in  /proc/ide/ide?
949 ..............................................................................
950  File    Content                                 
951  channel IDE channel (0 or 1)                    
952  config  Configuration (only for PCI/IDE bridge) 
953  mate    Mate name                               
954  model   Type/Chipset of IDE controller          
955 ..............................................................................
956
957 Each device  connected  to  a  controller  has  a separate subdirectory in the
958 controllers directory.  The  files  listed in table 1-7 are contained in these
959 directories.
960
961
962 Table 1-7: IDE device information
963 ..............................................................................
964  File             Content                                    
965  cache            The cache                                  
966  capacity         Capacity of the medium (in 512Byte blocks) 
967  driver           driver and version                         
968  geometry         physical and logical geometry              
969  identify         device identify block                      
970  media            media type                                 
971  model            device identifier                          
972  settings         device setup                               
973  smart_thresholds IDE disk management thresholds             
974  smart_values     IDE disk management values                 
975 ..............................................................................
976
977 The most  interesting  file is settings. This file contains a nice overview of
978 the drive parameters:
979
980   # cat /proc/ide/ide0/hda/settings 
981   name                    value           min             max             mode 
982   ----                    -----           ---             ---             ---- 
983   bios_cyl                526             0               65535           rw 
984   bios_head               255             0               255             rw 
985   bios_sect               63              0               63              rw 
986   breada_readahead        4               0               127             rw 
987   bswap                   0               0               1               r 
988   file_readahead          72              0               2097151         rw 
989   io_32bit                0               0               3               rw 
990   keepsettings            0               0               1               rw 
991   max_kb_per_request      122             1               127             rw 
992   multcount               0               0               8               rw 
993   nice1                   1               0               1               rw 
994   nowerr                  0               0               1               rw 
995   pio_mode                write-only      0               255             w 
996   slow                    0               0               1               rw 
997   unmaskirq               0               0               1               rw 
998   using_dma               0               0               1               rw 
999
1000
1001 1.4 Networking info in /proc/net
1002 --------------------------------
1003
1004 The subdirectory  /proc/net  follows  the  usual  pattern. Table 1-8 shows the
1005 additional values  you  get  for  IP  version 6 if you configure the kernel to
1006 support this. Table 1-9 lists the files and their meaning.
1007
1008
1009 Table 1-8: IPv6 info in /proc/net
1010 ..............................................................................
1011  File       Content                                               
1012  udp6       UDP sockets (IPv6)                                    
1013  tcp6       TCP sockets (IPv6)                                    
1014  raw6       Raw device statistics (IPv6)                          
1015  igmp6      IP multicast addresses, which this host joined (IPv6) 
1016  if_inet6   List of IPv6 interface addresses                      
1017  ipv6_route Kernel routing table for IPv6                         
1018  rt6_stats  Global IPv6 routing tables statistics                 
1019  sockstat6  Socket statistics (IPv6)                              
1020  snmp6      Snmp data (IPv6)                                      
1021 ..............................................................................
1022
1023
1024 Table 1-9: Network info in /proc/net
1025 ..............................................................................
1026  File          Content                                                         
1027  arp           Kernel  ARP table                                               
1028  dev           network devices with statistics                                 
1029  dev_mcast     the Layer2 multicast groups a device is listening too
1030                (interface index, label, number of references, number of bound
1031                addresses). 
1032  dev_stat      network device status                                           
1033  ip_fwchains   Firewall chain linkage                                          
1034  ip_fwnames    Firewall chain names                                            
1035  ip_masq       Directory containing the masquerading tables                    
1036  ip_masquerade Major masquerading table                                        
1037  netstat       Network statistics                                              
1038  raw           raw device statistics                                           
1039  route         Kernel routing table                                            
1040  rpc           Directory containing rpc info                                   
1041  rt_cache      Routing cache                                                   
1042  snmp          SNMP data                                                       
1043  sockstat      Socket statistics                                               
1044  tcp           TCP  sockets                                                    
1045  udp           UDP sockets                                                     
1046  unix          UNIX domain sockets                                             
1047  wireless      Wireless interface data (Wavelan etc)                           
1048  igmp          IP multicast addresses, which this host joined                  
1049  psched        Global packet scheduler parameters.                             
1050  netlink       List of PF_NETLINK sockets                                      
1051  ip_mr_vifs    List of multicast virtual interfaces                            
1052  ip_mr_cache   List of multicast routing cache                                 
1053 ..............................................................................
1054
1055 You can  use  this  information  to see which network devices are available in
1056 your system and how much traffic was routed over those devices:
1057
1058   > cat /proc/net/dev 
1059   Inter-|Receive                                                   |[... 
1060    face |bytes    packets errs drop fifo frame compressed multicast|[... 
1061       lo:  908188   5596     0    0    0     0          0         0 [...         
1062     ppp0:15475140  20721   410    0    0   410          0         0 [...  
1063     eth0:  614530   7085     0    0    0     0          0         1 [... 
1064    
1065   ...] Transmit 
1066   ...] bytes    packets errs drop fifo colls carrier compressed 
1067   ...]  908188     5596    0    0    0     0       0          0 
1068   ...] 1375103    17405    0    0    0     0       0          0 
1069   ...] 1703981     5535    0    0    0     3       0          0 
1070
1071 In addition, each Channel Bond interface has its own directory.  For
1072 example, the bond0 device will have a directory called /proc/net/bond0/.
1073 It will contain information that is specific to that bond, such as the
1074 current slaves of the bond, the link status of the slaves, and how
1075 many times the slaves link has failed.
1076
1077 1.5 SCSI info
1078 -------------
1079
1080 If you  have  a  SCSI  host adapter in your system, you'll find a subdirectory
1081 named after  the driver for this adapter in /proc/scsi. You'll also see a list
1082 of all recognized SCSI devices in /proc/scsi:
1083
1084   >cat /proc/scsi/scsi 
1085   Attached devices: 
1086   Host: scsi0 Channel: 00 Id: 00 Lun: 00 
1087     Vendor: IBM      Model: DGHS09U          Rev: 03E0 
1088     Type:   Direct-Access                    ANSI SCSI revision: 03 
1089   Host: scsi0 Channel: 00 Id: 06 Lun: 00 
1090     Vendor: PIONEER  Model: CD-ROM DR-U06S   Rev: 1.04 
1091     Type:   CD-ROM                           ANSI SCSI revision: 02 
1092
1093
1094 The directory  named  after  the driver has one file for each adapter found in
1095 the system.  These  files  contain information about the controller, including
1096 the used  IRQ  and  the  IO  address range. The amount of information shown is
1097 dependent on  the adapter you use. The example shows the output for an Adaptec
1098 AHA-2940 SCSI adapter:
1099
1100   > cat /proc/scsi/aic7xxx/0 
1101    
1102   Adaptec AIC7xxx driver version: 5.1.19/3.2.4 
1103   Compile Options: 
1104     TCQ Enabled By Default : Disabled 
1105     AIC7XXX_PROC_STATS     : Disabled 
1106     AIC7XXX_RESET_DELAY    : 5 
1107   Adapter Configuration: 
1108              SCSI Adapter: Adaptec AHA-294X Ultra SCSI host adapter 
1109                              Ultra Wide Controller 
1110       PCI MMAPed I/O Base: 0xeb001000 
1111    Adapter SEEPROM Config: SEEPROM found and used. 
1112         Adaptec SCSI BIOS: Enabled 
1113                       IRQ: 10 
1114                      SCBs: Active 0, Max Active 2, 
1115                            Allocated 15, HW 16, Page 255 
1116                Interrupts: 160328 
1117         BIOS Control Word: 0x18b6 
1118      Adapter Control Word: 0x005b 
1119      Extended Translation: Enabled 
1120   Disconnect Enable Flags: 0xffff 
1121        Ultra Enable Flags: 0x0001 
1122    Tag Queue Enable Flags: 0x0000 
1123   Ordered Queue Tag Flags: 0x0000 
1124   Default Tag Queue Depth: 8 
1125       Tagged Queue By Device array for aic7xxx host instance 0: 
1126         {255,255,255,255,255,255,255,255,255,255,255,255,255,255,255,255} 
1127       Actual queue depth per device for aic7xxx host instance 0: 
1128         {1,1,1,1,1,1,1,1,1,1,1,1,1,1,1,1} 
1129   Statistics: 
1130   (scsi0:0:0:0) 
1131     Device using Wide/Sync transfers at 40.0 MByte/sec, offset 8 
1132     Transinfo settings: current(12/8/1/0), goal(12/8/1/0), user(12/15/1/0) 
1133     Total transfers 160151 (74577 reads and 85574 writes) 
1134   (scsi0:0:6:0) 
1135     Device using Narrow/Sync transfers at 5.0 MByte/sec, offset 15 
1136     Transinfo settings: current(50/15/0/0), goal(50/15/0/0), user(50/15/0/0) 
1137     Total transfers 0 (0 reads and 0 writes) 
1138
1139
1140 1.6 Parallel port info in /proc/parport
1141 ---------------------------------------
1142
1143 The directory  /proc/parport  contains information about the parallel ports of
1144 your system.  It  has  one  subdirectory  for  each port, named after the port
1145 number (0,1,2,...).
1146
1147 These directories contain the four files shown in Table 1-10.
1148
1149
1150 Table 1-10: Files in /proc/parport
1151 ..............................................................................
1152  File      Content                                                             
1153  autoprobe Any IEEE-1284 device ID information that has been acquired.         
1154  devices   list of the device drivers using that port. A + will appear by the
1155            name of the device currently using the port (it might not appear
1156            against any). 
1157  hardware  Parallel port's base address, IRQ line and DMA channel.             
1158  irq       IRQ that parport is using for that port. This is in a separate
1159            file to allow you to alter it by writing a new value in (IRQ
1160            number or none). 
1161 ..............................................................................
1162
1163 1.7 TTY info in /proc/tty
1164 -------------------------
1165
1166 Information about  the  available  and actually used tty's can be found in the
1167 directory /proc/tty.You'll  find  entries  for drivers and line disciplines in
1168 this directory, as shown in Table 1-11.
1169
1170
1171 Table 1-11: Files in /proc/tty
1172 ..............................................................................
1173  File          Content                                        
1174  drivers       list of drivers and their usage                
1175  ldiscs        registered line disciplines                    
1176  driver/serial usage statistic and status of single tty lines 
1177 ..............................................................................
1178
1179 To see  which  tty's  are  currently in use, you can simply look into the file
1180 /proc/tty/drivers:
1181
1182   > cat /proc/tty/drivers 
1183   pty_slave            /dev/pts      136   0-255 pty:slave 
1184   pty_master           /dev/ptm      128   0-255 pty:master 
1185   pty_slave            /dev/ttyp       3   0-255 pty:slave 
1186   pty_master           /dev/pty        2   0-255 pty:master 
1187   serial               /dev/cua        5   64-67 serial:callout 
1188   serial               /dev/ttyS       4   64-67 serial 
1189   /dev/tty0            /dev/tty0       4       0 system:vtmaster 
1190   /dev/ptmx            /dev/ptmx       5       2 system 
1191   /dev/console         /dev/console    5       1 system:console 
1192   /dev/tty             /dev/tty        5       0 system:/dev/tty 
1193   unknown              /dev/tty        4    1-63 console 
1194
1195
1196 1.8 Miscellaneous kernel statistics in /proc/stat
1197 -------------------------------------------------
1198
1199 Various pieces   of  information about  kernel activity  are  available in the
1200 /proc/stat file.  All  of  the numbers reported  in  this file are  aggregates
1201 since the system first booted.  For a quick look, simply cat the file:
1202
1203   > cat /proc/stat
1204   cpu  2255 34 2290 22625563 6290 127 456 0 0
1205   cpu0 1132 34 1441 11311718 3675 127 438 0 0
1206   cpu1 1123 0 849 11313845 2614 0 18 0 0
1207   intr 114930548 113199788 3 0 5 263 0 4 [... lots more numbers ...]
1208   ctxt 1990473
1209   btime 1062191376
1210   processes 2915
1211   procs_running 1
1212   procs_blocked 0
1213   softirq 183433 0 21755 12 39 1137 231 21459 2263
1214
1215 The very first  "cpu" line aggregates the  numbers in all  of the other "cpuN"
1216 lines.  These numbers identify the amount of time the CPU has spent performing
1217 different kinds of work.  Time units are in USER_HZ (typically hundredths of a
1218 second).  The meanings of the columns are as follows, from left to right:
1219
1220 - user: normal processes executing in user mode
1221 - nice: niced processes executing in user mode
1222 - system: processes executing in kernel mode
1223 - idle: twiddling thumbs
1224 - iowait: waiting for I/O to complete
1225 - irq: servicing interrupts
1226 - softirq: servicing softirqs
1227 - steal: involuntary wait
1228 - guest: running a normal guest
1229 - guest_nice: running a niced guest
1230
1231 The "intr" line gives counts of interrupts  serviced since boot time, for each
1232 of the  possible system interrupts.   The first  column  is the  total of  all
1233 interrupts serviced; each  subsequent column is the  total for that particular
1234 interrupt.
1235
1236 The "ctxt" line gives the total number of context switches across all CPUs.
1237
1238 The "btime" line gives  the time at which the  system booted, in seconds since
1239 the Unix epoch.
1240
1241 The "processes" line gives the number  of processes and threads created, which
1242 includes (but  is not limited  to) those  created by  calls to the  fork() and
1243 clone() system calls.
1244
1245 The "procs_running" line gives the total number of threads that are
1246 running or ready to run (i.e., the total number of runnable threads).
1247
1248 The   "procs_blocked" line gives  the  number of  processes currently blocked,
1249 waiting for I/O to complete.
1250
1251 The "softirq" line gives counts of softirqs serviced since boot time, for each
1252 of the possible system softirqs. The first column is the total of all
1253 softirqs serviced; each subsequent column is the total for that particular
1254 softirq.
1255
1256
1257 1.9 Ext4 file system parameters
1258 ------------------------------
1259
1260 Information about mounted ext4 file systems can be found in
1261 /proc/fs/ext4.  Each mounted filesystem will have a directory in
1262 /proc/fs/ext4 based on its device name (i.e., /proc/fs/ext4/hdc or
1263 /proc/fs/ext4/dm-0).   The files in each per-device directory are shown
1264 in Table 1-12, below.
1265
1266 Table 1-12: Files in /proc/fs/ext4/<devname>
1267 ..............................................................................
1268  File            Content                                        
1269  mb_groups       details of multiblock allocator buddy cache of free blocks
1270 ..............................................................................
1271
1272 2.0 /proc/consoles
1273 ------------------
1274 Shows registered system console lines.
1275
1276 To see which character device lines are currently used for the system console
1277 /dev/console, you may simply look into the file /proc/consoles:
1278
1279   > cat /proc/consoles
1280   tty0                 -WU (ECp)       4:7
1281   ttyS0                -W- (Ep)        4:64
1282
1283 The columns are:
1284
1285   device               name of the device
1286   operations           R = can do read operations
1287                        W = can do write operations
1288                        U = can do unblank
1289   flags                E = it is enabled
1290                        C = it is preferred console
1291                        B = it is primary boot console
1292                        p = it is used for printk buffer
1293                        b = it is not a TTY but a Braille device
1294                        a = it is safe to use when cpu is offline
1295   major:minor          major and minor number of the device separated by a colon
1296
1297 ------------------------------------------------------------------------------
1298 Summary
1299 ------------------------------------------------------------------------------
1300 The /proc file system serves information about the running system. It not only
1301 allows access to process data but also allows you to request the kernel status
1302 by reading files in the hierarchy.
1303
1304 The directory  structure  of /proc reflects the types of information and makes
1305 it easy, if not obvious, where to look for specific data.
1306 ------------------------------------------------------------------------------
1307
1308 ------------------------------------------------------------------------------
1309 CHAPTER 2: MODIFYING SYSTEM PARAMETERS
1310 ------------------------------------------------------------------------------
1311
1312 ------------------------------------------------------------------------------
1313 In This Chapter
1314 ------------------------------------------------------------------------------
1315 * Modifying kernel parameters by writing into files found in /proc/sys
1316 * Exploring the files which modify certain parameters
1317 * Review of the /proc/sys file tree
1318 ------------------------------------------------------------------------------
1319
1320
1321 A very  interesting part of /proc is the directory /proc/sys. This is not only
1322 a source  of  information,  it also allows you to change parameters within the
1323 kernel. Be  very  careful  when attempting this. You can optimize your system,
1324 but you  can  also  cause  it  to  crash.  Never  alter kernel parameters on a
1325 production system.  Set  up  a  development machine and test to make sure that
1326 everything works  the  way  you want it to. You may have no alternative but to
1327 reboot the machine once an error has been made.
1328
1329 To change  a  value,  simply  echo  the new value into the file. An example is
1330 given below  in the section on the file system data. You need to be root to do
1331 this. You  can  create  your  own  boot script to perform this every time your
1332 system boots.
1333
1334 The files  in /proc/sys can be used to fine tune and monitor miscellaneous and
1335 general things  in  the operation of the Linux kernel. Since some of the files
1336 can inadvertently  disrupt  your  system,  it  is  advisable  to  read  both
1337 documentation and  source  before actually making adjustments. In any case, be
1338 very careful  when  writing  to  any  of these files. The entries in /proc may
1339 change slightly between the 2.1.* and the 2.2 kernel, so if there is any doubt
1340 review the kernel documentation in the directory /usr/src/linux/Documentation.
1341 This chapter  is  heavily  based  on the documentation included in the pre 2.2
1342 kernels, and became part of it in version 2.2.1 of the Linux kernel.
1343
1344 Please see: Documentation/sysctl/ directory for descriptions of these
1345 entries.
1346
1347 ------------------------------------------------------------------------------
1348 Summary
1349 ------------------------------------------------------------------------------
1350 Certain aspects  of  kernel  behavior  can be modified at runtime, without the
1351 need to  recompile  the kernel, or even to reboot the system. The files in the
1352 /proc/sys tree  can  not only be read, but also modified. You can use the echo
1353 command to write value into these files, thereby changing the default settings
1354 of the kernel.
1355 ------------------------------------------------------------------------------
1356
1357 ------------------------------------------------------------------------------
1358 CHAPTER 3: PER-PROCESS PARAMETERS
1359 ------------------------------------------------------------------------------
1360
1361 3.1 /proc/<pid>/oom_adj & /proc/<pid>/oom_score_adj- Adjust the oom-killer score
1362 --------------------------------------------------------------------------------
1363
1364 These file can be used to adjust the badness heuristic used to select which
1365 process gets killed in out of memory conditions.
1366
1367 The badness heuristic assigns a value to each candidate task ranging from 0
1368 (never kill) to 1000 (always kill) to determine which process is targeted.  The
1369 units are roughly a proportion along that range of allowed memory the process
1370 may allocate from based on an estimation of its current memory and swap use.
1371 For example, if a task is using all allowed memory, its badness score will be
1372 1000.  If it is using half of its allowed memory, its score will be 500.
1373
1374 There is an additional factor included in the badness score: root
1375 processes are given 3% extra memory over other tasks.
1376
1377 The amount of "allowed" memory depends on the context in which the oom killer
1378 was called.  If it is due to the memory assigned to the allocating task's cpuset
1379 being exhausted, the allowed memory represents the set of mems assigned to that
1380 cpuset.  If it is due to a mempolicy's node(s) being exhausted, the allowed
1381 memory represents the set of mempolicy nodes.  If it is due to a memory
1382 limit (or swap limit) being reached, the allowed memory is that configured
1383 limit.  Finally, if it is due to the entire system being out of memory, the
1384 allowed memory represents all allocatable resources.
1385
1386 The value of /proc/<pid>/oom_score_adj is added to the badness score before it
1387 is used to determine which task to kill.  Acceptable values range from -1000
1388 (OOM_SCORE_ADJ_MIN) to +1000 (OOM_SCORE_ADJ_MAX).  This allows userspace to
1389 polarize the preference for oom killing either by always preferring a certain
1390 task or completely disabling it.  The lowest possible value, -1000, is
1391 equivalent to disabling oom killing entirely for that task since it will always
1392 report a badness score of 0.
1393
1394 Consequently, it is very simple for userspace to define the amount of memory to
1395 consider for each task.  Setting a /proc/<pid>/oom_score_adj value of +500, for
1396 example, is roughly equivalent to allowing the remainder of tasks sharing the
1397 same system, cpuset, mempolicy, or memory controller resources to use at least
1398 50% more memory.  A value of -500, on the other hand, would be roughly
1399 equivalent to discounting 50% of the task's allowed memory from being considered
1400 as scoring against the task.
1401
1402 For backwards compatibility with previous kernels, /proc/<pid>/oom_adj may also
1403 be used to tune the badness score.  Its acceptable values range from -16
1404 (OOM_ADJUST_MIN) to +15 (OOM_ADJUST_MAX) and a special value of -17
1405 (OOM_DISABLE) to disable oom killing entirely for that task.  Its value is
1406 scaled linearly with /proc/<pid>/oom_score_adj.
1407
1408 The value of /proc/<pid>/oom_score_adj may be reduced no lower than the last
1409 value set by a CAP_SYS_RESOURCE process. To reduce the value any lower
1410 requires CAP_SYS_RESOURCE.
1411
1412 Caveat: when a parent task is selected, the oom killer will sacrifice any first
1413 generation children with separate address spaces instead, if possible.  This
1414 avoids servers and important system daemons from being killed and loses the
1415 minimal amount of work.
1416
1417
1418 3.2 /proc/<pid>/oom_score - Display current oom-killer score
1419 -------------------------------------------------------------
1420
1421 This file can be used to check the current score used by the oom-killer is for
1422 any given <pid>. Use it together with /proc/<pid>/oom_score_adj to tune which
1423 process should be killed in an out-of-memory situation.
1424
1425
1426 3.3  /proc/<pid>/io - Display the IO accounting fields
1427 -------------------------------------------------------
1428
1429 This file contains IO statistics for each running process
1430
1431 Example
1432 -------
1433
1434 test:/tmp # dd if=/dev/zero of=/tmp/test.dat &
1435 [1] 3828
1436
1437 test:/tmp # cat /proc/3828/io
1438 rchar: 323934931
1439 wchar: 323929600
1440 syscr: 632687
1441 syscw: 632675
1442 read_bytes: 0
1443 write_bytes: 323932160
1444 cancelled_write_bytes: 0
1445
1446
1447 Description
1448 -----------
1449
1450 rchar
1451 -----
1452
1453 I/O counter: chars read
1454 The number of bytes which this task has caused to be read from storage. This
1455 is simply the sum of bytes which this process passed to read() and pread().
1456 It includes things like tty IO and it is unaffected by whether or not actual
1457 physical disk IO was required (the read might have been satisfied from
1458 pagecache)
1459
1460
1461 wchar
1462 -----
1463
1464 I/O counter: chars written
1465 The number of bytes which this task has caused, or shall cause to be written
1466 to disk. Similar caveats apply here as with rchar.
1467
1468
1469 syscr
1470 -----
1471
1472 I/O counter: read syscalls
1473 Attempt to count the number of read I/O operations, i.e. syscalls like read()
1474 and pread().
1475
1476
1477 syscw
1478 -----
1479
1480 I/O counter: write syscalls
1481 Attempt to count the number of write I/O operations, i.e. syscalls like
1482 write() and pwrite().
1483
1484
1485 read_bytes
1486 ----------
1487
1488 I/O counter: bytes read
1489 Attempt to count the number of bytes which this process really did cause to
1490 be fetched from the storage layer. Done at the submit_bio() level, so it is
1491 accurate for block-backed filesystems. <please add status regarding NFS and
1492 CIFS at a later time>
1493
1494
1495 write_bytes
1496 -----------
1497
1498 I/O counter: bytes written
1499 Attempt to count the number of bytes which this process caused to be sent to
1500 the storage layer. This is done at page-dirtying time.
1501
1502
1503 cancelled_write_bytes
1504 ---------------------
1505
1506 The big inaccuracy here is truncate. If a process writes 1MB to a file and
1507 then deletes the file, it will in fact perform no writeout. But it will have
1508 been accounted as having caused 1MB of write.
1509 In other words: The number of bytes which this process caused to not happen,
1510 by truncating pagecache. A task can cause "negative" IO too. If this task
1511 truncates some dirty pagecache, some IO which another task has been accounted
1512 for (in its write_bytes) will not be happening. We _could_ just subtract that
1513 from the truncating task's write_bytes, but there is information loss in doing
1514 that.
1515
1516
1517 Note
1518 ----
1519
1520 At its current implementation state, this is a bit racy on 32-bit machines: if
1521 process A reads process B's /proc/pid/io while process B is updating one of
1522 those 64-bit counters, process A could see an intermediate result.
1523
1524
1525 More information about this can be found within the taskstats documentation in
1526 Documentation/accounting.
1527
1528 3.4 /proc/<pid>/coredump_filter - Core dump filtering settings
1529 ---------------------------------------------------------------
1530 When a process is dumped, all anonymous memory is written to a core file as
1531 long as the size of the core file isn't limited. But sometimes we don't want
1532 to dump some memory segments, for example, huge shared memory. Conversely,
1533 sometimes we want to save file-backed memory segments into a core file, not
1534 only the individual files.
1535
1536 /proc/<pid>/coredump_filter allows you to customize which memory segments
1537 will be dumped when the <pid> process is dumped. coredump_filter is a bitmask
1538 of memory types. If a bit of the bitmask is set, memory segments of the
1539 corresponding memory type are dumped, otherwise they are not dumped.
1540
1541 The following 7 memory types are supported:
1542   - (bit 0) anonymous private memory
1543   - (bit 1) anonymous shared memory
1544   - (bit 2) file-backed private memory
1545   - (bit 3) file-backed shared memory
1546   - (bit 4) ELF header pages in file-backed private memory areas (it is
1547             effective only if the bit 2 is cleared)
1548   - (bit 5) hugetlb private memory
1549   - (bit 6) hugetlb shared memory
1550
1551   Note that MMIO pages such as frame buffer are never dumped and vDSO pages
1552   are always dumped regardless of the bitmask status.
1553
1554   Note bit 0-4 doesn't effect any hugetlb memory. hugetlb memory are only
1555   effected by bit 5-6.
1556
1557 Default value of coredump_filter is 0x23; this means all anonymous memory
1558 segments and hugetlb private memory are dumped.
1559
1560 If you don't want to dump all shared memory segments attached to pid 1234,
1561 write 0x21 to the process's proc file.
1562
1563   $ echo 0x21 > /proc/1234/coredump_filter
1564
1565 When a new process is created, the process inherits the bitmask status from its
1566 parent. It is useful to set up coredump_filter before the program runs.
1567 For example:
1568
1569   $ echo 0x7 > /proc/self/coredump_filter
1570   $ ./some_program
1571
1572 3.5     /proc/<pid>/mountinfo - Information about mounts
1573 --------------------------------------------------------
1574
1575 This file contains lines of the form:
1576
1577 36 35 98:0 /mnt1 /mnt2 rw,noatime master:1 - ext3 /dev/root rw,errors=continue
1578 (1)(2)(3)   (4)   (5)      (6)      (7)   (8) (9)   (10)         (11)
1579
1580 (1) mount ID:  unique identifier of the mount (may be reused after umount)
1581 (2) parent ID:  ID of parent (or of self for the top of the mount tree)
1582 (3) major:minor:  value of st_dev for files on filesystem
1583 (4) root:  root of the mount within the filesystem
1584 (5) mount point:  mount point relative to the process's root
1585 (6) mount options:  per mount options
1586 (7) optional fields:  zero or more fields of the form "tag[:value]"
1587 (8) separator:  marks the end of the optional fields
1588 (9) filesystem type:  name of filesystem of the form "type[.subtype]"
1589 (10) mount source:  filesystem specific information or "none"
1590 (11) super options:  per super block options
1591
1592 Parsers should ignore all unrecognised optional fields.  Currently the
1593 possible optional fields are:
1594
1595 shared:X  mount is shared in peer group X
1596 master:X  mount is slave to peer group X
1597 propagate_from:X  mount is slave and receives propagation from peer group X (*)
1598 unbindable  mount is unbindable
1599
1600 (*) X is the closest dominant peer group under the process's root.  If
1601 X is the immediate master of the mount, or if there's no dominant peer
1602 group under the same root, then only the "master:X" field is present
1603 and not the "propagate_from:X" field.
1604
1605 For more information on mount propagation see:
1606
1607   Documentation/filesystems/sharedsubtree.txt
1608
1609
1610 3.6     /proc/<pid>/comm  & /proc/<pid>/task/<tid>/comm
1611 --------------------------------------------------------
1612 These files provide a method to access a tasks comm value. It also allows for
1613 a task to set its own or one of its thread siblings comm value. The comm value
1614 is limited in size compared to the cmdline value, so writing anything longer
1615 then the kernel's TASK_COMM_LEN (currently 16 chars) will result in a truncated
1616 comm value.
1617
1618
1619 3.7     /proc/<pid>/task/<tid>/children - Information about task children
1620 -------------------------------------------------------------------------
1621 This file provides a fast way to retrieve first level children pids
1622 of a task pointed by <pid>/<tid> pair. The format is a space separated
1623 stream of pids.
1624
1625 Note the "first level" here -- if a child has own children they will
1626 not be listed here, one needs to read /proc/<children-pid>/task/<tid>/children
1627 to obtain the descendants.
1628
1629 Since this interface is intended to be fast and cheap it doesn't
1630 guarantee to provide precise results and some children might be
1631 skipped, especially if they've exited right after we printed their
1632 pids, so one need to either stop or freeze processes being inspected
1633 if precise results are needed.
1634
1635
1636 ------------------------------------------------------------------------------
1637 Configuring procfs
1638 ------------------------------------------------------------------------------
1639
1640 4.1     Mount options
1641 ---------------------
1642
1643 The following mount options are supported:
1644
1645         hidepid=        Set /proc/<pid>/ access mode.
1646         gid=            Set the group authorized to learn processes information.
1647
1648 hidepid=0 means classic mode - everybody may access all /proc/<pid>/ directories
1649 (default).
1650
1651 hidepid=1 means users may not access any /proc/<pid>/ directories but their
1652 own.  Sensitive files like cmdline, sched*, status are now protected against
1653 other users.  This makes it impossible to learn whether any user runs
1654 specific program (given the program doesn't reveal itself by its behaviour).
1655 As an additional bonus, as /proc/<pid>/cmdline is unaccessible for other users,
1656 poorly written programs passing sensitive information via program arguments are
1657 now protected against local eavesdroppers.
1658
1659 hidepid=2 means hidepid=1 plus all /proc/<pid>/ will be fully invisible to other
1660 users.  It doesn't mean that it hides a fact whether a process with a specific
1661 pid value exists (it can be learned by other means, e.g. by "kill -0 $PID"),
1662 but it hides process' uid and gid, which may be learned by stat()'ing
1663 /proc/<pid>/ otherwise.  It greatly complicates an intruder's task of gathering
1664 information about running processes, whether some daemon runs with elevated
1665 privileges, whether other user runs some sensitive program, whether other users
1666 run any program at all, etc.
1667
1668 gid= defines a group authorized to learn processes information otherwise
1669 prohibited by hidepid=.  If you use some daemon like identd which needs to learn
1670 information about processes information, just add identd to this group.