]> git.openfabrics.org - ~shefty/rdma-dev.git/blob - Documentation/filesystems/proc.txt
procfs: add VmFlags field in smaps output
[~shefty/rdma-dev.git] / Documentation / filesystems / proc.txt
1 ------------------------------------------------------------------------------
2                        T H E  /proc   F I L E S Y S T E M
3 ------------------------------------------------------------------------------
4 /proc/sys         Terrehon Bowden <terrehon@pacbell.net>        October 7 1999
5                   Bodo Bauer <bb@ricochet.net>
6
7 2.4.x update      Jorge Nerin <comandante@zaralinux.com>      November 14 2000
8 move /proc/sys    Shen Feng <shen@cn.fujitsu.com>                 April 1 2009
9 ------------------------------------------------------------------------------
10 Version 1.3                                              Kernel version 2.2.12
11                                               Kernel version 2.4.0-test11-pre4
12 ------------------------------------------------------------------------------
13 fixes/update part 1.1  Stefani Seibold <stefani@seibold.net>       June 9 2009
14
15 Table of Contents
16 -----------------
17
18   0     Preface
19   0.1   Introduction/Credits
20   0.2   Legal Stuff
21
22   1     Collecting System Information
23   1.1   Process-Specific Subdirectories
24   1.2   Kernel data
25   1.3   IDE devices in /proc/ide
26   1.4   Networking info in /proc/net
27   1.5   SCSI info
28   1.6   Parallel port info in /proc/parport
29   1.7   TTY info in /proc/tty
30   1.8   Miscellaneous kernel statistics in /proc/stat
31   1.9 Ext4 file system parameters
32
33   2     Modifying System Parameters
34
35   3     Per-Process Parameters
36   3.1   /proc/<pid>/oom_adj & /proc/<pid>/oom_score_adj - Adjust the oom-killer
37                                                                 score
38   3.2   /proc/<pid>/oom_score - Display current oom-killer score
39   3.3   /proc/<pid>/io - Display the IO accounting fields
40   3.4   /proc/<pid>/coredump_filter - Core dump filtering settings
41   3.5   /proc/<pid>/mountinfo - Information about mounts
42   3.6   /proc/<pid>/comm  & /proc/<pid>/task/<tid>/comm
43   3.7   /proc/<pid>/task/<tid>/children - Information about task children
44
45   4     Configuring procfs
46   4.1   Mount options
47
48 ------------------------------------------------------------------------------
49 Preface
50 ------------------------------------------------------------------------------
51
52 0.1 Introduction/Credits
53 ------------------------
54
55 This documentation is  part of a soon (or  so we hope) to be  released book on
56 the SuSE  Linux distribution. As  there is  no complete documentation  for the
57 /proc file system and we've used  many freely available sources to write these
58 chapters, it  seems only fair  to give the work  back to the  Linux community.
59 This work is  based on the 2.2.*  kernel version and the  upcoming 2.4.*. I'm
60 afraid it's still far from complete, but we  hope it will be useful. As far as
61 we know, it is the first 'all-in-one' document about the /proc file system. It
62 is focused  on the Intel  x86 hardware,  so if you  are looking for  PPC, ARM,
63 SPARC, AXP, etc., features, you probably  won't find what you are looking for.
64 It also only covers IPv4 networking, not IPv6 nor other protocols - sorry. But
65 additions and patches  are welcome and will  be added to this  document if you
66 mail them to Bodo.
67
68 We'd like  to  thank Alan Cox, Rik van Riel, and Alexey Kuznetsov and a lot of
69 other people for help compiling this documentation. We'd also like to extend a
70 special thank  you to Andi Kleen for documentation, which we relied on heavily
71 to create  this  document,  as well as the additional information he provided.
72 Thanks to  everybody  else  who contributed source or docs to the Linux kernel
73 and helped create a great piece of software... :)
74
75 If you  have  any comments, corrections or additions, please don't hesitate to
76 contact Bodo  Bauer  at  bb@ricochet.net.  We'll  be happy to add them to this
77 document.
78
79 The   latest   version    of   this   document   is    available   online   at
80 http://tldp.org/LDP/Linux-Filesystem-Hierarchy/html/proc.html
81
82 If  the above  direction does  not works  for you,  you could  try the  kernel
83 mailing  list  at  linux-kernel@vger.kernel.org  and/or try  to  reach  me  at
84 comandante@zaralinux.com.
85
86 0.2 Legal Stuff
87 ---------------
88
89 We don't  guarantee  the  correctness  of this document, and if you come to us
90 complaining about  how  you  screwed  up  your  system  because  of  incorrect
91 documentation, we won't feel responsible...
92
93 ------------------------------------------------------------------------------
94 CHAPTER 1: COLLECTING SYSTEM INFORMATION
95 ------------------------------------------------------------------------------
96
97 ------------------------------------------------------------------------------
98 In This Chapter
99 ------------------------------------------------------------------------------
100 * Investigating  the  properties  of  the  pseudo  file  system  /proc and its
101   ability to provide information on the running Linux system
102 * Examining /proc's structure
103 * Uncovering  various  information  about the kernel and the processes running
104   on the system
105 ------------------------------------------------------------------------------
106
107
108 The proc  file  system acts as an interface to internal data structures in the
109 kernel. It  can  be  used to obtain information about the system and to change
110 certain kernel parameters at runtime (sysctl).
111
112 First, we'll  take  a  look  at the read-only parts of /proc. In Chapter 2, we
113 show you how you can use /proc/sys to change settings.
114
115 1.1 Process-Specific Subdirectories
116 -----------------------------------
117
118 The directory  /proc  contains  (among other things) one subdirectory for each
119 process running on the system, which is named after the process ID (PID).
120
121 The link  self  points  to  the  process reading the file system. Each process
122 subdirectory has the entries listed in Table 1-1.
123
124
125 Table 1-1: Process specific entries in /proc
126 ..............................................................................
127  File           Content
128  clear_refs     Clears page referenced bits shown in smaps output
129  cmdline        Command line arguments
130  cpu            Current and last cpu in which it was executed   (2.4)(smp)
131  cwd            Link to the current working directory
132  environ        Values of environment variables
133  exe            Link to the executable of this process
134  fd             Directory, which contains all file descriptors
135  maps           Memory maps to executables and library files    (2.4)
136  mem            Memory held by this process
137  root           Link to the root directory of this process
138  stat           Process status
139  statm          Process memory status information
140  status         Process status in human readable form
141  wchan          If CONFIG_KALLSYMS is set, a pre-decoded wchan
142  pagemap        Page table
143  stack          Report full stack trace, enable via CONFIG_STACKTRACE
144  smaps          a extension based on maps, showing the memory consumption of
145                 each mapping and flags associated with it
146 ..............................................................................
147
148 For example, to get the status information of a process, all you have to do is
149 read the file /proc/PID/status:
150
151   >cat /proc/self/status
152   Name:   cat
153   State:  R (running)
154   Tgid:   5452
155   Pid:    5452
156   PPid:   743
157   TracerPid:      0                                             (2.4)
158   Uid:    501     501     501     501
159   Gid:    100     100     100     100
160   FDSize: 256
161   Groups: 100 14 16
162   VmPeak:     5004 kB
163   VmSize:     5004 kB
164   VmLck:         0 kB
165   VmHWM:       476 kB
166   VmRSS:       476 kB
167   VmData:      156 kB
168   VmStk:        88 kB
169   VmExe:        68 kB
170   VmLib:      1412 kB
171   VmPTE:        20 kb
172   VmSwap:        0 kB
173   Threads:        1
174   SigQ:   0/28578
175   SigPnd: 0000000000000000
176   ShdPnd: 0000000000000000
177   SigBlk: 0000000000000000
178   SigIgn: 0000000000000000
179   SigCgt: 0000000000000000
180   CapInh: 00000000fffffeff
181   CapPrm: 0000000000000000
182   CapEff: 0000000000000000
183   CapBnd: ffffffffffffffff
184   voluntary_ctxt_switches:        0
185   nonvoluntary_ctxt_switches:     1
186
187 This shows you nearly the same information you would get if you viewed it with
188 the ps  command.  In  fact,  ps  uses  the  proc  file  system  to  obtain its
189 information.  But you get a more detailed  view of the  process by reading the
190 file /proc/PID/status. It fields are described in table 1-2.
191
192 The  statm  file  contains  more  detailed  information about the process
193 memory usage. Its seven fields are explained in Table 1-3.  The stat file
194 contains details information about the process itself.  Its fields are
195 explained in Table 1-4.
196
197 (for SMP CONFIG users)
198 For making accounting scalable, RSS related information are handled in
199 asynchronous manner and the vaule may not be very precise. To see a precise
200 snapshot of a moment, you can see /proc/<pid>/smaps file and scan page table.
201 It's slow but very precise.
202
203 Table 1-2: Contents of the status files (as of 2.6.30-rc7)
204 ..............................................................................
205  Field                       Content
206  Name                        filename of the executable
207  State                       state (R is running, S is sleeping, D is sleeping
208                              in an uninterruptible wait, Z is zombie,
209                              T is traced or stopped)
210  Tgid                        thread group ID
211  Pid                         process id
212  PPid                        process id of the parent process
213  TracerPid                   PID of process tracing this process (0 if not)
214  Uid                         Real, effective, saved set, and  file system UIDs
215  Gid                         Real, effective, saved set, and  file system GIDs
216  FDSize                      number of file descriptor slots currently allocated
217  Groups                      supplementary group list
218  VmPeak                      peak virtual memory size
219  VmSize                      total program size
220  VmLck                       locked memory size
221  VmHWM                       peak resident set size ("high water mark")
222  VmRSS                       size of memory portions
223  VmData                      size of data, stack, and text segments
224  VmStk                       size of data, stack, and text segments
225  VmExe                       size of text segment
226  VmLib                       size of shared library code
227  VmPTE                       size of page table entries
228  VmSwap                      size of swap usage (the number of referred swapents)
229  Threads                     number of threads
230  SigQ                        number of signals queued/max. number for queue
231  SigPnd                      bitmap of pending signals for the thread
232  ShdPnd                      bitmap of shared pending signals for the process
233  SigBlk                      bitmap of blocked signals
234  SigIgn                      bitmap of ignored signals
235  SigCgt                      bitmap of catched signals
236  CapInh                      bitmap of inheritable capabilities
237  CapPrm                      bitmap of permitted capabilities
238  CapEff                      bitmap of effective capabilities
239  CapBnd                      bitmap of capabilities bounding set
240  Cpus_allowed                mask of CPUs on which this process may run
241  Cpus_allowed_list           Same as previous, but in "list format"
242  Mems_allowed                mask of memory nodes allowed to this process
243  Mems_allowed_list           Same as previous, but in "list format"
244  voluntary_ctxt_switches     number of voluntary context switches
245  nonvoluntary_ctxt_switches  number of non voluntary context switches
246 ..............................................................................
247
248 Table 1-3: Contents of the statm files (as of 2.6.8-rc3)
249 ..............................................................................
250  Field    Content
251  size     total program size (pages)            (same as VmSize in status)
252  resident size of memory portions (pages)       (same as VmRSS in status)
253  shared   number of pages that are shared       (i.e. backed by a file)
254  trs      number of pages that are 'code'       (not including libs; broken,
255                                                         includes data segment)
256  lrs      number of pages of library            (always 0 on 2.6)
257  drs      number of pages of data/stack         (including libs; broken,
258                                                         includes library text)
259  dt       number of dirty pages                 (always 0 on 2.6)
260 ..............................................................................
261
262
263 Table 1-4: Contents of the stat files (as of 2.6.30-rc7)
264 ..............................................................................
265  Field          Content
266   pid           process id
267   tcomm         filename of the executable
268   state         state (R is running, S is sleeping, D is sleeping in an
269                 uninterruptible wait, Z is zombie, T is traced or stopped)
270   ppid          process id of the parent process
271   pgrp          pgrp of the process
272   sid           session id
273   tty_nr        tty the process uses
274   tty_pgrp      pgrp of the tty
275   flags         task flags
276   min_flt       number of minor faults
277   cmin_flt      number of minor faults with child's
278   maj_flt       number of major faults
279   cmaj_flt      number of major faults with child's
280   utime         user mode jiffies
281   stime         kernel mode jiffies
282   cutime        user mode jiffies with child's
283   cstime        kernel mode jiffies with child's
284   priority      priority level
285   nice          nice level
286   num_threads   number of threads
287   it_real_value (obsolete, always 0)
288   start_time    time the process started after system boot
289   vsize         virtual memory size
290   rss           resident set memory size
291   rsslim        current limit in bytes on the rss
292   start_code    address above which program text can run
293   end_code      address below which program text can run
294   start_stack   address of the start of the main process stack
295   esp           current value of ESP
296   eip           current value of EIP
297   pending       bitmap of pending signals
298   blocked       bitmap of blocked signals
299   sigign        bitmap of ignored signals
300   sigcatch      bitmap of catched signals
301   wchan         address where process went to sleep
302   0             (place holder)
303   0             (place holder)
304   exit_signal   signal to send to parent thread on exit
305   task_cpu      which CPU the task is scheduled on
306   rt_priority   realtime priority
307   policy        scheduling policy (man sched_setscheduler)
308   blkio_ticks   time spent waiting for block IO
309   gtime         guest time of the task in jiffies
310   cgtime        guest time of the task children in jiffies
311   start_data    address above which program data+bss is placed
312   end_data      address below which program data+bss is placed
313   start_brk     address above which program heap can be expanded with brk()
314   arg_start     address above which program command line is placed
315   arg_end       address below which program command line is placed
316   env_start     address above which program environment is placed
317   env_end       address below which program environment is placed
318   exit_code     the thread's exit_code in the form reported by the waitpid system call
319 ..............................................................................
320
321 The /proc/PID/maps file containing the currently mapped memory regions and
322 their access permissions.
323
324 The format is:
325
326 address           perms offset  dev   inode      pathname
327
328 08048000-08049000 r-xp 00000000 03:00 8312       /opt/test
329 08049000-0804a000 rw-p 00001000 03:00 8312       /opt/test
330 0804a000-0806b000 rw-p 00000000 00:00 0          [heap]
331 a7cb1000-a7cb2000 ---p 00000000 00:00 0
332 a7cb2000-a7eb2000 rw-p 00000000 00:00 0
333 a7eb2000-a7eb3000 ---p 00000000 00:00 0
334 a7eb3000-a7ed5000 rw-p 00000000 00:00 0          [stack:1001]
335 a7ed5000-a8008000 r-xp 00000000 03:00 4222       /lib/libc.so.6
336 a8008000-a800a000 r--p 00133000 03:00 4222       /lib/libc.so.6
337 a800a000-a800b000 rw-p 00135000 03:00 4222       /lib/libc.so.6
338 a800b000-a800e000 rw-p 00000000 00:00 0
339 a800e000-a8022000 r-xp 00000000 03:00 14462      /lib/libpthread.so.0
340 a8022000-a8023000 r--p 00013000 03:00 14462      /lib/libpthread.so.0
341 a8023000-a8024000 rw-p 00014000 03:00 14462      /lib/libpthread.so.0
342 a8024000-a8027000 rw-p 00000000 00:00 0
343 a8027000-a8043000 r-xp 00000000 03:00 8317       /lib/ld-linux.so.2
344 a8043000-a8044000 r--p 0001b000 03:00 8317       /lib/ld-linux.so.2
345 a8044000-a8045000 rw-p 0001c000 03:00 8317       /lib/ld-linux.so.2
346 aff35000-aff4a000 rw-p 00000000 00:00 0          [stack]
347 ffffe000-fffff000 r-xp 00000000 00:00 0          [vdso]
348
349 where "address" is the address space in the process that it occupies, "perms"
350 is a set of permissions:
351
352  r = read
353  w = write
354  x = execute
355  s = shared
356  p = private (copy on write)
357
358 "offset" is the offset into the mapping, "dev" is the device (major:minor), and
359 "inode" is the inode  on that device.  0 indicates that  no inode is associated
360 with the memory region, as the case would be with BSS (uninitialized data).
361 The "pathname" shows the name associated file for this mapping.  If the mapping
362 is not associated with a file:
363
364  [heap]                   = the heap of the program
365  [stack]                  = the stack of the main process
366  [stack:1001]             = the stack of the thread with tid 1001
367  [vdso]                   = the "virtual dynamic shared object",
368                             the kernel system call handler
369
370  or if empty, the mapping is anonymous.
371
372 The /proc/PID/task/TID/maps is a view of the virtual memory from the viewpoint
373 of the individual tasks of a process. In this file you will see a mapping marked
374 as [stack] if that task sees it as a stack. This is a key difference from the
375 content of /proc/PID/maps, where you will see all mappings that are being used
376 as stack by all of those tasks. Hence, for the example above, the task-level
377 map, i.e. /proc/PID/task/TID/maps for thread 1001 will look like this:
378
379 08048000-08049000 r-xp 00000000 03:00 8312       /opt/test
380 08049000-0804a000 rw-p 00001000 03:00 8312       /opt/test
381 0804a000-0806b000 rw-p 00000000 00:00 0          [heap]
382 a7cb1000-a7cb2000 ---p 00000000 00:00 0
383 a7cb2000-a7eb2000 rw-p 00000000 00:00 0
384 a7eb2000-a7eb3000 ---p 00000000 00:00 0
385 a7eb3000-a7ed5000 rw-p 00000000 00:00 0          [stack]
386 a7ed5000-a8008000 r-xp 00000000 03:00 4222       /lib/libc.so.6
387 a8008000-a800a000 r--p 00133000 03:00 4222       /lib/libc.so.6
388 a800a000-a800b000 rw-p 00135000 03:00 4222       /lib/libc.so.6
389 a800b000-a800e000 rw-p 00000000 00:00 0
390 a800e000-a8022000 r-xp 00000000 03:00 14462      /lib/libpthread.so.0
391 a8022000-a8023000 r--p 00013000 03:00 14462      /lib/libpthread.so.0
392 a8023000-a8024000 rw-p 00014000 03:00 14462      /lib/libpthread.so.0
393 a8024000-a8027000 rw-p 00000000 00:00 0
394 a8027000-a8043000 r-xp 00000000 03:00 8317       /lib/ld-linux.so.2
395 a8043000-a8044000 r--p 0001b000 03:00 8317       /lib/ld-linux.so.2
396 a8044000-a8045000 rw-p 0001c000 03:00 8317       /lib/ld-linux.so.2
397 aff35000-aff4a000 rw-p 00000000 00:00 0
398 ffffe000-fffff000 r-xp 00000000 00:00 0          [vdso]
399
400 The /proc/PID/smaps is an extension based on maps, showing the memory
401 consumption for each of the process's mappings. For each of mappings there
402 is a series of lines such as the following:
403
404 08048000-080bc000 r-xp 00000000 03:02 13130      /bin/bash
405 Size:               1084 kB
406 Rss:                 892 kB
407 Pss:                 374 kB
408 Shared_Clean:        892 kB
409 Shared_Dirty:          0 kB
410 Private_Clean:         0 kB
411 Private_Dirty:         0 kB
412 Referenced:          892 kB
413 Anonymous:             0 kB
414 Swap:                  0 kB
415 KernelPageSize:        4 kB
416 MMUPageSize:           4 kB
417 Locked:              374 kB
418 VmFlags: rd ex mr mw me de
419
420 the first of these lines shows the same information as is displayed for the
421 mapping in /proc/PID/maps.  The remaining lines show the size of the mapping
422 (size), the amount of the mapping that is currently resident in RAM (RSS), the
423 process' proportional share of this mapping (PSS), the number of clean and
424 dirty private pages in the mapping.  Note that even a page which is part of a
425 MAP_SHARED mapping, but has only a single pte mapped, i.e.  is currently used
426 by only one process, is accounted as private and not as shared.  "Referenced"
427 indicates the amount of memory currently marked as referenced or accessed.
428 "Anonymous" shows the amount of memory that does not belong to any file.  Even
429 a mapping associated with a file may contain anonymous pages: when MAP_PRIVATE
430 and a page is modified, the file page is replaced by a private anonymous copy.
431 "Swap" shows how much would-be-anonymous memory is also used, but out on
432 swap.
433
434 "VmFlags" field deserves a separate description. This member represents the kernel
435 flags associated with the particular virtual memory area in two letter encoded
436 manner. The codes are the following:
437     rd  - readable
438     wr  - writeable
439     ex  - executable
440     sh  - shared
441     mr  - may read
442     mw  - may write
443     me  - may execute
444     ms  - may share
445     gd  - stack segment growns down
446     pf  - pure PFN range
447     dw  - disabled write to the mapped file
448     lo  - pages are locked in memory
449     io  - memory mapped I/O area
450     sr  - sequential read advise provided
451     rr  - random read advise provided
452     dc  - do not copy area on fork
453     de  - do not expand area on remapping
454     ac  - area is accountable
455     nr  - swap space is not reserved for the area
456     ht  - area uses huge tlb pages
457     nl  - non-linear mapping
458     ar  - architecture specific flag
459     dd  - do not include area into core dump
460     mm  - mixed map area
461     hg  - huge page advise flag
462     nh  - no-huge page advise flag
463     mg  - mergable advise flag
464
465 Note that there is no guarantee that every flag and associated mnemonic will
466 be present in all further kernel releases. Things get changed, the flags may
467 be vanished or the reverse -- new added.
468
469 This file is only present if the CONFIG_MMU kernel configuration option is
470 enabled.
471
472 The /proc/PID/clear_refs is used to reset the PG_Referenced and ACCESSED/YOUNG
473 bits on both physical and virtual pages associated with a process.
474 To clear the bits for all the pages associated with the process
475     > echo 1 > /proc/PID/clear_refs
476
477 To clear the bits for the anonymous pages associated with the process
478     > echo 2 > /proc/PID/clear_refs
479
480 To clear the bits for the file mapped pages associated with the process
481     > echo 3 > /proc/PID/clear_refs
482 Any other value written to /proc/PID/clear_refs will have no effect.
483
484 The /proc/pid/pagemap gives the PFN, which can be used to find the pageflags
485 using /proc/kpageflags and number of times a page is mapped using
486 /proc/kpagecount. For detailed explanation, see Documentation/vm/pagemap.txt.
487
488 1.2 Kernel data
489 ---------------
490
491 Similar to  the  process entries, the kernel data files give information about
492 the running kernel. The files used to obtain this information are contained in
493 /proc and  are  listed  in Table 1-5. Not all of these will be present in your
494 system. It  depends  on the kernel configuration and the loaded modules, which
495 files are there, and which are missing.
496
497 Table 1-5: Kernel info in /proc
498 ..............................................................................
499  File        Content                                           
500  apm         Advanced power management info                    
501  buddyinfo   Kernel memory allocator information (see text)     (2.5)
502  bus         Directory containing bus specific information     
503  cmdline     Kernel command line                               
504  cpuinfo     Info about the CPU                                
505  devices     Available devices (block and character)           
506  dma         Used DMS channels                                 
507  filesystems Supported filesystems                             
508  driver      Various drivers grouped here, currently rtc (2.4)
509  execdomains Execdomains, related to security                   (2.4)
510  fb          Frame Buffer devices                               (2.4)
511  fs          File system parameters, currently nfs/exports      (2.4)
512  ide         Directory containing info about the IDE subsystem 
513  interrupts  Interrupt usage                                   
514  iomem       Memory map                                         (2.4)
515  ioports     I/O port usage                                    
516  irq         Masks for irq to cpu affinity                      (2.4)(smp?)
517  isapnp      ISA PnP (Plug&Play) Info                           (2.4)
518  kcore       Kernel core image (can be ELF or A.OUT(deprecated in 2.4))   
519  kmsg        Kernel messages                                   
520  ksyms       Kernel symbol table                               
521  loadavg     Load average of last 1, 5 & 15 minutes                
522  locks       Kernel locks                                      
523  meminfo     Memory info                                       
524  misc        Miscellaneous                                     
525  modules     List of loaded modules                            
526  mounts      Mounted filesystems                               
527  net         Networking info (see text)                        
528  pagetypeinfo Additional page allocator information (see text)  (2.5)
529  partitions  Table of partitions known to the system           
530  pci         Deprecated info of PCI bus (new way -> /proc/bus/pci/,
531              decoupled by lspci                                 (2.4)
532  rtc         Real time clock                                   
533  scsi        SCSI info (see text)                              
534  slabinfo    Slab pool info                                    
535  softirqs    softirq usage
536  stat        Overall statistics                                
537  swaps       Swap space utilization                            
538  sys         See chapter 2                                     
539  sysvipc     Info of SysVIPC Resources (msg, sem, shm)          (2.4)
540  tty         Info of tty drivers
541  uptime      System uptime                                     
542  version     Kernel version                                    
543  video       bttv info of video resources                       (2.4)
544  vmallocinfo Show vmalloced areas
545 ..............................................................................
546
547 You can,  for  example,  check  which interrupts are currently in use and what
548 they are used for by looking in the file /proc/interrupts:
549
550   > cat /proc/interrupts 
551              CPU0        
552     0:    8728810          XT-PIC  timer 
553     1:        895          XT-PIC  keyboard 
554     2:          0          XT-PIC  cascade 
555     3:     531695          XT-PIC  aha152x 
556     4:    2014133          XT-PIC  serial 
557     5:      44401          XT-PIC  pcnet_cs 
558     8:          2          XT-PIC  rtc 
559    11:          8          XT-PIC  i82365 
560    12:     182918          XT-PIC  PS/2 Mouse 
561    13:          1          XT-PIC  fpu 
562    14:    1232265          XT-PIC  ide0 
563    15:          7          XT-PIC  ide1 
564   NMI:          0 
565
566 In 2.4.* a couple of lines where added to this file LOC & ERR (this time is the
567 output of a SMP machine):
568
569   > cat /proc/interrupts 
570
571              CPU0       CPU1       
572     0:    1243498    1214548    IO-APIC-edge  timer
573     1:       8949       8958    IO-APIC-edge  keyboard
574     2:          0          0          XT-PIC  cascade
575     5:      11286      10161    IO-APIC-edge  soundblaster
576     8:          1          0    IO-APIC-edge  rtc
577     9:      27422      27407    IO-APIC-edge  3c503
578    12:     113645     113873    IO-APIC-edge  PS/2 Mouse
579    13:          0          0          XT-PIC  fpu
580    14:      22491      24012    IO-APIC-edge  ide0
581    15:       2183       2415    IO-APIC-edge  ide1
582    17:      30564      30414   IO-APIC-level  eth0
583    18:        177        164   IO-APIC-level  bttv
584   NMI:    2457961    2457959 
585   LOC:    2457882    2457881 
586   ERR:       2155
587
588 NMI is incremented in this case because every timer interrupt generates a NMI
589 (Non Maskable Interrupt) which is used by the NMI Watchdog to detect lockups.
590
591 LOC is the local interrupt counter of the internal APIC of every CPU.
592
593 ERR is incremented in the case of errors in the IO-APIC bus (the bus that
594 connects the CPUs in a SMP system. This means that an error has been detected,
595 the IO-APIC automatically retry the transmission, so it should not be a big
596 problem, but you should read the SMP-FAQ.
597
598 In 2.6.2* /proc/interrupts was expanded again.  This time the goal was for
599 /proc/interrupts to display every IRQ vector in use by the system, not
600 just those considered 'most important'.  The new vectors are:
601
602   THR -- interrupt raised when a machine check threshold counter
603   (typically counting ECC corrected errors of memory or cache) exceeds
604   a configurable threshold.  Only available on some systems.
605
606   TRM -- a thermal event interrupt occurs when a temperature threshold
607   has been exceeded for the CPU.  This interrupt may also be generated
608   when the temperature drops back to normal.
609
610   SPU -- a spurious interrupt is some interrupt that was raised then lowered
611   by some IO device before it could be fully processed by the APIC.  Hence
612   the APIC sees the interrupt but does not know what device it came from.
613   For this case the APIC will generate the interrupt with a IRQ vector
614   of 0xff. This might also be generated by chipset bugs.
615
616   RES, CAL, TLB -- rescheduling, call and TLB flush interrupts are
617   sent from one CPU to another per the needs of the OS.  Typically,
618   their statistics are used by kernel developers and interested users to
619   determine the occurrence of interrupts of the given type.
620
621 The above IRQ vectors are displayed only when relevant.  For example,
622 the threshold vector does not exist on x86_64 platforms.  Others are
623 suppressed when the system is a uniprocessor.  As of this writing, only
624 i386 and x86_64 platforms support the new IRQ vector displays.
625
626 Of some interest is the introduction of the /proc/irq directory to 2.4.
627 It could be used to set IRQ to CPU affinity, this means that you can "hook" an
628 IRQ to only one CPU, or to exclude a CPU of handling IRQs. The contents of the
629 irq subdir is one subdir for each IRQ, and two files; default_smp_affinity and
630 prof_cpu_mask.
631
632 For example 
633   > ls /proc/irq/
634   0  10  12  14  16  18  2  4  6  8  prof_cpu_mask
635   1  11  13  15  17  19  3  5  7  9  default_smp_affinity
636   > ls /proc/irq/0/
637   smp_affinity
638
639 smp_affinity is a bitmask, in which you can specify which CPUs can handle the
640 IRQ, you can set it by doing:
641
642   > echo 1 > /proc/irq/10/smp_affinity
643
644 This means that only the first CPU will handle the IRQ, but you can also echo
645 5 which means that only the first and fourth CPU can handle the IRQ.
646
647 The contents of each smp_affinity file is the same by default:
648
649   > cat /proc/irq/0/smp_affinity
650   ffffffff
651
652 There is an alternate interface, smp_affinity_list which allows specifying
653 a cpu range instead of a bitmask:
654
655   > cat /proc/irq/0/smp_affinity_list
656   1024-1031
657
658 The default_smp_affinity mask applies to all non-active IRQs, which are the
659 IRQs which have not yet been allocated/activated, and hence which lack a
660 /proc/irq/[0-9]* directory.
661
662 The node file on an SMP system shows the node to which the device using the IRQ
663 reports itself as being attached. This hardware locality information does not
664 include information about any possible driver locality preference.
665
666 prof_cpu_mask specifies which CPUs are to be profiled by the system wide
667 profiler. Default value is ffffffff (all cpus if there are only 32 of them).
668
669 The way IRQs are routed is handled by the IO-APIC, and it's Round Robin
670 between all the CPUs which are allowed to handle it. As usual the kernel has
671 more info than you and does a better job than you, so the defaults are the
672 best choice for almost everyone.  [Note this applies only to those IO-APIC's
673 that support "Round Robin" interrupt distribution.]
674
675 There are  three  more  important subdirectories in /proc: net, scsi, and sys.
676 The general  rule  is  that  the  contents,  or  even  the  existence of these
677 directories, depend  on your kernel configuration. If SCSI is not enabled, the
678 directory scsi  may  not  exist. The same is true with the net, which is there
679 only when networking support is present in the running kernel.
680
681 The slabinfo  file  gives  information  about  memory usage at the slab level.
682 Linux uses  slab  pools for memory management above page level in version 2.2.
683 Commonly used  objects  have  their  own  slab  pool (such as network buffers,
684 directory cache, and so on).
685
686 ..............................................................................
687
688 > cat /proc/buddyinfo
689
690 Node 0, zone      DMA      0      4      5      4      4      3 ...
691 Node 0, zone   Normal      1      0      0      1    101      8 ...
692 Node 0, zone  HighMem      2      0      0      1      1      0 ...
693
694 External fragmentation is a problem under some workloads, and buddyinfo is a
695 useful tool for helping diagnose these problems.  Buddyinfo will give you a 
696 clue as to how big an area you can safely allocate, or why a previous
697 allocation failed.
698
699 Each column represents the number of pages of a certain order which are 
700 available.  In this case, there are 0 chunks of 2^0*PAGE_SIZE available in 
701 ZONE_DMA, 4 chunks of 2^1*PAGE_SIZE in ZONE_DMA, 101 chunks of 2^4*PAGE_SIZE 
702 available in ZONE_NORMAL, etc... 
703
704 More information relevant to external fragmentation can be found in
705 pagetypeinfo.
706
707 > cat /proc/pagetypeinfo
708 Page block order: 9
709 Pages per block:  512
710
711 Free pages count per migrate type at order       0      1      2      3      4      5      6      7      8      9     10
712 Node    0, zone      DMA, type    Unmovable      0      0      0      1      1      1      1      1      1      1      0
713 Node    0, zone      DMA, type  Reclaimable      0      0      0      0      0      0      0      0      0      0      0
714 Node    0, zone      DMA, type      Movable      1      1      2      1      2      1      1      0      1      0      2
715 Node    0, zone      DMA, type      Reserve      0      0      0      0      0      0      0      0      0      1      0
716 Node    0, zone      DMA, type      Isolate      0      0      0      0      0      0      0      0      0      0      0
717 Node    0, zone    DMA32, type    Unmovable    103     54     77      1      1      1     11      8      7      1      9
718 Node    0, zone    DMA32, type  Reclaimable      0      0      2      1      0      0      0      0      1      0      0
719 Node    0, zone    DMA32, type      Movable    169    152    113     91     77     54     39     13      6      1    452
720 Node    0, zone    DMA32, type      Reserve      1      2      2      2      2      0      1      1      1      1      0
721 Node    0, zone    DMA32, type      Isolate      0      0      0      0      0      0      0      0      0      0      0
722
723 Number of blocks type     Unmovable  Reclaimable      Movable      Reserve      Isolate
724 Node 0, zone      DMA            2            0            5            1            0
725 Node 0, zone    DMA32           41            6          967            2            0
726
727 Fragmentation avoidance in the kernel works by grouping pages of different
728 migrate types into the same contiguous regions of memory called page blocks.
729 A page block is typically the size of the default hugepage size e.g. 2MB on
730 X86-64. By keeping pages grouped based on their ability to move, the kernel
731 can reclaim pages within a page block to satisfy a high-order allocation.
732
733 The pagetypinfo begins with information on the size of a page block. It
734 then gives the same type of information as buddyinfo except broken down
735 by migrate-type and finishes with details on how many page blocks of each
736 type exist.
737
738 If min_free_kbytes has been tuned correctly (recommendations made by hugeadm
739 from libhugetlbfs http://sourceforge.net/projects/libhugetlbfs/), one can
740 make an estimate of the likely number of huge pages that can be allocated
741 at a given point in time. All the "Movable" blocks should be allocatable
742 unless memory has been mlock()'d. Some of the Reclaimable blocks should
743 also be allocatable although a lot of filesystem metadata may have to be
744 reclaimed to achieve this.
745
746 ..............................................................................
747
748 meminfo:
749
750 Provides information about distribution and utilization of memory.  This
751 varies by architecture and compile options.  The following is from a
752 16GB PIII, which has highmem enabled.  You may not have all of these fields.
753
754 > cat /proc/meminfo
755
756 The "Locked" indicates whether the mapping is locked in memory or not.
757
758
759 MemTotal:     16344972 kB
760 MemFree:      13634064 kB
761 Buffers:          3656 kB
762 Cached:        1195708 kB
763 SwapCached:          0 kB
764 Active:         891636 kB
765 Inactive:      1077224 kB
766 HighTotal:    15597528 kB
767 HighFree:     13629632 kB
768 LowTotal:       747444 kB
769 LowFree:          4432 kB
770 SwapTotal:           0 kB
771 SwapFree:            0 kB
772 Dirty:             968 kB
773 Writeback:           0 kB
774 AnonPages:      861800 kB
775 Mapped:         280372 kB
776 Slab:           284364 kB
777 SReclaimable:   159856 kB
778 SUnreclaim:     124508 kB
779 PageTables:      24448 kB
780 NFS_Unstable:        0 kB
781 Bounce:              0 kB
782 WritebackTmp:        0 kB
783 CommitLimit:   7669796 kB
784 Committed_AS:   100056 kB
785 VmallocTotal:   112216 kB
786 VmallocUsed:       428 kB
787 VmallocChunk:   111088 kB
788 AnonHugePages:   49152 kB
789
790     MemTotal: Total usable ram (i.e. physical ram minus a few reserved
791               bits and the kernel binary code)
792      MemFree: The sum of LowFree+HighFree
793      Buffers: Relatively temporary storage for raw disk blocks
794               shouldn't get tremendously large (20MB or so)
795       Cached: in-memory cache for files read from the disk (the
796               pagecache).  Doesn't include SwapCached
797   SwapCached: Memory that once was swapped out, is swapped back in but
798               still also is in the swapfile (if memory is needed it
799               doesn't need to be swapped out AGAIN because it is already
800               in the swapfile. This saves I/O)
801       Active: Memory that has been used more recently and usually not
802               reclaimed unless absolutely necessary.
803     Inactive: Memory which has been less recently used.  It is more
804               eligible to be reclaimed for other purposes
805    HighTotal:
806     HighFree: Highmem is all memory above ~860MB of physical memory
807               Highmem areas are for use by userspace programs, or
808               for the pagecache.  The kernel must use tricks to access
809               this memory, making it slower to access than lowmem.
810     LowTotal:
811      LowFree: Lowmem is memory which can be used for everything that
812               highmem can be used for, but it is also available for the
813               kernel's use for its own data structures.  Among many
814               other things, it is where everything from the Slab is
815               allocated.  Bad things happen when you're out of lowmem.
816    SwapTotal: total amount of swap space available
817     SwapFree: Memory which has been evicted from RAM, and is temporarily
818               on the disk
819        Dirty: Memory which is waiting to get written back to the disk
820    Writeback: Memory which is actively being written back to the disk
821    AnonPages: Non-file backed pages mapped into userspace page tables
822 AnonHugePages: Non-file backed huge pages mapped into userspace page tables
823       Mapped: files which have been mmaped, such as libraries
824         Slab: in-kernel data structures cache
825 SReclaimable: Part of Slab, that might be reclaimed, such as caches
826   SUnreclaim: Part of Slab, that cannot be reclaimed on memory pressure
827   PageTables: amount of memory dedicated to the lowest level of page
828               tables.
829 NFS_Unstable: NFS pages sent to the server, but not yet committed to stable
830               storage
831       Bounce: Memory used for block device "bounce buffers"
832 WritebackTmp: Memory used by FUSE for temporary writeback buffers
833  CommitLimit: Based on the overcommit ratio ('vm.overcommit_ratio'),
834               this is the total amount of  memory currently available to
835               be allocated on the system. This limit is only adhered to
836               if strict overcommit accounting is enabled (mode 2 in
837               'vm.overcommit_memory').
838               The CommitLimit is calculated with the following formula:
839               CommitLimit = ('vm.overcommit_ratio' * Physical RAM) + Swap
840               For example, on a system with 1G of physical RAM and 7G
841               of swap with a `vm.overcommit_ratio` of 30 it would
842               yield a CommitLimit of 7.3G.
843               For more details, see the memory overcommit documentation
844               in vm/overcommit-accounting.
845 Committed_AS: The amount of memory presently allocated on the system.
846               The committed memory is a sum of all of the memory which
847               has been allocated by processes, even if it has not been
848               "used" by them as of yet. A process which malloc()'s 1G
849               of memory, but only touches 300M of it will only show up
850               as using 300M of memory even if it has the address space
851               allocated for the entire 1G. This 1G is memory which has
852               been "committed" to by the VM and can be used at any time
853               by the allocating application. With strict overcommit
854               enabled on the system (mode 2 in 'vm.overcommit_memory'),
855               allocations which would exceed the CommitLimit (detailed
856               above) will not be permitted. This is useful if one needs
857               to guarantee that processes will not fail due to lack of
858               memory once that memory has been successfully allocated.
859 VmallocTotal: total size of vmalloc memory area
860  VmallocUsed: amount of vmalloc area which is used
861 VmallocChunk: largest contiguous block of vmalloc area which is free
862
863 ..............................................................................
864
865 vmallocinfo:
866
867 Provides information about vmalloced/vmaped areas. One line per area,
868 containing the virtual address range of the area, size in bytes,
869 caller information of the creator, and optional information depending
870 on the kind of area :
871
872  pages=nr    number of pages
873  phys=addr   if a physical address was specified
874  ioremap     I/O mapping (ioremap() and friends)
875  vmalloc     vmalloc() area
876  vmap        vmap()ed pages
877  user        VM_USERMAP area
878  vpages      buffer for pages pointers was vmalloced (huge area)
879  N<node>=nr  (Only on NUMA kernels)
880              Number of pages allocated on memory node <node>
881
882 > cat /proc/vmallocinfo
883 0xffffc20000000000-0xffffc20000201000 2101248 alloc_large_system_hash+0x204 ...
884   /0x2c0 pages=512 vmalloc N0=128 N1=128 N2=128 N3=128
885 0xffffc20000201000-0xffffc20000302000 1052672 alloc_large_system_hash+0x204 ...
886   /0x2c0 pages=256 vmalloc N0=64 N1=64 N2=64 N3=64
887 0xffffc20000302000-0xffffc20000304000    8192 acpi_tb_verify_table+0x21/0x4f...
888   phys=7fee8000 ioremap
889 0xffffc20000304000-0xffffc20000307000   12288 acpi_tb_verify_table+0x21/0x4f...
890   phys=7fee7000 ioremap
891 0xffffc2000031d000-0xffffc2000031f000    8192 init_vdso_vars+0x112/0x210
892 0xffffc2000031f000-0xffffc2000032b000   49152 cramfs_uncompress_init+0x2e ...
893   /0x80 pages=11 vmalloc N0=3 N1=3 N2=2 N3=3
894 0xffffc2000033a000-0xffffc2000033d000   12288 sys_swapon+0x640/0xac0      ...
895   pages=2 vmalloc N1=2
896 0xffffc20000347000-0xffffc2000034c000   20480 xt_alloc_table_info+0xfe ...
897   /0x130 [x_tables] pages=4 vmalloc N0=4
898 0xffffffffa0000000-0xffffffffa000f000   61440 sys_init_module+0xc27/0x1d00 ...
899    pages=14 vmalloc N2=14
900 0xffffffffa000f000-0xffffffffa0014000   20480 sys_init_module+0xc27/0x1d00 ...
901    pages=4 vmalloc N1=4
902 0xffffffffa0014000-0xffffffffa0017000   12288 sys_init_module+0xc27/0x1d00 ...
903    pages=2 vmalloc N1=2
904 0xffffffffa0017000-0xffffffffa0022000   45056 sys_init_module+0xc27/0x1d00 ...
905    pages=10 vmalloc N0=10
906
907 ..............................................................................
908
909 softirqs:
910
911 Provides counts of softirq handlers serviced since boot time, for each cpu.
912
913 > cat /proc/softirqs
914                 CPU0       CPU1       CPU2       CPU3
915       HI:          0          0          0          0
916    TIMER:      27166      27120      27097      27034
917   NET_TX:          0          0          0         17
918   NET_RX:         42          0          0         39
919    BLOCK:          0          0        107       1121
920  TASKLET:          0          0          0        290
921    SCHED:      27035      26983      26971      26746
922  HRTIMER:          0          0          0          0
923      RCU:       1678       1769       2178       2250
924
925
926 1.3 IDE devices in /proc/ide
927 ----------------------------
928
929 The subdirectory /proc/ide contains information about all IDE devices of which
930 the kernel  is  aware.  There is one subdirectory for each IDE controller, the
931 file drivers  and a link for each IDE device, pointing to the device directory
932 in the controller specific subtree.
933
934 The file  drivers  contains general information about the drivers used for the
935 IDE devices:
936
937   > cat /proc/ide/drivers
938   ide-cdrom version 4.53
939   ide-disk version 1.08
940
941 More detailed  information  can  be  found  in  the  controller  specific
942 subdirectories. These  are  named  ide0,  ide1  and  so  on.  Each  of  these
943 directories contains the files shown in table 1-6.
944
945
946 Table 1-6: IDE controller info in  /proc/ide/ide?
947 ..............................................................................
948  File    Content                                 
949  channel IDE channel (0 or 1)                    
950  config  Configuration (only for PCI/IDE bridge) 
951  mate    Mate name                               
952  model   Type/Chipset of IDE controller          
953 ..............................................................................
954
955 Each device  connected  to  a  controller  has  a separate subdirectory in the
956 controllers directory.  The  files  listed in table 1-7 are contained in these
957 directories.
958
959
960 Table 1-7: IDE device information
961 ..............................................................................
962  File             Content                                    
963  cache            The cache                                  
964  capacity         Capacity of the medium (in 512Byte blocks) 
965  driver           driver and version                         
966  geometry         physical and logical geometry              
967  identify         device identify block                      
968  media            media type                                 
969  model            device identifier                          
970  settings         device setup                               
971  smart_thresholds IDE disk management thresholds             
972  smart_values     IDE disk management values                 
973 ..............................................................................
974
975 The most  interesting  file is settings. This file contains a nice overview of
976 the drive parameters:
977
978   # cat /proc/ide/ide0/hda/settings 
979   name                    value           min             max             mode 
980   ----                    -----           ---             ---             ---- 
981   bios_cyl                526             0               65535           rw 
982   bios_head               255             0               255             rw 
983   bios_sect               63              0               63              rw 
984   breada_readahead        4               0               127             rw 
985   bswap                   0               0               1               r 
986   file_readahead          72              0               2097151         rw 
987   io_32bit                0               0               3               rw 
988   keepsettings            0               0               1               rw 
989   max_kb_per_request      122             1               127             rw 
990   multcount               0               0               8               rw 
991   nice1                   1               0               1               rw 
992   nowerr                  0               0               1               rw 
993   pio_mode                write-only      0               255             w 
994   slow                    0               0               1               rw 
995   unmaskirq               0               0               1               rw 
996   using_dma               0               0               1               rw 
997
998
999 1.4 Networking info in /proc/net
1000 --------------------------------
1001
1002 The subdirectory  /proc/net  follows  the  usual  pattern. Table 1-8 shows the
1003 additional values  you  get  for  IP  version 6 if you configure the kernel to
1004 support this. Table 1-9 lists the files and their meaning.
1005
1006
1007 Table 1-8: IPv6 info in /proc/net
1008 ..............................................................................
1009  File       Content                                               
1010  udp6       UDP sockets (IPv6)                                    
1011  tcp6       TCP sockets (IPv6)                                    
1012  raw6       Raw device statistics (IPv6)                          
1013  igmp6      IP multicast addresses, which this host joined (IPv6) 
1014  if_inet6   List of IPv6 interface addresses                      
1015  ipv6_route Kernel routing table for IPv6                         
1016  rt6_stats  Global IPv6 routing tables statistics                 
1017  sockstat6  Socket statistics (IPv6)                              
1018  snmp6      Snmp data (IPv6)                                      
1019 ..............................................................................
1020
1021
1022 Table 1-9: Network info in /proc/net
1023 ..............................................................................
1024  File          Content                                                         
1025  arp           Kernel  ARP table                                               
1026  dev           network devices with statistics                                 
1027  dev_mcast     the Layer2 multicast groups a device is listening too
1028                (interface index, label, number of references, number of bound
1029                addresses). 
1030  dev_stat      network device status                                           
1031  ip_fwchains   Firewall chain linkage                                          
1032  ip_fwnames    Firewall chain names                                            
1033  ip_masq       Directory containing the masquerading tables                    
1034  ip_masquerade Major masquerading table                                        
1035  netstat       Network statistics                                              
1036  raw           raw device statistics                                           
1037  route         Kernel routing table                                            
1038  rpc           Directory containing rpc info                                   
1039  rt_cache      Routing cache                                                   
1040  snmp          SNMP data                                                       
1041  sockstat      Socket statistics                                               
1042  tcp           TCP  sockets                                                    
1043  udp           UDP sockets                                                     
1044  unix          UNIX domain sockets                                             
1045  wireless      Wireless interface data (Wavelan etc)                           
1046  igmp          IP multicast addresses, which this host joined                  
1047  psched        Global packet scheduler parameters.                             
1048  netlink       List of PF_NETLINK sockets                                      
1049  ip_mr_vifs    List of multicast virtual interfaces                            
1050  ip_mr_cache   List of multicast routing cache                                 
1051 ..............................................................................
1052
1053 You can  use  this  information  to see which network devices are available in
1054 your system and how much traffic was routed over those devices:
1055
1056   > cat /proc/net/dev 
1057   Inter-|Receive                                                   |[... 
1058    face |bytes    packets errs drop fifo frame compressed multicast|[... 
1059       lo:  908188   5596     0    0    0     0          0         0 [...         
1060     ppp0:15475140  20721   410    0    0   410          0         0 [...  
1061     eth0:  614530   7085     0    0    0     0          0         1 [... 
1062    
1063   ...] Transmit 
1064   ...] bytes    packets errs drop fifo colls carrier compressed 
1065   ...]  908188     5596    0    0    0     0       0          0 
1066   ...] 1375103    17405    0    0    0     0       0          0 
1067   ...] 1703981     5535    0    0    0     3       0          0 
1068
1069 In addition, each Channel Bond interface has its own directory.  For
1070 example, the bond0 device will have a directory called /proc/net/bond0/.
1071 It will contain information that is specific to that bond, such as the
1072 current slaves of the bond, the link status of the slaves, and how
1073 many times the slaves link has failed.
1074
1075 1.5 SCSI info
1076 -------------
1077
1078 If you  have  a  SCSI  host adapter in your system, you'll find a subdirectory
1079 named after  the driver for this adapter in /proc/scsi. You'll also see a list
1080 of all recognized SCSI devices in /proc/scsi:
1081
1082   >cat /proc/scsi/scsi 
1083   Attached devices: 
1084   Host: scsi0 Channel: 00 Id: 00 Lun: 00 
1085     Vendor: IBM      Model: DGHS09U          Rev: 03E0 
1086     Type:   Direct-Access                    ANSI SCSI revision: 03 
1087   Host: scsi0 Channel: 00 Id: 06 Lun: 00 
1088     Vendor: PIONEER  Model: CD-ROM DR-U06S   Rev: 1.04 
1089     Type:   CD-ROM                           ANSI SCSI revision: 02 
1090
1091
1092 The directory  named  after  the driver has one file for each adapter found in
1093 the system.  These  files  contain information about the controller, including
1094 the used  IRQ  and  the  IO  address range. The amount of information shown is
1095 dependent on  the adapter you use. The example shows the output for an Adaptec
1096 AHA-2940 SCSI adapter:
1097
1098   > cat /proc/scsi/aic7xxx/0 
1099    
1100   Adaptec AIC7xxx driver version: 5.1.19/3.2.4 
1101   Compile Options: 
1102     TCQ Enabled By Default : Disabled 
1103     AIC7XXX_PROC_STATS     : Disabled 
1104     AIC7XXX_RESET_DELAY    : 5 
1105   Adapter Configuration: 
1106              SCSI Adapter: Adaptec AHA-294X Ultra SCSI host adapter 
1107                              Ultra Wide Controller 
1108       PCI MMAPed I/O Base: 0xeb001000 
1109    Adapter SEEPROM Config: SEEPROM found and used. 
1110         Adaptec SCSI BIOS: Enabled 
1111                       IRQ: 10 
1112                      SCBs: Active 0, Max Active 2, 
1113                            Allocated 15, HW 16, Page 255 
1114                Interrupts: 160328 
1115         BIOS Control Word: 0x18b6 
1116      Adapter Control Word: 0x005b 
1117      Extended Translation: Enabled 
1118   Disconnect Enable Flags: 0xffff 
1119        Ultra Enable Flags: 0x0001 
1120    Tag Queue Enable Flags: 0x0000 
1121   Ordered Queue Tag Flags: 0x0000 
1122   Default Tag Queue Depth: 8 
1123       Tagged Queue By Device array for aic7xxx host instance 0: 
1124         {255,255,255,255,255,255,255,255,255,255,255,255,255,255,255,255} 
1125       Actual queue depth per device for aic7xxx host instance 0: 
1126         {1,1,1,1,1,1,1,1,1,1,1,1,1,1,1,1} 
1127   Statistics: 
1128   (scsi0:0:0:0) 
1129     Device using Wide/Sync transfers at 40.0 MByte/sec, offset 8 
1130     Transinfo settings: current(12/8/1/0), goal(12/8/1/0), user(12/15/1/0) 
1131     Total transfers 160151 (74577 reads and 85574 writes) 
1132   (scsi0:0:6:0) 
1133     Device using Narrow/Sync transfers at 5.0 MByte/sec, offset 15 
1134     Transinfo settings: current(50/15/0/0), goal(50/15/0/0), user(50/15/0/0) 
1135     Total transfers 0 (0 reads and 0 writes) 
1136
1137
1138 1.6 Parallel port info in /proc/parport
1139 ---------------------------------------
1140
1141 The directory  /proc/parport  contains information about the parallel ports of
1142 your system.  It  has  one  subdirectory  for  each port, named after the port
1143 number (0,1,2,...).
1144
1145 These directories contain the four files shown in Table 1-10.
1146
1147
1148 Table 1-10: Files in /proc/parport
1149 ..............................................................................
1150  File      Content                                                             
1151  autoprobe Any IEEE-1284 device ID information that has been acquired.         
1152  devices   list of the device drivers using that port. A + will appear by the
1153            name of the device currently using the port (it might not appear
1154            against any). 
1155  hardware  Parallel port's base address, IRQ line and DMA channel.             
1156  irq       IRQ that parport is using for that port. This is in a separate
1157            file to allow you to alter it by writing a new value in (IRQ
1158            number or none). 
1159 ..............................................................................
1160
1161 1.7 TTY info in /proc/tty
1162 -------------------------
1163
1164 Information about  the  available  and actually used tty's can be found in the
1165 directory /proc/tty.You'll  find  entries  for drivers and line disciplines in
1166 this directory, as shown in Table 1-11.
1167
1168
1169 Table 1-11: Files in /proc/tty
1170 ..............................................................................
1171  File          Content                                        
1172  drivers       list of drivers and their usage                
1173  ldiscs        registered line disciplines                    
1174  driver/serial usage statistic and status of single tty lines 
1175 ..............................................................................
1176
1177 To see  which  tty's  are  currently in use, you can simply look into the file
1178 /proc/tty/drivers:
1179
1180   > cat /proc/tty/drivers 
1181   pty_slave            /dev/pts      136   0-255 pty:slave 
1182   pty_master           /dev/ptm      128   0-255 pty:master 
1183   pty_slave            /dev/ttyp       3   0-255 pty:slave 
1184   pty_master           /dev/pty        2   0-255 pty:master 
1185   serial               /dev/cua        5   64-67 serial:callout 
1186   serial               /dev/ttyS       4   64-67 serial 
1187   /dev/tty0            /dev/tty0       4       0 system:vtmaster 
1188   /dev/ptmx            /dev/ptmx       5       2 system 
1189   /dev/console         /dev/console    5       1 system:console 
1190   /dev/tty             /dev/tty        5       0 system:/dev/tty 
1191   unknown              /dev/tty        4    1-63 console 
1192
1193
1194 1.8 Miscellaneous kernel statistics in /proc/stat
1195 -------------------------------------------------
1196
1197 Various pieces   of  information about  kernel activity  are  available in the
1198 /proc/stat file.  All  of  the numbers reported  in  this file are  aggregates
1199 since the system first booted.  For a quick look, simply cat the file:
1200
1201   > cat /proc/stat
1202   cpu  2255 34 2290 22625563 6290 127 456 0 0
1203   cpu0 1132 34 1441 11311718 3675 127 438 0 0
1204   cpu1 1123 0 849 11313845 2614 0 18 0 0
1205   intr 114930548 113199788 3 0 5 263 0 4 [... lots more numbers ...]
1206   ctxt 1990473
1207   btime 1062191376
1208   processes 2915
1209   procs_running 1
1210   procs_blocked 0
1211   softirq 183433 0 21755 12 39 1137 231 21459 2263
1212
1213 The very first  "cpu" line aggregates the  numbers in all  of the other "cpuN"
1214 lines.  These numbers identify the amount of time the CPU has spent performing
1215 different kinds of work.  Time units are in USER_HZ (typically hundredths of a
1216 second).  The meanings of the columns are as follows, from left to right:
1217
1218 - user: normal processes executing in user mode
1219 - nice: niced processes executing in user mode
1220 - system: processes executing in kernel mode
1221 - idle: twiddling thumbs
1222 - iowait: waiting for I/O to complete
1223 - irq: servicing interrupts
1224 - softirq: servicing softirqs
1225 - steal: involuntary wait
1226 - guest: running a normal guest
1227 - guest_nice: running a niced guest
1228
1229 The "intr" line gives counts of interrupts  serviced since boot time, for each
1230 of the  possible system interrupts.   The first  column  is the  total of  all
1231 interrupts serviced; each  subsequent column is the  total for that particular
1232 interrupt.
1233
1234 The "ctxt" line gives the total number of context switches across all CPUs.
1235
1236 The "btime" line gives  the time at which the  system booted, in seconds since
1237 the Unix epoch.
1238
1239 The "processes" line gives the number  of processes and threads created, which
1240 includes (but  is not limited  to) those  created by  calls to the  fork() and
1241 clone() system calls.
1242
1243 The "procs_running" line gives the total number of threads that are
1244 running or ready to run (i.e., the total number of runnable threads).
1245
1246 The   "procs_blocked" line gives  the  number of  processes currently blocked,
1247 waiting for I/O to complete.
1248
1249 The "softirq" line gives counts of softirqs serviced since boot time, for each
1250 of the possible system softirqs. The first column is the total of all
1251 softirqs serviced; each subsequent column is the total for that particular
1252 softirq.
1253
1254
1255 1.9 Ext4 file system parameters
1256 ------------------------------
1257
1258 Information about mounted ext4 file systems can be found in
1259 /proc/fs/ext4.  Each mounted filesystem will have a directory in
1260 /proc/fs/ext4 based on its device name (i.e., /proc/fs/ext4/hdc or
1261 /proc/fs/ext4/dm-0).   The files in each per-device directory are shown
1262 in Table 1-12, below.
1263
1264 Table 1-12: Files in /proc/fs/ext4/<devname>
1265 ..............................................................................
1266  File            Content                                        
1267  mb_groups       details of multiblock allocator buddy cache of free blocks
1268 ..............................................................................
1269
1270 2.0 /proc/consoles
1271 ------------------
1272 Shows registered system console lines.
1273
1274 To see which character device lines are currently used for the system console
1275 /dev/console, you may simply look into the file /proc/consoles:
1276
1277   > cat /proc/consoles
1278   tty0                 -WU (ECp)       4:7
1279   ttyS0                -W- (Ep)        4:64
1280
1281 The columns are:
1282
1283   device               name of the device
1284   operations           R = can do read operations
1285                        W = can do write operations
1286                        U = can do unblank
1287   flags                E = it is enabled
1288                        C = it is preferred console
1289                        B = it is primary boot console
1290                        p = it is used for printk buffer
1291                        b = it is not a TTY but a Braille device
1292                        a = it is safe to use when cpu is offline
1293   major:minor          major and minor number of the device separated by a colon
1294
1295 ------------------------------------------------------------------------------
1296 Summary
1297 ------------------------------------------------------------------------------
1298 The /proc file system serves information about the running system. It not only
1299 allows access to process data but also allows you to request the kernel status
1300 by reading files in the hierarchy.
1301
1302 The directory  structure  of /proc reflects the types of information and makes
1303 it easy, if not obvious, where to look for specific data.
1304 ------------------------------------------------------------------------------
1305
1306 ------------------------------------------------------------------------------
1307 CHAPTER 2: MODIFYING SYSTEM PARAMETERS
1308 ------------------------------------------------------------------------------
1309
1310 ------------------------------------------------------------------------------
1311 In This Chapter
1312 ------------------------------------------------------------------------------
1313 * Modifying kernel parameters by writing into files found in /proc/sys
1314 * Exploring the files which modify certain parameters
1315 * Review of the /proc/sys file tree
1316 ------------------------------------------------------------------------------
1317
1318
1319 A very  interesting part of /proc is the directory /proc/sys. This is not only
1320 a source  of  information,  it also allows you to change parameters within the
1321 kernel. Be  very  careful  when attempting this. You can optimize your system,
1322 but you  can  also  cause  it  to  crash.  Never  alter kernel parameters on a
1323 production system.  Set  up  a  development machine and test to make sure that
1324 everything works  the  way  you want it to. You may have no alternative but to
1325 reboot the machine once an error has been made.
1326
1327 To change  a  value,  simply  echo  the new value into the file. An example is
1328 given below  in the section on the file system data. You need to be root to do
1329 this. You  can  create  your  own  boot script to perform this every time your
1330 system boots.
1331
1332 The files  in /proc/sys can be used to fine tune and monitor miscellaneous and
1333 general things  in  the operation of the Linux kernel. Since some of the files
1334 can inadvertently  disrupt  your  system,  it  is  advisable  to  read  both
1335 documentation and  source  before actually making adjustments. In any case, be
1336 very careful  when  writing  to  any  of these files. The entries in /proc may
1337 change slightly between the 2.1.* and the 2.2 kernel, so if there is any doubt
1338 review the kernel documentation in the directory /usr/src/linux/Documentation.
1339 This chapter  is  heavily  based  on the documentation included in the pre 2.2
1340 kernels, and became part of it in version 2.2.1 of the Linux kernel.
1341
1342 Please see: Documentation/sysctl/ directory for descriptions of these
1343 entries.
1344
1345 ------------------------------------------------------------------------------
1346 Summary
1347 ------------------------------------------------------------------------------
1348 Certain aspects  of  kernel  behavior  can be modified at runtime, without the
1349 need to  recompile  the kernel, or even to reboot the system. The files in the
1350 /proc/sys tree  can  not only be read, but also modified. You can use the echo
1351 command to write value into these files, thereby changing the default settings
1352 of the kernel.
1353 ------------------------------------------------------------------------------
1354
1355 ------------------------------------------------------------------------------
1356 CHAPTER 3: PER-PROCESS PARAMETERS
1357 ------------------------------------------------------------------------------
1358
1359 3.1 /proc/<pid>/oom_adj & /proc/<pid>/oom_score_adj- Adjust the oom-killer score
1360 --------------------------------------------------------------------------------
1361
1362 These file can be used to adjust the badness heuristic used to select which
1363 process gets killed in out of memory conditions.
1364
1365 The badness heuristic assigns a value to each candidate task ranging from 0
1366 (never kill) to 1000 (always kill) to determine which process is targeted.  The
1367 units are roughly a proportion along that range of allowed memory the process
1368 may allocate from based on an estimation of its current memory and swap use.
1369 For example, if a task is using all allowed memory, its badness score will be
1370 1000.  If it is using half of its allowed memory, its score will be 500.
1371
1372 There is an additional factor included in the badness score: root
1373 processes are given 3% extra memory over other tasks.
1374
1375 The amount of "allowed" memory depends on the context in which the oom killer
1376 was called.  If it is due to the memory assigned to the allocating task's cpuset
1377 being exhausted, the allowed memory represents the set of mems assigned to that
1378 cpuset.  If it is due to a mempolicy's node(s) being exhausted, the allowed
1379 memory represents the set of mempolicy nodes.  If it is due to a memory
1380 limit (or swap limit) being reached, the allowed memory is that configured
1381 limit.  Finally, if it is due to the entire system being out of memory, the
1382 allowed memory represents all allocatable resources.
1383
1384 The value of /proc/<pid>/oom_score_adj is added to the badness score before it
1385 is used to determine which task to kill.  Acceptable values range from -1000
1386 (OOM_SCORE_ADJ_MIN) to +1000 (OOM_SCORE_ADJ_MAX).  This allows userspace to
1387 polarize the preference for oom killing either by always preferring a certain
1388 task or completely disabling it.  The lowest possible value, -1000, is
1389 equivalent to disabling oom killing entirely for that task since it will always
1390 report a badness score of 0.
1391
1392 Consequently, it is very simple for userspace to define the amount of memory to
1393 consider for each task.  Setting a /proc/<pid>/oom_score_adj value of +500, for
1394 example, is roughly equivalent to allowing the remainder of tasks sharing the
1395 same system, cpuset, mempolicy, or memory controller resources to use at least
1396 50% more memory.  A value of -500, on the other hand, would be roughly
1397 equivalent to discounting 50% of the task's allowed memory from being considered
1398 as scoring against the task.
1399
1400 For backwards compatibility with previous kernels, /proc/<pid>/oom_adj may also
1401 be used to tune the badness score.  Its acceptable values range from -16
1402 (OOM_ADJUST_MIN) to +15 (OOM_ADJUST_MAX) and a special value of -17
1403 (OOM_DISABLE) to disable oom killing entirely for that task.  Its value is
1404 scaled linearly with /proc/<pid>/oom_score_adj.
1405
1406 The value of /proc/<pid>/oom_score_adj may be reduced no lower than the last
1407 value set by a CAP_SYS_RESOURCE process. To reduce the value any lower
1408 requires CAP_SYS_RESOURCE.
1409
1410 Caveat: when a parent task is selected, the oom killer will sacrifice any first
1411 generation children with separate address spaces instead, if possible.  This
1412 avoids servers and important system daemons from being killed and loses the
1413 minimal amount of work.
1414
1415
1416 3.2 /proc/<pid>/oom_score - Display current oom-killer score
1417 -------------------------------------------------------------
1418
1419 This file can be used to check the current score used by the oom-killer is for
1420 any given <pid>. Use it together with /proc/<pid>/oom_score_adj to tune which
1421 process should be killed in an out-of-memory situation.
1422
1423
1424 3.3  /proc/<pid>/io - Display the IO accounting fields
1425 -------------------------------------------------------
1426
1427 This file contains IO statistics for each running process
1428
1429 Example
1430 -------
1431
1432 test:/tmp # dd if=/dev/zero of=/tmp/test.dat &
1433 [1] 3828
1434
1435 test:/tmp # cat /proc/3828/io
1436 rchar: 323934931
1437 wchar: 323929600
1438 syscr: 632687
1439 syscw: 632675
1440 read_bytes: 0
1441 write_bytes: 323932160
1442 cancelled_write_bytes: 0
1443
1444
1445 Description
1446 -----------
1447
1448 rchar
1449 -----
1450
1451 I/O counter: chars read
1452 The number of bytes which this task has caused to be read from storage. This
1453 is simply the sum of bytes which this process passed to read() and pread().
1454 It includes things like tty IO and it is unaffected by whether or not actual
1455 physical disk IO was required (the read might have been satisfied from
1456 pagecache)
1457
1458
1459 wchar
1460 -----
1461
1462 I/O counter: chars written
1463 The number of bytes which this task has caused, or shall cause to be written
1464 to disk. Similar caveats apply here as with rchar.
1465
1466
1467 syscr
1468 -----
1469
1470 I/O counter: read syscalls
1471 Attempt to count the number of read I/O operations, i.e. syscalls like read()
1472 and pread().
1473
1474
1475 syscw
1476 -----
1477
1478 I/O counter: write syscalls
1479 Attempt to count the number of write I/O operations, i.e. syscalls like
1480 write() and pwrite().
1481
1482
1483 read_bytes
1484 ----------
1485
1486 I/O counter: bytes read
1487 Attempt to count the number of bytes which this process really did cause to
1488 be fetched from the storage layer. Done at the submit_bio() level, so it is
1489 accurate for block-backed filesystems. <please add status regarding NFS and
1490 CIFS at a later time>
1491
1492
1493 write_bytes
1494 -----------
1495
1496 I/O counter: bytes written
1497 Attempt to count the number of bytes which this process caused to be sent to
1498 the storage layer. This is done at page-dirtying time.
1499
1500
1501 cancelled_write_bytes
1502 ---------------------
1503
1504 The big inaccuracy here is truncate. If a process writes 1MB to a file and
1505 then deletes the file, it will in fact perform no writeout. But it will have
1506 been accounted as having caused 1MB of write.
1507 In other words: The number of bytes which this process caused to not happen,
1508 by truncating pagecache. A task can cause "negative" IO too. If this task
1509 truncates some dirty pagecache, some IO which another task has been accounted
1510 for (in its write_bytes) will not be happening. We _could_ just subtract that
1511 from the truncating task's write_bytes, but there is information loss in doing
1512 that.
1513
1514
1515 Note
1516 ----
1517
1518 At its current implementation state, this is a bit racy on 32-bit machines: if
1519 process A reads process B's /proc/pid/io while process B is updating one of
1520 those 64-bit counters, process A could see an intermediate result.
1521
1522
1523 More information about this can be found within the taskstats documentation in
1524 Documentation/accounting.
1525
1526 3.4 /proc/<pid>/coredump_filter - Core dump filtering settings
1527 ---------------------------------------------------------------
1528 When a process is dumped, all anonymous memory is written to a core file as
1529 long as the size of the core file isn't limited. But sometimes we don't want
1530 to dump some memory segments, for example, huge shared memory. Conversely,
1531 sometimes we want to save file-backed memory segments into a core file, not
1532 only the individual files.
1533
1534 /proc/<pid>/coredump_filter allows you to customize which memory segments
1535 will be dumped when the <pid> process is dumped. coredump_filter is a bitmask
1536 of memory types. If a bit of the bitmask is set, memory segments of the
1537 corresponding memory type are dumped, otherwise they are not dumped.
1538
1539 The following 7 memory types are supported:
1540   - (bit 0) anonymous private memory
1541   - (bit 1) anonymous shared memory
1542   - (bit 2) file-backed private memory
1543   - (bit 3) file-backed shared memory
1544   - (bit 4) ELF header pages in file-backed private memory areas (it is
1545             effective only if the bit 2 is cleared)
1546   - (bit 5) hugetlb private memory
1547   - (bit 6) hugetlb shared memory
1548
1549   Note that MMIO pages such as frame buffer are never dumped and vDSO pages
1550   are always dumped regardless of the bitmask status.
1551
1552   Note bit 0-4 doesn't effect any hugetlb memory. hugetlb memory are only
1553   effected by bit 5-6.
1554
1555 Default value of coredump_filter is 0x23; this means all anonymous memory
1556 segments and hugetlb private memory are dumped.
1557
1558 If you don't want to dump all shared memory segments attached to pid 1234,
1559 write 0x21 to the process's proc file.
1560
1561   $ echo 0x21 > /proc/1234/coredump_filter
1562
1563 When a new process is created, the process inherits the bitmask status from its
1564 parent. It is useful to set up coredump_filter before the program runs.
1565 For example:
1566
1567   $ echo 0x7 > /proc/self/coredump_filter
1568   $ ./some_program
1569
1570 3.5     /proc/<pid>/mountinfo - Information about mounts
1571 --------------------------------------------------------
1572
1573 This file contains lines of the form:
1574
1575 36 35 98:0 /mnt1 /mnt2 rw,noatime master:1 - ext3 /dev/root rw,errors=continue
1576 (1)(2)(3)   (4)   (5)      (6)      (7)   (8) (9)   (10)         (11)
1577
1578 (1) mount ID:  unique identifier of the mount (may be reused after umount)
1579 (2) parent ID:  ID of parent (or of self for the top of the mount tree)
1580 (3) major:minor:  value of st_dev for files on filesystem
1581 (4) root:  root of the mount within the filesystem
1582 (5) mount point:  mount point relative to the process's root
1583 (6) mount options:  per mount options
1584 (7) optional fields:  zero or more fields of the form "tag[:value]"
1585 (8) separator:  marks the end of the optional fields
1586 (9) filesystem type:  name of filesystem of the form "type[.subtype]"
1587 (10) mount source:  filesystem specific information or "none"
1588 (11) super options:  per super block options
1589
1590 Parsers should ignore all unrecognised optional fields.  Currently the
1591 possible optional fields are:
1592
1593 shared:X  mount is shared in peer group X
1594 master:X  mount is slave to peer group X
1595 propagate_from:X  mount is slave and receives propagation from peer group X (*)
1596 unbindable  mount is unbindable
1597
1598 (*) X is the closest dominant peer group under the process's root.  If
1599 X is the immediate master of the mount, or if there's no dominant peer
1600 group under the same root, then only the "master:X" field is present
1601 and not the "propagate_from:X" field.
1602
1603 For more information on mount propagation see:
1604
1605   Documentation/filesystems/sharedsubtree.txt
1606
1607
1608 3.6     /proc/<pid>/comm  & /proc/<pid>/task/<tid>/comm
1609 --------------------------------------------------------
1610 These files provide a method to access a tasks comm value. It also allows for
1611 a task to set its own or one of its thread siblings comm value. The comm value
1612 is limited in size compared to the cmdline value, so writing anything longer
1613 then the kernel's TASK_COMM_LEN (currently 16 chars) will result in a truncated
1614 comm value.
1615
1616
1617 3.7     /proc/<pid>/task/<tid>/children - Information about task children
1618 -------------------------------------------------------------------------
1619 This file provides a fast way to retrieve first level children pids
1620 of a task pointed by <pid>/<tid> pair. The format is a space separated
1621 stream of pids.
1622
1623 Note the "first level" here -- if a child has own children they will
1624 not be listed here, one needs to read /proc/<children-pid>/task/<tid>/children
1625 to obtain the descendants.
1626
1627 Since this interface is intended to be fast and cheap it doesn't
1628 guarantee to provide precise results and some children might be
1629 skipped, especially if they've exited right after we printed their
1630 pids, so one need to either stop or freeze processes being inspected
1631 if precise results are needed.
1632
1633
1634 ------------------------------------------------------------------------------
1635 Configuring procfs
1636 ------------------------------------------------------------------------------
1637
1638 4.1     Mount options
1639 ---------------------
1640
1641 The following mount options are supported:
1642
1643         hidepid=        Set /proc/<pid>/ access mode.
1644         gid=            Set the group authorized to learn processes information.
1645
1646 hidepid=0 means classic mode - everybody may access all /proc/<pid>/ directories
1647 (default).
1648
1649 hidepid=1 means users may not access any /proc/<pid>/ directories but their
1650 own.  Sensitive files like cmdline, sched*, status are now protected against
1651 other users.  This makes it impossible to learn whether any user runs
1652 specific program (given the program doesn't reveal itself by its behaviour).
1653 As an additional bonus, as /proc/<pid>/cmdline is unaccessible for other users,
1654 poorly written programs passing sensitive information via program arguments are
1655 now protected against local eavesdroppers.
1656
1657 hidepid=2 means hidepid=1 plus all /proc/<pid>/ will be fully invisible to other
1658 users.  It doesn't mean that it hides a fact whether a process with a specific
1659 pid value exists (it can be learned by other means, e.g. by "kill -0 $PID"),
1660 but it hides process' uid and gid, which may be learned by stat()'ing
1661 /proc/<pid>/ otherwise.  It greatly complicates an intruder's task of gathering
1662 information about running processes, whether some daemon runs with elevated
1663 privileges, whether other user runs some sensitive program, whether other users
1664 run any program at all, etc.
1665
1666 gid= defines a group authorized to learn processes information otherwise
1667 prohibited by hidepid=.  If you use some daemon like identd which needs to learn
1668 information about processes information, just add identd to this group.