shell_cheatsheet.md

   1 # Basic Shell Commands
   2 ***
   3
   4 ## 1. Shell Basics:
   5
   6 | Command        | Definition                                                                                                     |
   7 |----------------|----------------------------------------------------------------------------------------------------------------|
   8 | `.`            | a single period refers to the current directory                                                                |
   9 | `..`           | a double period refers to the directory immediately above the current directory                                |
  10 | `~`            | refers to your home directory. _Note:_ this command does NOT work on Windows machines (Mac and Linux are okay) |
  11 | `cd ./dirname` | changes the current directory to the directory `dirname`                                                       |
  12 | `ls -F`        | tells you what files and directories are in the current directory                                              |
  13
  14
  15
  16 ## 2. Creating Things:
  17 ### a) How to create new files and directories..
  18
  19 | Command           | Definition                                                                                                                                                                                                                                                                                                                                            |
  20 |-------------------|-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
  21 | `mkdir ./dirname` | makes a new directory called dirname below the current directory. _Note:_ Windows users will need to use `\` instead of `/` for the path separator                                                                                                                                                                                                    |
  22 | `nano filename`   | if `filename` does not exist, `nano` creates it and opens the `nano` text editor. If the file exists, `nano` opens it. _Note:_ _(i)_ You can use a different text editor if you like.  In gnome Linux, `gedit` works really well too. _(ii)_ `nano` (or `gedit`) create text files. It doesn't matter what the file extension is (or if there is one) |
  23
  24 ### b) How to delete files and directories...
  25 #### _Remember that deleting is forever. There is NO going back_
  26
  27 | Command           | Definition                                                                                                       |
  28 |-------------------|------------------------------------------------------------------------------------------------------------------|
  29 | `rm ./filename`   | deletes a file called `filename` from the current directory                                                      |
  30 | `rmdir ./dirname` |  deletes the directory `dirname` from the current directory. _Note:_ `dirname` must be empty for `rmdir` to run. |
  31
  32 ### c) How to copy and rename files and directories...
  33
  34 | Command | Definition                                                                                                                                                                                                                    |
  35 |---------|-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
  36 | `mv tmp/filename .` | moves the file `filename` from the directory `tmp` to the current directory. _Note:_ _(i)_ the original `filename` in `tmp` is deleted. _(ii)_ `mv` can also be used to rename files (e.g., `mv filename newname` |
  37 | `cp tmp/filename .` | copies the file `filename` from the directory `tmp` to the current directory. _Note:_ _(i)_ the original file is still there                                                                                      |
  38
  39
  40
  41 ## 3. Pipes and Filters
  42 ### a) How to use wildcards to match filenames...
  43 Wildcards are a shell feature that makes the command line much more powerful than any GUI file managers.
  44 Wildcards are particularly useful when you are looking for directories, files, or file content that can
  45 vary along a given dimension.  These wildcards can be used with any command that accepts file names or
  46 text strings as arguments.
  47
  48 #### Table of commonly used wildcards
  49
  50 | Wildcard               | Matches                                        |
  51 |------------------------|------------------------------------------------|
  52 | `*`                    | zero or more characters                        |
  53 | `?`                    | exactly one character                          |
  54 | `[abcde]`              | exactly one of the characters listed           |
  55 | `[a-e]`                | exactly one character in the given range       |
  56 | `[!abcde]`             | any character not listed                       |
  57 | `[!a-e]`               | any character that is not in the given range   |
  58 | `{software,carpentry}` | exactly one entire word from the options given |
  59
  60 See the cheatsheet on regular expressions for more "wildcard" shortcuts.
  61
  62 ### b) How to redirect to a file and get input from a file ...
  63 Redirection operators can be used to redirect the ouput from a program from the display screen to a file where it is saved (or many other places too, like your printer or to another program where it can be used as input).
  64
  65
  66 | Command | Description                                                                                                                     |
  67 |---------|---------------------------------------------------------------------------------------------------------------------------------|
  68 | `>`     | write `stdout` to a new file; overwrites any file with that name (e.g., `ls *.md > mardkownfiles.txt`)                          |
  69 | `>>`    | append `stdout` to a previously existing file; if the file does not exist, it is created (e.g., `ls *.md >> markdownfiles.txt`) |
  70 | `<`     | |
  71 | `<<`    | |
  72
  73 #### Glossary:
  74 *  **stdout**:
  75 *  **stdin**:
  76
  77 ### e) How to use the output of one command as the input to another with a pipe...
  78 ### f) That combining single-purpose filters with pipes is the most productive way to use the shell...
  79 ### g) That if a program conforms to Unix conventions, it can easily be combined with others...
  80
  81
  82
  83 ## 4. Variables
  84 ### a) Assignment
  85 * **`varname=1`** -->
  86
  87 ### b) Indexing
  88 * **`varname[0]`** --> _Note:_ the shell is zero indexed.  That means you always start counting from zero
  89
  90 ### c) Referencing
  91 * **`${varname}` -->
  92 * **`${varname[@]` -->
  93
  94
  95
  96 ## 5. Loops
  97 NEED TO DO VARIABLE ASSIGNMENT FIRST!!!!
  98 ### a) How to repeat operations using a loop...
  99 * **`for`** -->
 100     `for filename in *.dat
 101     do
 102       mv ${filename} ${newname}
 103     done`
 104
 105 * **`while`** -->
 106     `count=0
 107      while ${count} -lte 6
 108      do
 109        COMMAND HERE
 110      done`
 111
 112 ### b) That the loop variable takes on a different value each time through the loop...
 113 ### c) The difference between a variable's name and its value...
 114 ### d) Why spaces and some punctuation characters shouldn't be used in files' names...
 115 ### e) How to display history and re-use commands...
 116 * **`history`** --> displays your command history to the standard output (usually the screen)
 117
 118
 119
 120 ## 6. Shell Scripts
 121 ### a) How to store shell commands in a file...
 122 ### b) How to run a shell script...
 123 ### c) How to pass filenames into a shell script...
 124
 125
 126
 127 ## 7. Finding Things
 128 ### a) How to select lines matching patterns in text files...
 129 * **`grep [options] day haiku.txt`** --> finds every instance of the string `day` in the file haiku.txt and pipes it to standard output.
 130         * **`-E`** --> tells grep you will be using a regular expression. Enclose the regular expression in quotes. _Note:_ the power of `grep` comes from using regular expressions. Please see the regular expressions sheet for examples
 131         * **`-i`** --> makes matching case-insensitive
 132         * **`-n`** --> limits the number of lines that match to the first n matches
 133         * **`-v`** --> shows lines that do not match the pattern (inverts the match)
 134         * **`-w`** --> outputs instances where the pattern is a whole word
 135
 136 ### b) How to find files with certain properties...
 137 * **`find . -type d` -->
 138         * **`-type [df]`** --> d lists directories; f lists files
 139         * **`-maxdepth n`** --> `find` automatically searches subdirectories. If you don't want that, specify the number of levels below the working directory you would like to search
 140         * **`-mindepth n`** --> starts `find`'s search n levels below the working directory
 141
 142 ### c) How to use one command's output as arguments to another command...
 143
 144 ### d) How are text and binary files different?...
 145