È facile pensare ad una immagine come qualcosa che corrisponda ad una singola finestra del display o ad un singolo file come un file JPEG, invece un'immagine di GIMP è una struttura veramente complessa, contenente una pila di livelli, oltre a molti altri tipi di oggetti: una maschera di selezione, un'insieme di canali, un'insieme di tracciati, una cronologia degli "annullamenti", ecc. In questa sezione verrà fatta un'analisi un po' più in dettaglio di tutti i componenti di un'immagine e di come possono essere utilizzati.

La proprietà principale di un'immagine è la sua modalità. Ci sono tre possibili modalità: RGB, scala di grigi, e indicizzata. RGB, un acronimo che in inglese sta per Rosso-Verde-Blu (Red-Green-Blue), indica che ogni punto dell'immagine è rappresentato da un livello "rosso", uno "verde" e uno "blu". Dato che ogni colore percepito dall'essere umano può essere rappresentato come una combinazione di questi tre colori, le immagini RGB sono immagini complete a colori. Ogni canale colore ha 256 livelli di intensità possibili. È possibile trovare ulteriori dettagli cercando modelli di colore nel glossario.

In un'immagine in scala di grigi, ogni punto è rappresentato da un valore di luminosità che varia da 0 (nero) a 255 (bianco), con i valori intermedi che rappresentano diversi livelli di grigio.

Essenzialmente la differenze tra un'immagine in scala di grigi e un'immagine RGB è il numero dei "canali di colore": un'immagine in scala di grigi ne ha solo uno; un'immagine RGB ne possiede tre. Un'immagine RGB può essere pensata come la sovrapposizione di tre immagini in scala di grigi sovrapposte, ognuna con un filtro colorato rispettivamente di rosso, verde e blu.

Attualmente, sia le immagini RGB che a scala di grigi possiedono un canale di colore aggiuntivo chiamato canale alfa, che rappresenta l'opacità. Quando il valore alfa in un dato punto nel dato livello è zero, il livello è completamente trasparente ed il colore in quel punto viene determinato unicamente dal colore dei livelli sottostanti. Quando il valore alfa è massimo, il livello è completamente opaco ed assume il colore propriamente del livello stesso. Valori intermedi di alfa corrispondono a valori di trasparenza: il colore del punto è proporzionale alla somma dei colori del livello e dei livelli sottostanti.

In GIMP, ogni canale di colore, incluso il canale alfa, ha un campo di valori possibili tra 0 e 255: in termini tecnici si dice che ha una "profondità di colore" di 8 bit. Alcune macchine fotografiche digitali possono produrre file immagine con 16 bit di profondità di colore. GIMP non può caricare tali file senza perdere in risoluzione. In molti casi l'effetto è troppo esiguo da poter essere percepito dall'occhio umano, ma in alcuni casi dove ci sono larghe aree con colori che variano molto poco, la differenza può essere percettibile.

Il terzo tipo di immagine, indicizzato, è un po' più complicato da capire. In un'immagine indicizzata vengono usati solo un numero limitato di colori, 256 o meno. Questi colori formano la "mappa colore" dell'immagine e ad ogni punto nell'immagine viene assegnato un colore della mappa. Le immagini indicizzate hanno il vantaggio che possono essere rappresentate su di un computer in un modo che permette un uso molto limitato della memoria e molto tempo fa, informaticamente parlando, (diciamo dieci anni fa), erano molto usate. Ora vengono usate molto meno ma sono ancora tanto importanti da essere supportate da GIMP (e anche perché alcune tecniche di elaborazione delle immagini sono molto più semplici da implementare con le immagini indicizzate che con immagini RGB).

Alcuni tipi di file immagine molto usati (compreso il GIF ) sono aperti in GIMP come immagini indicizzate. Molti strumenti di GIMP non funzionano bene sulle immagini indicizzate e molti filtri non funzionano per niente a causa del numero limitato di colori disponibile. Per questa ragione spesso è meglio convertire un'immagine in modalità RGB prima di lavorarci su. Se necessario è poi possibile ritrasformare l'immagine in indicizzata per poterla poi salvare nel formato originale.

GIMP rende semplice convertire da un tipo di immagine ad un'altro usando il comando Modalità dal menu immagine. Alcuni tipi di conversione (da RGB a scala di grigi o indicizzata per esempio) perdono informazioni che non possono essere ripristinate facendo successivamente l'operazione al contrario.