Période précoloniale. Avant l'arrivée des Européens, le territoire de l'actuelle Gambie faisait partie du grand espace culturel mandé — d'abord sous l'influence de l'Empire du Ghana, puis intégré, au XIVᵉ siècle, à l'Empire du Mali de Mansa Moussa, et relié plus tard à l'Empire songhaï ainsi qu'aux États wolofs du Djolof et du Saloum. Des royaumes locaux comme le Kombo, le Niumi, le Baddibou ou le Niani disposaient de leurs propres bannières royales, tambours et insignes, mais il n'existait aucun drapeau « gambien » unique : l'identité politique était liée au clan, au royaume et au commerce fluvial.
Contact portugais (XVᵉ siècle). Les premiers Européens atteignirent la région en 1455–1456, lorsque les navigateurs portugais Alvise Cadamosto et Diogo Gomes, au service d'Henri le Navigateur, remontèrent le fleuve Gambie. Les Portugais établirent des comptoirs commerciaux le long du fleuve sans jamais revendiquer la souveraineté sur le territoire. Leurs navires arboraient la croix de l'Ordre du Christ ainsi que la bannière royale portugaise.
Rivalité britannique et française (XVIIᵉ–XIXᵉ siècle). À partir de la fin du XVIᵉ siècle, marchands anglais, français, néerlandais et courlandais (territoire de l'actuelle Lettonie) se disputèrent le contrôle du fleuve. En 1651, le duché de Courlande détint brièvement l'île Saint-André (aujourd'hui île Kunta Kinteh), qui passa ensuite aux Néerlandais avant d'être finalement prise par la Royal African Company anglaise. En 1765, les Britanniques créèrent officiellement la province de Sénégambie — toute première colonie britannique d'Afrique —, qui dura jusqu'en 1783, date à laquelle l'essentiel du territoire fut restitué à la France. Tout au long de cette période, le drapeau britannique fut l'Union Jack.
Colonie et protectorat de la Gambie (1821–1965). L'établissement de Bathurst (aujourd'hui Banjul) fut fondé en 1816 sur l'île Sainte-Marie, et en 1821 la Gambie fut intégrée à l'Afrique-Occidentale britannique. Le territoire fut d'abord administré depuis la Sierra Leone, puis brièvement rattaché à la colonie de la Côte-de-l'Or, avant d'être finalement érigé en colonie de la Couronne distincte en 1888. Comme toutes les colonies britanniques, la Gambie utilisait un Blue Ensign frappé d'un emblème colonial : un médaillon circulaire représentant un éléphant devant un palmier sur fond de paysage tropical ; cet emblème fut introduit en 1889, légèrement remanié en 1909, puis de nouveau en 1965, juste avant l'indépendance. Ce drapeau colonial flotta sur la résidence du gouverneur à Bathurst jusqu'à minuit, le 17 février 1965.
Création du drapeau national (1964–1965). À l'approche de l'indépendance, un concours public fut organisé. Le lauréat en fut Louis Thomasi, un comptable gambien d'origine libanaise travaillant à Bathurst — cas inhabituel dans la vexillologie africaine, le drapeau ayant été conçu non par un homme politique ou un artiste, mais par un simple citoyen sans formation héraldique. Thomasi évita délibérément les couleurs panafricaines et toute référence politique : il choisit le rouge pour le soleil, le bleu pour le fleuve Gambie et le vert pour la terre, les deux bandes blanches faisant office de séparateurs visuels et évoquant la paix. Le projet fut approuvé par le gouvernement du Premier ministre Dawda Jawara et inscrit dans la Constitution de 1965.
Adoption lors de l'indépendance (18 février 1965). Dans la nuit du 17 au 18 février 1965, à minuit, devant une foule rassemblée sur McCarthy Square (aujourd'hui place du 22-Juillet) à Bathurst, l'Union Jack britannique fut abaissé et le nouveau drapeau gambien hissé pour la première fois. Dawda Jawara devint le premier Premier ministre du pays, puis, à partir de 1970, à la suite d'un référendum républicain, son premier président. Le drapeau est resté inchangé dans toutes les Constitutions successives.
Confédération de Sénégambie (1982–1989). À la suite de la tentative de coup d'État de 1981 contre Jawara — déjouée grâce à l'intervention militaire sénégalaise —, la Gambie et le Sénégal formèrent, le 1ᵉʳ février 1982, une confédération aux contours souples. Fait notable, aucun drapeau commun sénégambien ne fut jamais adopté : le tricolore gambien continua de flotter à Banjul aux côtés du drapeau sénégalais lors des cérémonies officielles. La confédération fut dissoute le 30 septembre 1989, et le drapeau gambien retrouva pleinement son rôle de pavillon national autonome.
L'ère Jammeh et au-delà (1994 à aujourd'hui). Le 22 juillet 1994, le lieutenant Yahya Jammeh s'empara du pouvoir par un coup d'État sans effusion de sang, renversant Jawara. Bien qu'il ait fait rebaptiser des rues, modifié la devise nationale et même brièvement déclaré le pays « République islamique » en 2015, Jammeh ne modifia jamais le drapeau. Après sa défaite à l'élection présidentielle de 2016 face à Adama Barrow et son exil forcé en janvier 2017 (à la suite d'une intervention militaire de la CEDEAO), le drapeau retrouva une place de premier plan lors des célébrations de la transition démocratique. Aujourd'hui, le tricolore rouge-blanc-bleu-blanc-vert demeure l'un des symboles nationaux les plus reconnaissables d'Afrique de l'Ouest, et le 18 février est célébré chaque année comme jour de l'Indépendance, le drapeau étant au cœur de toutes les cérémonies.