Efter 120 mållösa minuter i Vancouver fick en straffrysare avgöra.
Efter att lagen hade satt varsin straff klev Colombias lagkapten Davinson Sanchez fram.
Han stannade till lite i ansatsen, trippade fram och smällde bollen rakt i ribban.
Men även Schweiz hade en mittback som skulle missa. I den tredje straffrundan sköt Manuel Akanji högt, högt över. Men Akanji och Schweiz räddades av Gregor Kobel som räddade den efterföljande straffen.
Det bäddade för att Ruben Vargas fick avgöra.
”Skrivit historia – fantastiskt”
Inför en massiv colombiansk ljudkuliss på läktarna behöll han lugnet och satte den avgörande straffen.
– Nu har vi skrivit historia, och det känns helt fantastiskt. Det var en otroligt positiv energi, och jag kände mig så säker inför straffen. Jag slog den med full övertygelse och är bara tacksam över att den gick in, säger Vargas till SRF.
Efter matchen var Colombias anfallsstjärna Luis Diaz till synes otröstlig och tårarna rann ner.
Det var annars en match som knappast badade i farliga chanser.
Matchens första 90 minuter var en slätstruken historia men i förlängningen började det hända lite mer. Colombia hade en nick i ribban i den första förlängningshalvleken och Schweiz saknade inte heller lägen.
Men förlängningen gick i samma mållösa mönster och det blev straffar som fick avgöra.
Första sedan 1954
Kvartsfinalen mot Argentina spelas natten till söndag 03.00, svensk tid.
Senast Schweiz var i VM-kvartsfinal var 1954.