Мультфильм "Вкус памяти" разворачивается в уютном японском городке, где живёт Юкисукэ, скромный и трудолюбивый помощник профессора, работающий в местной лаборатории. Однажды, во время утренней прогулки, он заходит в маленькую пекарню и знакомится с очаровательной продавщицей Коёми. Между ними завязывается дружба, которая постепенно перерастает во что-то большее. Юкисукэ и Коёми проводят много времени вместе, посещая парки, участвуя в фестивалях, и делятся своими мечтами и надеждами.
Однако, трагедия нарушает их идиллию. Коёми попадает в аварию на узкой городской улице. Когда она приходит в себя в больнице, выясняется, что она потеряла память о последних нескольких неделях своей жизни, включая воспоминания о Юкисукэ. Юкисукэ, опустошённый, но полон решимости, решает вновь покорить её сердце и восстановить потерянные моменты.
Юкисукэ начинает посещать Коёми ежедневно, принося ей её любимую выпечку и рассказывая истории о том, как они познакомились. Постепенно, через маленькие жесты и трогательные воспоминания, Коёми начинает чувствовать тёплую связь с Юкисукэ. Он приглашает её на прогулки по знакомым местам, где ранее они проводили вместе время. Постепенно в её сердце начинает пробуждаться прежнее чувство. В процессе восстановления памяти Коёми заново открывает для себя не только Юкисукэ, но и собственные эмоции, обретая уверенность в новом этапе их отношений.