La manifestazione viene chiamata Festa del Porto di Pesaro o Festa della Beatissima Vergine Maria della Scala del Porto oppure Solennità della Madonna della Scala del Porto. La tradizione riconosce la sua origine poco prima del Rinascimento. L'evento ruotava intorno alla Chiesa di Santa Maria della Scala detta anche del Porto costruita poco dopo il 1500, ricostruita sulla base del progetto di Pietro Togni nel 1822 e al cui edificio venne aggiunta una seconda Chiesa proprio accanto nel 1979 per contenere il numero dei fedeli aumentato notevolmente dal dopoguerra in poi. La zona portuale, nell'800 era un vero e proprio rione marinaro, un quartiere ma anche un mondo a parte, caratterizzato da una certa qual solidarietà degli abitanti riconosciuti nella città di Pesaro con l'appellativo di "portolotti". A questo proposito nell'odierna Piazza Doria esistevano delle barriere cioè cancellate che avevano la funzione di imporre dazi doganali alle merci in transito verso il centro di Pesaro. Durante la notte questi cancelli venivano chiusi fino alla mattina seguente e il centro storico si divideva dal porto facendolo diventare un paese fuori dal centro. Durante la Festa del Porto si svolge in concomitanza un mercato rionale con l'aggiunta dello stand ittico che per la presenza anche di artisti e intrattenimenti stravaganti (l'albero della cuccagna, il torneo di burraco, la rievocazione del lavoro delle filandaie di Valazzi ecc.) si trasforma in Fiera vera e propria. Un tempo esisteva il mercato ittico che si svolgeva in pescherìa, una struttura possente che si prolunga lungo la vìa Cavour. La Festa del Porto ha ciclicità annuale e si svolge con la Messa nella Chiesa della Madonna della Scala, la deposizione di una corona difronte a quella che era la casa del più prestigioso abitante del sestiere, l'esploratore Antonio Cecchi, figura assai cara ai portolotti e la regata dei dragoni ovvero una spedizione in piena regola in mare con i pescherecci e altre imbarcazioni compresa quella della Capitanerìa di porto che si incarica di gettare in acqua una corona d'alloro in memoria di tutti i Caduti del Mare il tutto seguito da uno spettacolo pirotecnico.