Spädbarnen var enligt polisen i olika grad av förruttnelse, rapporterar Winnipeg Free Press.
Polisen avvaktar ett utlåtande från obduktionen för att bestämma dödsorsaken. Man säger att det handlar om spädbarn, kanske nyfödda.
Konstapel Eric Hofley från polisen i Winnipeg säger att det inte finns några rapporter om försvunna spädbarn i staden.
Han säger att det för närvarande inte finns några misstänkta men att man talar med ”intressanta” personer. Polisen vet ännu inte vem som hyr förrådet.