私もカフェのオープンを検討し、店舗付きの住居まで借りて内装工事に着手したた時に妊娠が分かり、総合的に判断して延期しました。
ご夫婦で、という点がうちとは違いますが（主人は主人で自営の会社と週末だけの飲食店を持っていますので、主人を働き手のひとりとして数に入れる事は難しかった）、ご主人ひとりでもまわせる規模なら大丈夫かもしれませんが、かなり厳しいと思います。
赤ちゃんの世話をしながらでは質問者さんを働き手のひとりとしてカウントするのは難しい、という点で。
うちには手伝ってくれる従業員が既に確保（と言っても会社と、週末店で雇っていた社員さん）してありましたが、私が再々抜けて店の上の住居に行ったまま、授乳やオムツ替えでいつ店に戻れるか分からない状況ではままならない事も多かろうという結論で、もう少し大きくなってからでも遅くはないと判断しました。
うちの事はともかくとしても、飲食店で赤ちゃん、しかも絶対オムツは取れていない… となると、お客さんの反応も厳しいものになるかと。
赤ちゃんが機嫌のいい時に、手伝いにのぞく、くらいのスタンスならば大丈夫でしょうが、質問者さんの手に頼った（経理などではなく店に出る事をアテにした）運営は難しいと思いますが…。
夫婦ともに自営業では保育園に入りにくいと言われているようですが、私の住む地域は夫婦で自営業でも保育園に預けている方たちはたくさんいらして、サラリーマンと大変さはさほど変わらないよう。
当方田舎住まいですから一概に言えませんが…。
オープンを前に保育園入園も視野に入れて再度ご夫婦で検討される事をお勧めします。
