ニューヨークとは限らない。大都会とは少々変わり者でも生きていける所だ。山の手に住むユダヤ系のアルビー（Ｗ・アレン）もそんな1人。彼はＴＶやナイトクラブのトークショーで稼ぐ漫談芸人。歳の頃は40、離婚歴1回のド近眼メガネ人間だ。そんな風采の上がらない小男の彼だが、なぜか女の子には人気がいい。彼の周りにはいつも女の子がウロチョロ。そんな彼がある日、友人のＴＶディレクターのロブ（Ｔ・ロバーツ）達とテニスに行って、1人の美人と出会った。会話もユニークな彼女の名は、アニー（Ｄ・キートン）。どこか屈託のない童女の雰囲気の彼女に出会ってからアルビーが変わった。アニーとのデートが日課の一つになったのだ。2人が同棲生活に入ったのはそれから間もなく。お互いにのぼせあがっていた2人も時がたつにつれて、お互いのアラが目についてきた。アルビーの周りには、あいかわらずＴＶ局の女ロビン（Ｊ・マーゴリン）や、アリソン（Ｃ・ケーン）がいて、アニーは気になり、アルビーもアニーのつかみどころのない生き方がわからない。ましてアルビーは、男の独占欲にめざめてきたのだ。行きづまった2人の関係。2人は精神分析医の所に行き、2人の溝は埋まったかに見えた。だがそんなある日、アニーがいつものようにクラブで歌っていると、プロ歌手トニー（Ｐ・サイモン）が彼女の歌をほめ、カリフォルニアにくるようにすすめる。彼女は有頂天になり、精神状態も全快へとむかったが、アルビーはまだダメ。彼はアニーとトニー、果てはロブの仲まで疑い出したのだ。もうこうなってはおしまいだ。2人は別居を決意し、アニーはカリフォルニアに飛んで行った。一方、残されたアルビーを襲う寂寥感。アニーの後を追い、カリフォルニアに行き、やり直そうとアニーに迫るアルビーだったが、今のアニーは歌手としての成功の方が気になっていた－－。