Cole Porter, eenzaam aan de top