Забавно, но главную проблему в привлечении к себе внимания Винс видел именно в его веселых молодежных песнях. Он обрел популярность, но теперь ему не нравились интервью и фотосессии. Счастьем были периоды спокойной работы в студии и написание песен. Позже, во время работы в Yazoo, он расскажет Times: «Я в то время остро нуждался в получении опыта… я не умел общаться. Вообще не умел. В студии я чувствовал себя богом, но начиная с кем-нибудь разговор…»
Ему не нравилось, когда члены группы задавали ему вопросы по поводу его песен. Они всегда пребывали в сомнениях по поводу текстов. Особенно Дэйв, которому приходилось их петь. Его просто возмутила одна история, связанная с New Life: «Помню раз шел по Бэзилдону,» - рассказывал он в 82, - «и заметил, что за мной по пятам следуют две девахи. Я понял, что они меня узнали. И вот они начинают вопить: “I stand still stepping on a shady street”… я ускоряю шаг, они бегут за мной и… (вздыхает) “AND I WATCH THAT MAAAAN TO A STRANGEEEEEEEER”. И я такой думаю: «Мать их, они хоть слова-то понимают? Наверное, понимают, а вот мы, что-то, вообще не понимаем…»
Винс нередко писал тексты, чтобы они подходили к мелодии. Однажды он дал группе три песни и отошел в уборную. Пока его не было, Дэйв и Мартин глядели друг на друга и говорили: «Да что это за порожняк, мы никогда в жизни не будем записывать это дерьмо!» Когда он вернулся, они улыбнулись и повторили свою мысль без слов «дерьмо» и «порожняк». И, как оказалось, этот момент стал поворотным в истории Depeche Mode.
Терри Мерфи считает, что Винсент задумывал неладное уже в течение нескольких месяцев. Однажды в Бридж Хаус он провел немало времени с Элиссон Мойе: «Он сказал мне, что, мол, они выросли в одном районе, и поэтому он решил прийти ее послушать… мне думалось, что он возьмет ее в Depeche Mode… Правда! Он был так занят своей группой, но нашел же время прийти на концерт! Значит все было не просто так! Я думал: Что он творит? Забавно было бы послушать Элисон в рамках Depeche. У нее такой глубокий голос ну, ты понимаешь»
Естественно, приглашать ее в группу Винсент не собирался. Через несколько месяцев он попросту создаст с ней другую группу, Yazoo, которая станет одним из самых популярных проектов Великобритании 80х. В августе 1981 Винс зашел по очереди к Дэйву и Флетчу и сообщил им, что уходит из группы. На тот момент у группы было 3 хит сингла, альбом был на подходе, они бросили свои работы, чтобы посвятить себя группе… Винс был непреклонен. И объяснение было очень простым.
«Все то, что сопутствовало успеху, внезапно отодвинуло музыку на второй план,» - говорил он после публичного заявления об уходе, - «Сначала нам в письмах фанаты писали о наших песнях. Потом стали спрашивать о том, какие я ношу штаны. Потом стали задавать вопросы,где я планирую тусить в субботу….»
Винс пообещал съездить в тур с группой и торжественно поклялся продолжать писать для них песни. Однако, это предложение не отменяло того шока, в котором пребывали члены группы. На тот момент времени они еще даже не подписали контракта с Sire Records в США, и им пришлось отложить выход альбома. «На самом деле, это был попросту крах,» - говорил Терри Мерфи. «Они потеряли автора песен. Ведь именно в запоминающихся песнях была их сила! Я думал, что, не начавшись, группа сразу же и закончится...» Было очень и очень нелегко представить, что место Винсента займет Мартин. Они все были крайне скромными, но самым тихим был именно Гор. Флетч был менеджером группы, а движущей силой были Дэйв и Винс.
«Мартин всегда тихонько стоял в углу и стеснялся,» - вспоминает Терри. «Он никогда не говорил ни слова. Да они все были молчунами по началу. Чтобы завязать беседу, я сам должен был обратиться к любому из них. И так происходило вовсе не из-за того, что они резко зазнались, а потому, что они были ужасно скромными... Ну представьте себе, внезапно очутиться в Лондоне после жизни в Бэзилдоне!»
Несмотря на врожденную сдержанность и молчаливость, они и не думали отказываться от поставленных целей. Все были абсолютно уверены, что они с легкостью продолжат работать, выдвинув на пост сочинителя Мартина. «Нам, вообще-то, следовало бы волноваться в тот момент,» - говорит Мартин. «Не каждый же день теряешь автора почти всех песен своей группы.»
Depeche Mode продолжили турне. В октябре и ноябре 1981 года они отыграли 14 концертов. Пятнадцатым стал последний концерт с Винсом, в Лондоне, 16 ноября. Улыбчивый и молчаливый Мартин, танцующий Дэйв и сдержанный Флетч не особо подходили под понятие «музыкант». Кларк понимал, что вместе с его уходом закончится и существование группы. «Наверное, когда Винс ушел, мы должны были догнать его и надавать пинков и тумаков за то, что он нас бросает,» - рассказывал Энди в 1986 году, - «но мы простились с ним и попросту направились в студию, чтобы вновь взяться за запись».