Плотное скопление французской кавалерии необыкновенно смешалось. Их было слишком много для этого поля. Они приходили из долины столь плотными рядами, что не могли двигаться, и постоянно блокировали атаки друг друга. Генерал Леритье повел своих кирасиров в тыл второй линии и попал под огонь резервной батареи Веллингтона. Целый французкий полк двинулся налево, прошел по дороге на Нивелль, затем отошел к Брен-л'Аллё, позади позиций Митчелла, вновь прошел мимо Угумона, спустился в долину и перестроился. Но такие набеги ничего им не дали.

Атаки стали менее быстрыми и энергичными. В клубах серного дыма стало невыносимо жарко. Большинство французских генералов были ранены. Маршал Ней, под которым убило лошадь, передвигался пешком. Великая атака не удавалась, становилась бессистемной. Тогда герцог Веллингтон вышел из квадрата своего 73-го полка и приказал кавалерии вступить в бой. Английские эскадроны вскоре атаковали огромную группу французских всадников и смогли оттеснить их, сломленных и побежденных, в долину.

Даже тогда маршал Ней не намерен был сдаваться. Заметив карабинеров Бланкара, остававшихся в резерве у Келлермана, он раздобыл лошадь и поехал прямо к ним. Генерал Бланкар изо всех сил пытался спасти маленький резерв, но Ней настоял на том, что поведет его во главе новой атаки. Успех был недостижим. Карабинеры добрались до некоторых из квадратов, но были задержаны непроходимыми барьерами из тел павших, и вскоре их оттеснил Грант, который вернулся на исходные позиции, обнаружив, что передвижения Пире были простой демонстрацией. И снова французы отважно, но устало возобновили атаку. Лошади больше не могли двигаться вперед; накануне ночью их бросили неухоженными, и хуже всего пришлось тем, которые провели ее под дождем, нагруженные своими седоками. В тыл непрерывным потоком шли безлошадные ныне солдаты; затем лошади начали отступать вместе с седоками, и вскоре все они дрогнули, повернули вспять, обескураженные и сломленные, и поехали к центру долины, скорее преследуемые на расстоянии, чем оттесненные английской кавалерией, которая устала не меньше.

На правом фланге французов корпус Бюлова смог оттеснить бригаду, размещенную Лобау в Планшенуа; захватив деревню, они открыли огонь по подразделению Лобау, и выпущенное ими ядро, достигнув дороги на Шарлеруа, упало позади Наполеона. Столкнувшись с опасностью того, что пути к отступлению могут быть для него отрезаны, Наполеон послал Дюэма вместе с Молодой гвардией и двадцатью четырьмя пушками вновь взять деревню. Кавалерия Дюрютта, находясь в районе Папелотта и Ла-Э, была вынуждена развернуться и встретить пруссаков.

Принужденный отступить со своими солдатами, которые не могли больше предпринимать дальнейших попыток к наступлению, Ней бросил на линию обороны англичан шесть полков пехоты из корпуса Рейля, поддержав их теми небольшими остатками кавалерии, которые смог собрать вместе. Но силы были неравны; английские артиллеристы открыли огонь, и через несколько секунд около 1500 человек было убито; нападение остальных было отбито бригадами Дюпла и Халкетта. Кавалерия не смогла дойти даже до английских батарей и вскоре спустилась с холма в долину.

Ней потерял треть своих солдат и лошадей, погибли многие офицеры командования. Потери со стороны Веллингтона были не менее серьезными; хотя герцог не был ранен, многие из офицеров его штаба погибли. Тяжелая кавалерия обеих сторон была чересчур измождена, чтобы продолжать бой.

За время кавалерийских атак английская линия сжалась, и фронт много раз получал подкрепление. Дивизия Шассе стояла на марше из Брен-л'Аллё, в то время как герцог был убежден, что Наполеон не будет маневрировать на его правый фланг. Бригада Адама (из дивизии Клинтона), стоявшая в резерве, была передвинута в правый центр и построена позади верхушки холма к северу от Угумона. Отряд из Халя не был приведен для участия в акции, хотя, предположительно, герцог мог его использовать. Пехота д'Эрлона, несмотря на то, что попытки занять Ла-Э-Сент были столь стремительно отбиты, не оставляла надежд захватить укрепления, чьи защитники уже испытывали недостаток в боеприпасах и не могли получить новые.

На правом фланге французов Дюэм смог вытеснить пруссаков из Планшенуа. Однако корпус Пирха I приближался к Парижскому лесу, и авангард Цитена достиг Оэна.

Такова была диспозиция на 6 часов вечера, в конце третьей фазы битвы.

Днем дождь прекратился, начинался прекрасный вечер. Наполеон поехал осмотреть поле боя, его воодушевлял успех Молодой гвардии, которая заняла Планшенуа. В это время были ранены один или два генерала, сопровождавшие его, поскольку он передвигался в пределах досягаемости неприятельского оружия. Декостер, его проводник из крестьян, которого заставили сопровождать императорскую процессию, стал паниковать и неоднократно пытался развернуть лошадь и бежать. Говорят, что Наполеон сказал ему: «Друг мой, пуля ударит вас в спину так же, как и в грудь, только это будет гораздо хуже выглядеть». Последнее время Наполеон часто бывал молчаливым и замкнутым, но сейчас был в прекрасной форме; он ободряющим тоном разговаривал с солдатами и уверял своих спутников, что сегодня ночью они будут в Брюсселе и как раз успеют к ужину. Несмотря на твердое сопротивление Веллингтона, он не желал признавать саму возможность того, что англичане смогут выдержать длительную битву с Великой Армией; он говорил себе, что сейчас они, должно быть, на грани поражения, и дал Нею приказ любой ценой захватить Ла-Э-Сент.

У Наполеона еще оставались шансы разрушить линию Веллингтона; однако теперь, когда вся его кавалерия была потеряна, ему больше ничего не оставалось, как только повернуться спиной к своему противнику. Без сомнения, в данном случае было предпочтительнее отступить, нежели оставаться на поле; но императорский ум находился в плену иллюзий.

Ней подошел к Ла-Э-Сент во главе дивизии Донзело и отряда инженеров. В это же время Дюрютт начал наступление на ферму в Папелотте.

Ла-Э-Сент недавно получил подкрепление, но майор Баринг неоднократно посылал запросы о боеприпасах, и все они оставались без ответа. По каким-то причинам это место было недостаточно подготовлено к обороне. «Важнейшей ошибкой, которую герцог Веллингтон совершил в отношении военных действий при Ватерлоо, — пишет Шоу-Кеннеди, — было то, что он просмотрел насущную необходимость любой ценой сохранить контроль над фермой и окрестностями Ла-Э-Сент». Не только не были предоставлены необходимые боеприпасы, но и отсутствовали какие-либо инструменты и приспособления, которые могли бы сделать защиту эффективнее. Подсчитав запасы, защищавшиеся обнаружили, что на каждого из них остается лишь по три-четыре патрона. Встал вопрос об отступлении на исходные позиции, но солдаты пожелали бороться до конца, и майор Баринг решил держаться до последнего. Французы решительно атаковали их позиции; многие из них погибли, но постепенно защитники прекратили огонь. Они израсходовали все боеприпасы. Инженеры Нея смогли топорами разрубить ворота и двери фермы и войти в здание. Ожесточенная рукопашная схватка продолжалась до тех пор, пока героический гарнизон не был уничтожен почти полностью. Наконец, до последнего отсрочив захват фермы французами, майор Баринг продолжил сражаться на брюссельской дороге с сорока двумя своими солдатами, всеми, кто остался из гарнизона в 378 человек.