Недавно у нас произошла небольшая (жопа) ситуация с ботом @emelya_ai_bot.

Недавно у нас произошла небольшая (жопа) ситуация с ботом @emelya_ai_bot. Чуть позже расскажу подробнее, что это за бот😎

Мы используем платёжную систему Cloudpayments. Выбрали её, потому что там была возможность принимать оплату зарубежными картами. Позже нам в этом отказали без объяснения причин, причём уже после подключения и оплаты, но это уже совсем другая история…💦💦💦

И вот, примерно в 23:40, когда все нормальные люди готовятся ко сну 😶, неожиданно выясняется: наш сервер, на котором развернут бот, заблокирован со стороны платёжной системы. ⁉️😬 Никто из пользователей не может оплатить услугу, а те, кто уже оплатил, не могут проверить статус. Самое забавное, что на часах почти полночь, но именно в этот момент у нас наблюдается внезапный всплеск покупок.

Поддержка Cloudpayments, естественно, работает только в будние дни (и то не с самого раннего утра), так что до завтра мы бы уже потеряли кучу пользователей. Хотя мы заранее предоставляли все необходимые данные по серверу и боту (чтобы нас не путали со “скамерами”), блокировку это естественно не отменило.

Изучив документацию Cloudpayments, я увидел, что при “слишком большом числе запросов” сервис выдает ошибку 429 - которую естественно я не видел, наш запрос не доходил до их сервера. Но никаких упоминаний о том, что они могут прям взять и заблокировать целый сервер по своему файрволу, там не было. Пришлось в спешном порядке разворачивать прокси, настраивать всё так, чтобы бот не ругался, и почти до 2 ночи мы возились с этим всем, а потом ещё пару часов ушло на выяснение причин — хотелось убедиться, что проблема точно не у нас, а действительно “снаружи”.

На следующий день Cloudpayments ответили, но всё равно целую неделю “морозили” нас, пока мы скидывали логи и доказывали, что произошёл сбой именно на их стороне. В конце концов они признали, что наш сервер “случайно” заблокировал их файрвол из-за того что посчитал это ДОС атакой 🫣.

Подходит тут только один мем: «Давай, вошли - вышли, приключение на 20 минут»