Руководство: как сделать нейросетевой/машинный перевод на Gemini

[Wiltonicol 99]

Машинный перевод текстов на базе Google Gemini/Deepseek/OpenAI/Google Translate.

 

Скачать: 
Яндекс Диск или Boosty (немного больше информации и видео)

Важно:

1. Для использования машинного перевода требуется иностранный IP (впн или прокси) и api ключ (у гемини он бесплатный).
2. Для качественного машинного перевода нужен грамотный промпт.
3. Для хорошей фильтрации нужно понимание путей/ключей и регулярных выражений.

 

Планы:
srt/ass/renpy

 

Скрытый текст

Обновления программы:

22.08.2025
Разные улучшения и фиксы

21.08.2025
Разные улучшения и фиксы

20.08.2025
Улучшен процесс получения и обработки респонса. Была проблема, что в таблицу мог сохраниться “сломанный ответ” (‘’json...).

19.08.2025
Пару фиксов для подсчета токенов и таймаута запросов (300c по умолчанию, можно изменить в конфиг файле), добавлен экспорт/импорт глоссария и пару утилит

17.08.2025
Пару фиксов для редактора промпта

16.08.2025
Google Translate и пару опций для промптов

15.08.2025
Существенное обновление, переработка и улучшение всего

23.03.2025
Существенное обновление (0.8):
а) Изменен интерфейс
б) Добавлены новые пункты в настройках, убраны некоторые другие (topp, topk)
в) Убран gpt4free т.к. выдает очень плохие результаты
г) Добавлена возможность создавать промпты и применять их

19.03.2025
Хотфикс (0.7 (upd)):
а) Добавлена поддержка GPT4o (gpt4free), работает без впн и ключа, но возможна нестабильная работа, а еще реклама в ответе чат бота (все вопросы к gpt4free )

19.03.2025
Обновление (0.7):
а) Добавлен чекбокс включающий повторные запросы и проверку кол-ва строк (по умолчанию выключен).
б) Добавлены экспериментальные модели Gemini

15.03.2025
Обновление (0.6):
а) Добавлен Deepseek (да он платный, но на plati можно купить пополнение аккаунта, и deepseek вроде самый дешевый получается среди других)
б) Слегка изменены стандартные настройки и промпт
в) Небольшие изменения, которые должны положительно сказаться на скорости работы программы и запросов
г) Добавлена возможность использовать прокси вместо впн

14.03.2025
Обновление (0.5):
а) Если кол-во полученных строк от бота не равно отправленному, программа совершает повторные запросы, если после 3 попыток строк все еще меньше/больше, в консоль выводится информация по ошибке (проблемный чанк, кол-во строк (полученных/отправленных) и тд)
б)  Если ответ не получен/проблема с соединением/и т.д., программа совершает несколько потвторных запросов, если безрезультатно то в консоль выводится ошибка
в) Добавлен чек бокс чтобы сохранять результат перевода в папку с исходным файлом
г) Мелкие правки текста в консольных ответах
Спасибо @Trevor_!

12.03.2025
Мелкие правки (0.4)

11.03.2025
Существенное обновление (0.3):
а) Полностью переработан код отправки и сохранения текста.
б) Построковый режим убран, можно просто указать 1 строку в соответствующем поле.
в) Из запроса можно исключить строки которые начинаются на определенный символ. Можно указать несколько символов через запятую. Если написать “digits”, то из запроса к боту исключатся все строки с цифрой вначале (к примеру тайминги субтитров).
г) Добавлены настройки чат-бота, выбор модели, пауза между запросами и другие параметры.

09.03.2025 
Добавил новый функционал (0.2):
а) Построковый перевод, с возможностью исключать из запроса к боту строки, которые начинаются на определенный символ. Эти строки просто скопируются в итоговый файл без перевода и отправки боту. Также можно исключить из запроса все строки которые начинаются на любую цифру, для этого в поле нужно написать d* (актуально только для 0.2 версии программы).
В конфиг файле есть новый пункт “sleep”, который ограничивает запросы к боту в режиме построкового перевода, по умолчанию 2 (2 секунды между каждым запросом к боту).
б) В обычном режиме перевода добавлена возможность регулировать кол-во строк на запрос к боту (по умолчанию 150)

08.03.2025
Первая версия

 

Изменено 22 августа пользователем Wiltonicol
Обновление программы

[ahmadrahimov888 23]

@Wiltonicol странный момент в проге. Сделал промпт, глоссарий, начал перевод через гемини, выставил лимиты на 100000 токенов, 300 строк и 0.2 температуру. Судя по отправленным чанкам, должно было все перевестись, но почему-то перевод вышел кусками (несколько сотен строк перевода нет, несколько сотен есть и так чередуется). С чем может быть это связано и как можно решить?
https://ltdfoto.ru/image/vvq5Fj

[parabelum 290]

@ahmadrahimov888, на днях тоже с таким столкнулся. Выход: понижал лимит строк до 10 и продолжал клацать на Перевод, пока прога не доперевёла все строки.

[ahmadrahimov888 23]

@parabelum при лимите строк в 10, она переводила все оставшееся?

 

[parabelum 290]

@ahmadrahimov888, я начал опускать лимит с 300 до 10, пока прога не доперевела всё.

[allodernat 45]

Так как пока нет поддержки конфигов в проге, если менять апи/промты/глоссарии, надо будет где-то отдельно сохранять, потом копи-пастить либо вручную дублировать конфиги, переименовывать туда/сюда обратно, поэтому набросал на скорую руку себе тулзу, но может кому-то ещё будет полезна.

Менеджер конфигов для  MLTranslate_windows.

Закинуть в папку с MLTranslate_windows.

Скрытый текст

###  Основные функции:
- **Дублировать конфиг** - создает копию текущих настроек с новым именем
- **Активировать конфиг** - делает выбранную конфигурацию активной
- **Сохранить изменения** - сохраняет внесенные изменения в конфиг
- **Создать бэкап** - создает резервную копию с датой и временем
- **Восстановить из бэкапа** - возвращает настройки из резервной копии
- **Удалить конфиг** - удаляет ненужные конфигурации

###  Статусы файлов:
- **(серый кружок)Активный источник** - конфиг, который сейчас используется
- **⚪ Неактивный** - сохраненные конфигурации, готовые к активации
- **(значок дискеты) Бэкап** - резервные копии для восстановления

 

[allodernat 45]

@ahmadrahimov888 а почему температуру 0.2 выставили?

[Luchik 19]

В 29.08.2025 в 10:28, ahmadrahimov888 сказал:

@Wiltonicol странный момент в проге. Сделал промпт, глоссарий, начал перевод через гемини, выставил лимиты на 100000 токенов, 300 строк и 0.2 температуру. Судя по отправленным чанкам, должно было все перевестись, но почему-то перевод вышел кусками (несколько сотен строк перевода нет, несколько сотен есть и так чередуется). С чем может быть это связано и как можно решить?
https://ltdfoto.ru/image/vvq5Fj

Не знаю именно его программу (просто решила посмотреть чем тут люди увлекаются и что делают), а знаю сам гемини и работу в нём, у гемини лимиты выходные у Pro 2.5 — 65к (очень странно что в его программе не выбивает ошибку при выставлении таких лимитов в 100к) и то на апи он может упереться во время отправки (тоже лимиты). Если у вас не лучший интернет, и не лучший впн (если он вам нужен), то лучше меньше + нужно точно знать какой гемини вы используете, у 2.0 вообще 8к лимит.

Вот если что ссылка на документацию, входные под миллион, выходные 65к — 
Gemini 2.5 Pro  |  Generative AI on Vertex AI  |  Google Cloud

Субъективно но (строки) странный параметр для программы работающей с нейронкой, так как все же тут важно именно количество токенов, а в 300 строках, может быть и совсем мало токенов, а может быть очень много если текст очень плотный.

Изменено Суббота в 07:49 пользователем Luchik

[allodernat 45]

@Luchik параметр этот работает вкупе с лимитом токенов. Количество же токенов лично мне не даёт особо понимание по тому сколько строк уйдёт максимум на отправку(, только если отправить, а так получается нагладно, к примеру 8к токенов, но не больше 300 строк. Если строки объёмные, и промт большой то уйдут меньше. Про 100к и 300 строк соглашусь, если промт как война мир, и строки объёмные, то может попытаться уйти и все 100к 

[Luchik 19]

1 час назад, allodernat сказал:

@Luchik параметр этот работает вкупе с лимитом токенов. Количество же токенов лично мне не даёт особо понимание по тому сколько строк уйдёт максимум на отправку(, только если отправить, а так получается нагладно, к примеру 8к токенов, но не больше 300 строк. Если строки объёмные, и промт большой то уйдут меньше. Про 100к и 300 строк соглашусь, если промт как война мир, и строки объёмные, то может попытаться уйти и все 100к 

Жалко что в этой программе у вас нет конечно счетчика токенов. 
Вот вам измеритель токенов онлайн — https://platform.openai.com/tokenizer  

Но да понимаю что строками легче как то мерить тексты, чем количеством токенов в файле 

Изменено Суббота в 10:23 пользователем Luchik

[allodernat 45]

@Luchik вообще счётчик есть, только пользователь его не видит, можно при отправке включить, чтобы показывало в логе сколько сколько токенов “ушло”. Нет, на глаз сложно определить, лично у меня глазометр не так развит

6 минут назад, Luchik сказал:

Количество слов в файле узнать не сложно через powershell для примера, или word или плагины в нотепад++ и т.п)

Можно, но зачем? Есть ограничение по количеству токенов, есть ограничение по количеству строк. Чисто для инфы если только. Тем более, прога работает с большим количеством данных, но она не отправляет все сразу данные, к примеру, я вот зарядил в прогу 18000 строк, но чанки идут по 100-300 строк, и вы мне предлагаете вытаскивать 300 строк, обрабатывать через скрипт… Зачем? Когда я вэб пользуюсь тоже не заморачиваюсь с подсчётом токенов, я делю большой файл на маленькие не больше к примеру 40кб и не больше 400 строк, вот эти файлы уже закидываю в вэб, и там уже пишется сколько токенов мой файл, но в условиях проги в этом нет большой необходимости.

[Luchik 19]

17 минут назад, allodernat сказал:

@Luchik вообще счётчик есть, только пользователь его не видит, можно при отправке включить, чтобы показывало в логе сколько сколько токенов “ушло”. Нет, на глаз сложно определить, лично у меня глазометр не так развит

Можно, но зачем? Есть ограничение по количеству токенов, есть ограничение по количеству строк. Чисто для инфы если только. Тем более, прога работает с большим количеством данных, но она не отправляет все сразу данные, к примеру, я вот зарядил в прогу 18000 строк, но чанки идут по 100-300 строк, и вы мне предлагаете вытаскивать 300 строк, обрабатывать через скрипт… Зачем? Когда я вэб пользуюсь тоже не заморачиваюсь с подсчётом токенов, я делю большой файл на маленькие не больше к примеру 40кб и не больше 400 строк, вот эти файлы уже закидываю в вэб, и там уже пишется сколько токенов мой файл, но в условиях проги в этом нет большой необходимости.

А я уже удалили этот блок, так как действительно зачем вам это всё) Например я знаю как у меня на работе это. Там получается уже заранее забит придел токенов различных моделей, и он делит чанки и “умно” чтобы не превышать этот лимит, плюс да человек может задать лимит меньше, но не больше, и конечно только в токенах. Плюс там идёт определение до отправки, то есть например кинул файл, и он показывает “Ага тут вот столько токенов, делить буду в этом месте в этом и вот в этом”, и потом нажимаешь “отправить”.

Хотя момент строк интересный конечно, с одной стороны возможно даже удобный, но наверное я бы сделала что то по типу от такого количества строк, до такого количества строк, там от 100 до 300, потому что например верхний текст в файле может быть не такой “пухлый”, а нижний попухлее и т.п (или уже так и работает?)
 

Изменено Суббота в 10:41 пользователем Luchik

[allodernat 45]

@Luchik я ещё раз повторю, в этой проге забивается предел токенов, и прога учитывает предел токенов и предел строк. Т.е. если у меня предел токенов стоит 8000, а предел строк я введу 500, то у меня не отправит больше строк, если будет превышение количество токенов, но если  у меня будет выставлен предел строк 200, а предел токенов 20000, то у меня отправит только 200 строк.

Если вы мне не верите, то вот:

Скрытый текст

Видите, что задан лимит 5к? А лимит строк 300? Видите, что идёт отправка 244 строк? Ещё есть недопонимание?)

Изменено Суббота в 10:46 пользователем allodernat

[Luchik 19]

5 минут назад, allodernat сказал:

@Luchik я ещё раз повторю, в этой проге забивается предел токенов, и прога учитывает предел токенов и предел строк. Т.е. если у меня предел токенов стоит 8000, а строк я введу 500, то у меня не отправит больше строк, если будет превышение.

Если вы мне не верите, то вот:

  скрин (Скрыть содержимое)

Видите, что задан лимит 5к? А лимит строк 300? Видите, что идёт отправка 244 строк? Ещё есть недопонимание?)

Нет нет, я верю  
Я просто уточняю (как то слишком агрессивно отстаиваете свою позицию )

Хорошо, а например представим у меня вместе со строкой 224 5500 токенов, но строка 223 4500, ну вот такая большая строка (чисто пример наглядный), он не примет всю строку 224? Или отправит только половину, что вызовет перевод только половины строки 224?

[allodernat 45]

@Luchik первый чанк будет 222 строки, второй чанк будет 223-ая строка(одна строка), если последующие плюсом будут укладываться в лимит, то отправит 2-3-4-5 и т.д. строки, если же 225-ая будет условно 600 токенов, то отправит одну 224 строку. Отправляет только построчно, если строка 4500 токенов, а лимит 4000 токенов эту строку пропустит, но я лично так не пробовал) Так что если проге задать только предел токенов, скажем 5000, а строк вписать 99999(считай отключаем лимит строк), то она всё равно ровно 5000 не задействует, будет меньше, с учётом погрешности для целостности строк.

Если хотите, можете потестить прогу, она свободно скачивается, заодно потом расскажите какие баги встретили.  Я работал только с json файлами в проге, как она работает с txt/csv и прочими форматами сказать не могу, но вы можете сами узнать и поделиться своими наблюдениями основанными не только на теории, но и на практике)

Изменено Суббота в 11:07 пользователем allodernat

[Luchik 19]

22 минуты назад, allodernat сказал:

Если хотите, можете потестить прогу, она свободно скачивается, заодно потом расскажите какие баги встретили.  Я работал только с json файлами в проге, как она работает с txt/csv и прочими форматами сказать не могу, но вы можете сами узнать и поделиться своими наблюдениями основанными не только на теории, но и на практике)

У меня сейчас в планах прохождения пару игр в свободное время от работы  
Но в принципе можно(если будет время).

Может даже подчерпну какие то идеи для программы из программы на работе и сравню их, может тут что то подчеркну и подскажу программистам с работы  

Изменено Суббота в 11:22 пользователем Luchik