UnityEX

DragonZH · September 12, 2015

Программа для работы с архивами Unity.

Скрытый текст

поддержка версий архивов 4, 5, 2017, 2018, 2019
поддержка AssetBundles(Unity3D) UnityRaw
поддержка AssetBundles(Unity3D) UnityWeb
поддержка AssetBundles(Unity3D) UnityFS
поддержка .splitX (Android)
поддержка GUI и консольного режима
экспорт всех и выбранных файлов из архива в GUI режиме
экспорт всех файлов и файлов по типу из архива в консольном режиме
алгоритм массового импорта файлов из каталога извлечённых за один заход Размеры импортируемых файлов абсолютно не важны
английская локализация
поддержка архивов консольных платформ (PS3)
поддержка шрифтов ttf или извлечение метрики координат font_raw
поддержка текстовых файлов
поддержка распознания имён файлов monobehaviour и их типов по вложенному в них скрипту
поддержка конвертации текстур (DDS, CRN, KTX, PVR)
поддержка атласов по распознанному файлу monobehaviour с типом UIAtlas, разделение и собирание спрайтов, возможно изменение размеров картинок через пересоздание атласа в программах ShoeBox или TexturePacker с xml метрикой.
поддержка обработка текстур из внешних ресурсов ResS при извлечении файлов из assets
поддержка видео файлов
поддержка аудио файлов
поддержка обработка звуковых файлов из внешних ресурсов resource при извлечении файлов из assets
поддержка извлечения запаковки mesh в obj
поддержка извлечения моделей в smd через “Вид GameObjects” (models, bones, textures), без анимации
поиск по именам файлов
поиск текста в файлах

Скачать UnityEX с яда

Скачать UnityEX с меги

Сборник bat файлов для консольного режима

Spoiler

https://yadi.sk/d/rTSmKgUI6vwEcw

Spoiler

Для тех, кто вообще чайник, и не знает что это такое.

Что такое консольный и графический режим?
Это запуск программы (приложения) в консоли. Бывают консольные приложения, и гуи с графическим интерфейсом, UnityEx содержит и тот и другой режим, запуск через консоль выполняется с параметрами, в гуи же используется графический интерфейс.
Что такое консоль?
Например, консоль виндовс Пуск->Стандартные->Командная строка или Пуск->Выполнить->cmd
Что такое запуск программы с параметрами?
Например, программу можно запустить с параметрами, идущими после имени файла UnityEx.exe “параметр 1” “параметр 2” “параметр 3”...
Не обязательно нужно выполнять запуск именно из консольного окна, так как это не очень удобно. Возможно, все включали консоль в HalfLife для введения читов, прописывая в ярлыке от hl.exe после имени файла -console, это и есть параметр запуска игры со своей консольной строкой, по-другому это ещё называется ключ. Но и запуск с ярлыка с параметрами тоже в нашем случае не удобен, но для сведения это лучше знать, не подойдёт, так как нужно обрабатывать разные файлы ещё это называется пакетной обработкой. Поэтому нужно запускать выполнение программы из файла с типом bat это текстовый файл, который содержит простой язык программирования для запуска приложений с параметрами. Этот текстовый файл предварительно создаётся например из txt и переименовывается на тип bat или берётся за основу уже готовый.

Например, для обработки всех *.assets архивов и извлечения из них всех текстур используется такой простой код.
for %%a in (*.assets) do UnityEX.exe export "%%a" -t dds,cru,pvr
pause
Файлы bat, assets и UnityEX.exe все находятся в одной папке. assets файлы перебираются и с помощью UnityEX.exe распаковываются задачей export, в место "%%a" будет подставляться имя архива, и так по всем assets файлам, так как указанна маска *.assets. ключ или ещё настройка -t dds,cru,pvr она включает в себя два параметра первая -t ключ, а после неё идут необходимые типы файлов, которые нужно обработать (полное описание этого ключа описано ниже). Далее pause необязательная команда, она просто оставляет консольное окно открытым после завершения работы. С полным списком консольных команд можно ознакомиться в интернете, но по идее нужно знать только cd, md, del, copy, xcopy, echo, for, if остальное не очень нужно, ну кроме задания переменных командой set и замены строковых данных в этой переменой например для изменения пути в этой переменной. Для for иногда идёт с /r это цикл с проходом по файлам которые находятся даже в папках. Для улучшенного копирования xcopy используются /Y /E замена при копировании Yes и E хз, но это создаёт папки, а также перед ним echo f| echo d| распознание того что копируется, файл или директория. Для if exist проверка существования файла. Это всё можно погуглить. Ну и для замены в переменных используя циклы необходимо в начале указывать setlocal enabledelayedexpansion.
В общем это всё кратко и поверхностно, чтобы полностью разобраться и как писать эти команды нужно искать это в инете.

Более сложный пример для разбора разных андроид архивов и level файлов без типа.

for %%a in (*.assets;????????????????????????????????;level*.split0;*.assets.split0) do UnityEX.exe export "%%a" -t ttf,txt
for /l %%i in (0,1,30) do if exist level%%i UnityEX.exe export "level%%i" -t ttf,txt

? в маске это неизвестный символ, но количество вопросов указывает их количество, например для такого файла 0b0ecf59168514cb1adbe28cb079b1f7
Потом маска для .split0 файла от него подхватываются остальные .split1 .split2…
Ну и другой цикл проход по level файлам с level0 до level30

Описание настроек от версии ниже 1.8.0, для новых можно узнать запустив программу из консоли с параметром UnityEX.exe help

Использование:

UnityEX задача <архив unity> [настройки]

задача:
export
Распаковать все файлы из архива в каталог \Unity_Assets_Files\имя_архива\
import
Запаковать все файлы в архив из каталога \Unity_Assets_Files\имя_архива\
exportbundle
Распаковать bundle из архива в каталог \Unity_Assets_Files\имя_архива\Bundle

importbundle
Запаковать bundle в архив из каталога \Unity_Assets_Files\имя_архива\Bundle
настройки:
-t <тип> экспорт импорт файлов по типу (-t ttf,txt,114,tex,dds,crn,ktx,pvr,obj...)
Все MonoBehaviour могут быть извлечены через настройку (-t 114), типы файлов с отрицательным числом.
-f экспорт шрифтов в контейнере типом fnt.
-nft отключение переворачивания текстур dds.
-ndc отключение захвата консольного, с захватом возможна ошибка на x64ОС.
-p выбранный путь для операций с файлами (-p "PATH"). По умолчанию где находится архив.
-ext имена папок архивов с их расширениями.
-ncomp без сжатия архивов на запаковке.
-res [файл нового ресурса] импорт текстур в resS файл. Опционально с именем файла нового ресурса, по умолчанию в прежний.
-skip_ud пропуск неизвестных данных в начале каждого файла.
задача:
list
Создать список файлов архива
настройки list:
-l [list.tsv] по умолчанию <name_archive>.tsv
задача:
search
поиск строки
настройки search:
-sp [string] что нужно найти, получение строки поиска из параметра
-sf [file] что нужно найти, получение строки поиска из файла первой строки в нужной кодировке
-lf [file] вывод лог файла
-ef экспорт найденных файлов
-nr без учёта регистра

При запуске без параметров запускается графический интерфейс.

Все MonoBehaviour могут быть извлечены через настройку (-t 114), типы файлов с отрицательным числом.

Схемы конвертации.

Скрытый текст

Файлы .resS и .resource
Это файлы относящиеся к архивам .assets и возможно level файлам. Они не открываются напрямую, а обрабатываются с помощью открытия самих архивов от них. В .resS содержатся данные битмапов (c версий юнити 2018 и меш данные), а в .resource звуковые данные (FSB5, OggS, c версий юнити 2018 и видео данные).
Например распаковка текстур из подхватываемого файла resources.assets.resS из resources.assets идёт в Unity_Assets_Files\resources\Textures\res_resources\
(а распаковка данных уже находящихся в resources.assets идёт в Unity_Assets_Files\resources\Textures\)
По умолчанию запаковка данных битмапов идёт в сам assets, но можно и выполнить и запаковку для тех файлов, которые уже были в .resS файле, например ключом -res из консольного режима или в гуи нужным переключателем, это ускорит запаковку при больших размерах ассетов. Также через консольный режим можно выполнить запаковку в новый .resS файл, если указать после ключа новое имя -res resources_RUS-RU.resS, именно так перебив (.assets на такую же длину _RUS-RU) это также позволит ускорить запаковку в большие assets файлы, но и без изменения самого resS файла.
tex файлы бывают двух видов только шапка без битмапа (имеют небольшой размер), и уже собранные шапка и битмап из реса.
snd также только в рес части находится сам звуковой файл.

Текстуры:

BC4, BC6, BC7 — плагин для фотошопа Intel Texture Works
CRN — Crunch официальный сайт https://code.google.com/archive/p/crunch/
https://yadi.sk/d/rOqX4VPFFSOlRQ
(В архиве в MD находится модифицированный для crn unuty 2018 и официальный в OF. UnityEX автоматически конвертирует crn2dds, если конвертер находится рядом с исполнительным файлом. Обратно сконвертированные dds2crn, возможно, будут не работать, но это можно обойти запаковав вместо файла с последними типами .tex.crn и tex.crn.dds уже сам файл .tex.dds с любым стандартным битмапом).
PVR, KTX — PVRTexTool или его плагин для фотошопа
ATC_RGB4, ATC_RGBA8 — The Compressonator AMD

Плагины для открытия текстур в Photoshop:
Плагин для PVR есть в PVRTexTool и находится по пути
(Dir PVRTexTool)\Imagination\PowerVR\GraphicsSDK\PVRTexTool\Plugins\Photoshop\
Плагин для DDS можно использовать Nvidia
Плагин для DDS DX11 можно использовать Intel (IntelTextureWorks + Nvidia) Также этим можно открывать DDS c прозрачностью как у PNG формата без альфа канала.

Звуки:

FSB — fsb_aud_extr, fmod_extractors, возможно, нужна библиотека fmod.dll или fmodL.dll http://aluigi.altervista.org/papers.htm#fsbext

Для обратной запаковки можно воспользоваться fmod sample bank generator ex 1.68 Он сжимает конечно в FSB4, но юнити их подхватывает либо через FMOD Studio.

Sprite: Формат содержащий координаты нарезки текстур, в основном из текстур атласов.

MonoBehaviour бинарники с текстом (.114 или отрицательное число) как изменить расположение текста, его настройки и другое.

Часть инфы по файлам с текстом на примере разбора игры StarCrawlers
https://opennota2.duckdns.org/book/76327
Поддержка распознания добавлена в версии 1.8.6 кнопкой MonoBehaviour и в консольном режиме -mb_new.
Прежние названия эти файлов были такие resources_00012.-377, теперь же они будут иметь своё имя и текстовый тип от включенного в них скрипта и названы например так 2_Opened_CheckForLoot.Text
Эта поддержка поможет частично разобраться в каких файлах, что лежит, где текст, а где код. И упростит адаптацию к последующим обновлениям игры, после которой нумерации файлов и отрицательные типы изменялись. Также в гуи режиме есть информация какие скрипты в настоящий момент отключены, какие имеют собственное имя, а не от вышестоящего объекта, и содержит название библиотеки из которой вызывается скрипт с данными от этого бинарного файла. Благодаря этому разбору появилась возможность поддержки атласов UIAtlas от UnityEngineUI, разделение их на спрайты. Подойдёт как для разделывания атласов со шрифтами, так и для простых картинок с текстом и без.

Шрифты
В: Не могли бы вы подсказать, где и какой файл мне необходимо найти?
О: Проще распознать MonoBehaviour и в них, которые были с минусом переименуются, шрифты должны быть с типом FontUI, через поиск по Font должно что-то найтись. Только потом придётся, если нужно будет при запаковке снова делать распознание, а файлы с минусом быстрее пойдут в запаковке.
Либо другой вариант искать по тексту файлы в которых находится имя текстуры или часть её, сами текстуры тоже перед всем этим нужно найти просматривая текстуры, ну а найденные бинарники это и будут координаты шрифтов. Также рядом файлы по типу, тоже будут координатами других шрифтов.

Информация для помощи создания SDF (distance field) размытия текстуры шрифтов.
Плагин https://catlikecoding.com/unity/documentation/CCDistanceMapGenerator/
Файлом https://yadi.sk/d/S9x2LqCe3HHYjQ
Чтобы работал, нужно добавить в юнити это https://yadi.sk/d/ZNB04inH3HHYrj
Это всё старое и проверял только на 4 unity.

Ну и мало ли может пригодится. Вот софт https://yadi.sk/d/4RBYnlXB3N6cNA
Но через софт как-то по левому делается, даже точно уже не помню как, в основном через юнити и делал. В софте увеличивать текстуру нужно в 8 раз вроде, потом через софт прогонять вместе с координатами, которые должны уменьшиться.

Скрытый текст

Конвертер для шрифтов fntxml_to_unityfnt
https://yadi.sk/d/vgCbTcqs482k8w
Поддержка: (старые форматов от U4, font_raw, новые форматы TextMeshProFont, TMP_FontAsset и похожие с SDF)
Иногда необходимо указать не использовать page или chnl в зависимости от формата, в основном сейчас всё идёт только без chnl.
В очень редких случаях (возможно для TextMeshProFont), если автоматический поиск смещения не сработает то нужно указать смещение вручную на количество символов после ключа -hand)
Остальные переключатели остались от старых версий программы и сейчас уже можно сказать ненужны для использования, и проще использовать автоматический поиск смещения.
Для старых форматов U4 с целыми типами данных используется ключ -cordint
Поддержка формата font_raw включается автоматом при этом типе файла, либо принудительно через -font_raw
Правильные настройки можно узнать по извлечению export_UnityToFNT (-unitytofnt) или info_UnityData (-info) по полученным значениям координат.
Возможно подгонять координаты через ключ -plus c указанными значениями.
Добавление списка кернинга отключается через ключ -k
-svad [value] можно указать с какого символа начинаются координаты, по умолчанию тут находится пробел значение байта 32, это значение используется в автоматическом режиме поиска.
-sbtn1 [value] значение сколько пропустить байт после первого названия с учётом выравнивания к 4, для перехода на количество символов.
-sbtn2 [value] значение сколько пропустить байт после второго названия с учётом выравнивания к 4, для перехода на количество символов.
С остальными настройками можно ознакомится в программе.
С помощью консольного режима есть возможность использовать программу в качестве патчера в русификаторе, так как после каждого обновления игры часть байт меняется, старые файлы уже не подойдут к новой версии, и необходимо заново накатывать координаты.
Этот софт может оказаться сложным в использовании, так как чаще всего нужно использовать просмотр координат файла в hex и указывать смещения на количество символов. Если автоматический поиск подойдёт то при экспорте должны получаться нормального вида файлы fnt, тут хотя бы понимать нужно как они выглядят, ну в общем они ровные должны быть, как бы значения сильно не должны скакать. Подобранный батник уже с такими же параметрами, но для импорта используется для обратной вставки уже созданного шрифта в BMFont с ру буквами. Но чаще всего формат постоянно меняются в каждой игре почти свой, и без понимания какие настройки нужно применять при очень не стандартных видах вряд ли что-то получится. Также в юнити 2019 появились довольно сложные форматы даже для разбора (идут в виде отдельных таблиц с набором символов, а в координатах ссылки на них, похожего вида как в UE4) и тут они не поддерживаются.

Parser_ULS
Парсер для извлечения и запаковки текста для I2Languages с LanguageSource или LanguageSourceAsset в формате csv
https://yadi.sk/d/Lz3SBVVFU7OJdg
Небольшой минус нужно вручную указывать смещения на количество рядов (row) после ключа -o, а также прочие настройки из-за различий шапки этих форматов. В основном смещения достаточно (а -d всегда 2).
Замечено что для LanguageSourceAsset почти всегда используется смещение -o $0C, -d может варьироваться от 2 до 4.
unPacker_CSV
Пакер анпакер для извлечения и запаковки текста для csv дополнение к Parser_ULS
https://yadi.sk/d/LhC3A8SbBKlv8g

Parser_UnityMDcpp2txt
Парсер для извлечения и запаковки текста для global-metadata.dat
https://yadi.sk/d/RnWCiP4j1umm3g

EXTRACT_TextBIN
Извлечение текста из MonoBehaviour (гуишная)
https://yadi.sk/d/ezkoRlUvvZQGjw
Прога мощная, но описная нет, объяснять все специфические настройки мне влом, по умолчанию вроде как всё работает для юнити.
Скажу только есть сортировка распознанных monobehaviour текста от мусора.
Нет никакой голимотни с буквами. И формат извлечения и вставки простой txt, как и в запаковщике ParserTextBinUnity.
Ну и пакер анпакер SpliteCombiner для текстовиков где-то тут был, чтобы их все в один файл -p собирать -u разбирать.

ParserTextBinUnity
Запаковка текста MonoBehaviour и поддержка старых файлов локализаций (консольная)
https://yadi.sk/d/7Aw2_d9wdhUsyg
Прога мощная, но описная нет, объяснять все специфические настройки мне влом, есть уже созданные батники.
Писались для себя. На сколько они удобнее для пользователей я не знаю.

Также имеется куча других прог для обработки текстов и других движков почти всех.

Если кто желает отблагодарить автора, то вот номера кошельков:

Скрытый текст

https://funding.webmoney.ru/d/rusifikatory-dragonzh

WMR - R345178676524

WMZ - Z902634901912

WME - E675124820338

Скрытый текст

https://qiwi.me/370491b2-d68d-4742-b197-8e28fa85301e

Скрытый текст

410012996939768
https://money.yandex.ru/to/410012996939768

В комментариях, пожалуйста, укажите “За UnityEX” или на почту dragonzh@yandex.ru.

Edited February 14 by DragonZH
Добавлен список изменений и новая информация.

1okospirit · January 25

нужно вручную указывать смещения на количество рядов (row) Замечено что для LanguageSourceAsset почти всегда используется смещение -o $0C
что за смещения, какие еще есть помимо $0C, как их считать?

DragonZH · January 26

2 часа назад, 1okospirit сказал:

нужно вручную указывать смещения на количество рядов (row) Замечено что для LanguageSourceAsset почти всегда используется смещение -o $0C
что за смещения, какие еще есть помимо $0C, как их считать?

Этот файл https://dropmefiles.com/4Ui5Q
Настройки эти же самые.
-o $0C -d 4
Добавил ещё ключ -view_log вывода лога, показывает что ошибка после идишника UI/SplashMessageTitle, перестают ряды читаться, там идёт выравнивание не как везде, и тут непонятно что делать.
У юнити нет стандарта типа файлов они постоянно меняются и для каждой игры такие файлы можно сказать заново нужно разбирать. Тут лишь только настройками можно что-то выкрутить и то не всегда. Может вообще этот файл повреждённый? Если количество рядов поставить в смещении 0x0С значение 1c 36 00 00 до вроде как прокатит. Косяк у файла на предпоследнем ряде идёт.

Gregor_Lesnov · January 26

Convert unity font: C:\....\fntxml_to_unityfnt\files_unity\FP Small Font Light.font_raw to files_fnt\FP Small Font Light.fnt
ReadAdd Page:true
ReadAdd Chnl:true
Read kerling:false
Add kerling:false
Search offset algoritm Auto to 00000020!
Error read structure: Format not supported or not correct imput version!!!

На “-sbtn2 0 “ это выдаёт. На -svad 0 тоже.

В hex редакторе в начале и конце только вот такие значения. Что из этого смещение по битам и как их рассчитать?

8 часов назад, DragonZH сказал:

Чаще всего в проге этой нужно вручную смещение указывать после шапки, но есть ещё несколько вариантов пропуска её, в описании написано, ключами -svad и -sbtn2

Скрытый текст

DragonZH · January 26

5 минут назад, Gregor_Lesnov сказал:

Скрины (Показать содержимое)

Это не файл с координатами, это шапка от пустого контейнера где должен хранится вектор.

Gregor_Lesnov · January 26

16 минут назад, DragonZH сказал:

Это не файл с координатами, это шапка от пустого контейнера где должен хранится вектор.

В текстурах есть dds шрифта, среди векторов его нет, при использовании кириллицы символы не отображаются.

И есть font_raw с таким содержимым. Вообще возможно как-то пропихнуть русские символы, чтоб не перерисовывать латиницу?

Скрытый текст

4194437DA422E6394184017481FEBD1E9AA20A66

DragonZH · January 26

12 минут назад, Gregor_Lesnov сказал:

В текстурах есть dds шрифта, среди векторов его нет, при использовании кириллицы символы не отображаются.

И есть font_raw с таким содержимым. Вообще возможно как-то пропихнуть русские символы, чтоб не перерисовывать латиницу?

Нужно координаты искать, почитай шапку как в MonoBehaviour их искать.

В инфе по шрифтам.

Edited January 26 by DragonZH

Gregor_Lesnov · January 26

2 минуты назад, DragonZH сказал:

Нужно координаты искать, почитай шапку как в MonoBehaviour их искать.

Чет в шапке не понятно, это через UnityEx или через другую прогу делать?

И, можно через BitMap Font Generator как-нибудь символы добавить?

12 минут назад, DragonZH сказал:

В инфе по шрифтам.

Скачал батники.

Export_MonoBehavior.bat выдает кучу файлов с отрицательными разсширениями (-1, -2 и тд)

Сделал в батнике “for /l %%i in (0,1,30) do if exist level%%i UnityEX.exe export "level%%i" -t 114 -f” но чет все равно кучу файлов выдает и ничего с .fnt

DragonZH · January 26

18 минут назад, Gregor_Lesnov сказал:

Чет в шапке не понятно, это через UnityEx или через другую прогу делать?

И, можно через BitMap Font Generator как-нибудь символы добавить?

Скачал батники.

Export_MonoBehavior.bat выдает кучу файлов с отрицательными разсширениями (-1, -2 и тд)

Сделал в батнике “for /l %%i in (0,1,30) do if exist level%%i UnityEX.exe export "level%%i" -t 114 -f” но чет все равно кучу файлов выдает и ничего с .fnt

-mb_new ключ
этот попробуй Export_MonoBehaviorNew.bat

Gregor_Lesnov · January 26

4 минуты назад, DragonZH сказал:

-mb_new ключ
этот попробуй Export_MonoBehaviorNew.bat

Пробовал.

Вылазит ошибка Operation Aborted.

Если пропускать, также появляются папки с кучей файлов.

А ещё таблицы, но в ListMBInfoFull.csv просто список файлов, а ListMBInfoType.csv пустой

DragonZH · January 26

Нужно смотреть так ничего не скажу. И точно ли распаковка шла из папки с игрой, а не где-то из одного архива. Попробуй по имени текстуры, названию шрифта поискать по тексту, может есть такие строки.

Gregor_Lesnov · January 26

3 минуты назад, DragonZH сказал:

Нужно смотреть так ничего не скажу. И точно ли распаковка шла из папки с игрой, а не где-то из одного архива. Попробуй по имени текстуры, названию шрифта поискать по тексту, может есть такие строки.

В тексте ничего нет. Как минимум который вытащился UnityText.

Сам dds шрифта и font_raw в shaderassets0 лежат.

Я пытаюсь подружить с кириллицей демоверсию вот этой игры, может при релизе что-то изменится, но это маловероятно

https://store.steampowered.com/app/595500/Freedom_Planet_2/

DragonZH · January 26

24 минуты назад, Gregor_Lesnov сказал:

В тексте ничего нет. Как минимум который вытащился UnityText.

Сам dds шрифта и font_raw в shaderassets0 лежат.

Я пытаюсь подружить с кириллицей демоверсию вот этой игры, может при релизе что-то изменится, но это маловероятно

https://store.steampowered.com/app/595500/Freedom_Planet_2/

Ну да точно в font_raw координаты, только такой формат не поддерживается. Там 88байт на символ и получается 22 значения, но 12 из них просто нули.

Gregor_Lesnov · January 26

Только что, DragonZH сказал:

Ну да точно в font_raw координаты, только такой формат не поддерживается. Там 88байт на символ и получается 22 значения, но 12 из них просто нули.

И, добавить вообще ничего нельзя, только перерисовывать?

DragonZH · January 26

Что-то странный формат, видимо разрабы его сами придумали. Я там ничего не понял как x y вычисляются.

Попробую добавить ключ на эти нули, чтобы их пропускать, может что и получится, отличие вроде как только в этом.

Gregor_Lesnov · January 26

18 минут назад, DragonZH сказал:

Что-то странный формат, видимо разрабы его сами придумали. Я там ничего не понял как x y вычисляются.

Попробую добавить ключ на эти нули, чтобы их пропускать, может что и получится, отличие вроде как только в этом.

У меня после первой части эти чудо программисты уже в горле сидят. Хотя там был не юнити, но тоже в спрайте вырезали всё, кроме латиницы и некоторых умляутов, и даже когда сами добавили переводы на основные языки, места под кириллицу не добавили, по западло символов для языков вставили и всё.