Raxys Studios

За последний месяц было 2 технических обновления. Они были сильно связаны друг с другом и шли с интервалом в 2 недели, поэтому я решил, что рассказать о них будет уместнее по окончании всей работы. Теперь, когда оба эти обновления на сайте, можно начать. Как и было необходимо, большая часть работы была под капотом (я очень доволен результатом), но есть и немало видимых для конечного пользователя улучшений.

Новое хранилище языковых данных
Весь языковой материал был перемещён в отдельную ветку репозитория. Такое разделение данных и логики позволяет тому, кто желает добавить именно языковой материал, не взаимодействовать с кодом вообще, что облегчает процесс. Что самое важное, теперь любые правки по языкам, будь то тексты или озвучка, появляются на сайте в течении пары минут, так как больше нет необходимости перекомпилировать весь проект.

Исправлена работа кэша
Раньше, в особенности после значительных изменений файловой структуры, нужно было вручную чистить кэш (или переустанавливать сайт как приложение), чтобы получить обновление. Теперь, при открытии домашней страницы (карта), кэш автоматически сбрасывается, что заставляет сайт загружать последние данные. При этом, когда вы открываете какие-либо языки, вся их текстовая информация в открытом модуле - алфавит, конвертер, разговорник (который будет готов в ближайшем будущем) - будет доступна и без интернета до тех пор, пока не будет открыта карта вместе с наличием сети.

Векторные карты
Полностью обновил работу с картой, перейдя на новую библиотеку. Теперь она загружается быстрее, масштабируется плавно, а изображение выглядит намного чётче благодаря векторной графике.

Удобства для редакторов
Мне хотелось бы несколько сбавить техническую работу в последующие месяцы, и больше сосредоточиться на заполнении языков. Во-первых, это то, что видно, а во-вторых, сайт теперь стоит на крепком фундаменте. Поэтому я провёл большую работу по доработке редакторов, так что теперь их интерфейс более аккуратный и функциональный.
- Объединил навигацию всех редакторов в одну компактную панель с 4мя глобальными действиями: загрузить из репозитория, скопировать JSON, вставить JSON, сбросить.
- Добавил возможность клонировать и смещать элементы в местах работы с массивами (преобразования конвертера, секции разговорника, и т.д.)
- Добавил небольшое текстовое поле в редактор конвертера, где можно моментально тестировать переходы.
- Объединил requirements с conditions в редакторе блоков разговорника. Об этом подробнее в следующем посте.
- Добавил кнопку для копирования ID фразы в редакторе разговорника. Об этом тоже подробнее в следующем посте.

Разное
- Добавил отображение флагов выбранных языков на каждый модуль, потому что так красиво.
- Добавил кнопку "копировать" для примеров к фонемам (копирует слово и IPA через пробел).
- Теперь при глоссировании фраз, если у блока не занесены ни IPA, ни, собственно, глоссы, будет отображён стандартный текст.
- Подсказки для контекста во фразах больше не отображают названия сущностей. В этом не было нужды.
- Добавлена шкала проигрывания для аудиофайлов фонем и фраз.

А тем временем, проекту почти год. То, что начиналось как простая игрушка для моего языка, потихоньку перерастает во что-то стоящее. Через неделю-две у нас будет что показать насчёт разговорника. А пока, вот график из нашего репозитория за последний год. Чем выше зелёная область, тем больше работы было сделано за этот период.

Хотелось бы поделиться общими направлениями работы на ближайшее полугодие.

Самое главное сейчас - заполнение разговорника. Я вижу 4 этапа:
1. Составление списка статичных фраз - "спасибо тебе";
2. Выделение в каждой фразе переключаемых частей - "спасибо тебе / вам";
3. Добавление этой информации в систему через редактор корпуса;
4. Перевод этого корпуса через основной редактор на наши языки - осетинские, черкесские, лезгинские и т.д.

Параллельно нужно устранять накопившийся технический долг, в самом широком смысле. Это и рефакторинг кода, и исправление ошибок, и переход на новые инструменты. Для пользователя это будет незаметно, для дальнейших разработок - совершенно необходимо.

Особых сложностей с этими задачами не предвидится, нужно лишь плавно распределить работу, время у нас есть. А уже летом, Хуыцауы фандай, серьёзно возьмёмся за разработку словарей.

Ас саламу алейкум.
На сайте https://avzag.app/#/ можно понаблюдать за изменением грамматики предложения в керенском диалекте агульского языка в сравнении с другими языками Кавказа. Сайт находится на стадии разработки и на данный момент внесена информация лишь по одной фразе, но к началу марта инша Аллагь начнется внесение информации по 100 базовым фразам.

Потихоньку и другие языки начнут вливаться, если сайт окажется полезным для них.
Сагърай агъулар.

Да, это Черкесо-Осетино-Даргинский параллельный разговорник. Позволяет миновать английский или русский и играться с языками напрямую. Конечно, вряд ли кто-то будет одновременно просматривать вот такой набор языков, но как испытание для системы - картина впечатляющая. И хотя пока полностью переведена лишь одна фраза, можно уверенно говорить о корректной работе системы. И учитывая, что масштабирование здесь линейное, проблем не предвидится.

А ещё записал видео работы с редактором разговорника, где я добавляю дигорский перевод для этой фразы. Увы, там я неправильно перевёл дигорское местоимение (уже исправил на сайте), и произносил слова как попало, за что прошу осетин простить меня, но в качестве демонстрации процесса это сгодится.

Работа над функциональной частью редакторов разговорника завершена. Получились две страницы. Первая - редактор исходного корпуса. Здесь формируется структура разговорника и задаются контексты для исходных фраз. Вторая страница - редактор пользовательской части разговорника, переводчик. Здесь создаётся представление перевода фраз из исходного корпуса на все другие языки.

Теперь предстоит небыстрый процесс сборки вот этого исходного корпуса фраз, который затем должен быть переведён на наши языки. Очень хочется предоставить материал, который будет полезен обычным людям в реальных сценариях, и который будет извлекать максимальную пользу из технической базы интерактивности.

Пока непонятно, как именно собрать такой языковой материал. Будем думать.

В последней версии разговорника был значительный недостаток: если грамматика языка пользователя кодирует меньшее количество информации, чем другой синхронизируемый язык, то пользователь всё ещё должен был подсматривать в английскую карточку для понимая контекста.

Например, при переключении кайтагского глагола "иду" с мужского рода (вянда) на женский (рянда), кабардинский перевод должен оставаться неизменным (сокӏуэ). Это совершенно верно, но это не даст кабардинцу понять что именно изменилось во фразе до тех пор, пока он не посмотрим на английскую карточку с полным контекстом фразы (изобр. 1).

Чтобы создать по-настоящему прямой разговорник без посредников, к каждой фразе теперь можно добавлять перевод контекста (изобр. 2). По сути своей это маленький независимый словарь, позволяющий показывать перевод английского мета-контекста на локальном языке.

На этом месте возникает новая проблема: большая часть информации в локализованном контексте уже известна носителю из грамматики. Например, в кабардинском переводе видно, как слово "абы" (там) показано дважды (изобр. 3), что совсем не нужно и даже делает поиск новой информации менее удобным.

Для решения этой проблемы система теперь создаёт копию мета-контекста и проходит по каждому видимому блоку перевода, вычитая его условия из этой копии (изобр. 4). По итогу в копии остаётся лишь неявная информация, не переданная видимыми блоками. Перевод лишь этой остаточной информации отображается на экране.

Так что теперь кабардинец может видеть изменения грамматического класса в кайтагском без необходимости прибегать к английскому переводу (изобр. 5, 6). Как и все другие функции на сайте, это работает для любого сочетания языков.

Последние функции поверх готового ядра разговорника:
- отключение показа английского перевода;
- локализация отображаемого контекста;
- показ пояснительных заметок;
- параллельный просмотр морфемного глоссирования через IPA и Leipzig Glossing Rules.

Разумеется, дабы не перегружать тех, кому это не нужно, вся эта информация скрываема. На картинках показана одна и та же фраза, сначала с минимальным отображением информации, а затем - с максимальным.

Попытался объяснить как мог. Много говорю про внутреннюю структуру системы. Кому интересна именно демонстрация интерфейса, могут прыгать сразу на 14:16.

А ещё, оказывается, ветки в твиттере крайне удобны для публикации презентаций в форме 1 твит - 1 слайд. К сожалению, не подумал, как это перенести в формат здешних публикаций, поэтому на этот раз просто дам ссылку на текст.

Итого, система работает, всё получилось. На сайте уже есть 4 фразы, каждая доступна для связанного просмотра на кабардинском, акушинском, и кайтагском. Сейчас будет небольшой перерыв, затем работа над веб-редактором для разговорника. Это будет завершено в ноябре. И вот когда уже будет готов редактор, начнётся добавление самих фраз.

Хотелось бы, для начала, перевести фраз 20 на иронский, дигорский, и кабардинский. Наличие двух близких диалектов, и одного языка из другой семьи, будет хорошей проверкой для системы. К тому же, черкесы Кабарды и осетины - соседи, и им это может быть полезно.

Видео с демонстрацией программной части нового разговорника будет записано на следующей неделе.

На прошлой неделе на сайт был добавлен алфавит Керенского диалекта Агульского языка (баракала, Абдурахӏим). Примечательно то, что данные были добавлены человеком со стороны, к тому же не владеющим какими-либо специальными навыками разработчика.

Это стало возможным благодаря нашим новым веб-интерфейсам редактирования. Редакторы доступны и для раздела фонетики, и для конвертера. Желающие добавить свой язык, или внести правки в уже присутствующий в системе, могут пройти в соответствующий раздел и самостоятельно сформировать JSON-файл, который затем можно отправить нам для загрузки на основной сайт.