От UFO
К All
Дата 30.04.2016 14:01:06
Рубрики WWII; Армия; Память;

Вопрос по ЖБД

Приветствую Вас!

А не подскажет ли кто-нибудь из глубокоуважаемых джиннов..
Кто-нибудь хоть как-то систематизировал список соединений
по которым выложены ЖБД и другие документы на Подвиге Народа?
И если есть хоть что-то, то где можно взглянуть.



С уважением, UFO. ЖЖ: http://photonoid.livejournal.com/
От apple16
К UFO (30.04.2016 14:01:06)
Дата 30.04.2016 18:12:18

Есть список и есть поиск

https://vif2ne.org/nvk/forum/files/Apple16/(160430175317)_jbdresult3.zip
Это текст в UTF-8 - Excel мне лень делать

На 15 апреля было всего 28221 журналов (и на сегодня тоже - это стабильный кусок)

Есть движок поиска
https://vnr.github.io/pamyat-naroda-search/

Другие документы - на сейчас я веду учет только еще двум дополнительным типам:

1. Дела просто дела - 3.387.747 записей на сейчас
2. Карты - 14750 записей (но часть карт это листы из дел на самом деле, а не самостоятельные дела с картой/ми)
https://vif2ne.org/nvk/forum/files/Apple16/(160430180004)_mapresult8.zip

Индексация была 4 апреля 2016 года
К сожалению не все всегда качается
Иногда качается то, что не поиндексировано и наоборот

Список дел он в тексте занимает гигабайт и в копилку не влезет - пользуйтесь поиском
От UFO
К apple16 (30.04.2016 18:12:18)
Дата 30.04.2016 21:57:58

Спасибо

Приветствую Вас!

Большое спасибо. Будем посмотреть.


С уважением, UFO. ЖЖ: http://photonoid.livejournal.com/
От apple16
К UFO (30.04.2016 21:57:58)
Дата 02.05.2016 06:21:27

Если есть какие толковые идеи, то сообшайте


На сейчас у нас есть куча отсканированных дел
Они произвольным образом попилены на документы и, что радует, связь с исходным делом сохранилась. Обложек жалко конечно, но такое.

Документов у нас два типа - просто документы (включая ЖБД) и карты

Я бы еще завел отдельных тип "картинки" и туда бы регистрировал весь арт и все схемы, что периодически встречаются внутри дел. Просто для поиска иллюстраций.
Самостоятельной ценности вне контекста документа картинки не имеют.

В документах есть краткое название, автор и часто название формирования. Есть приблизительное название операции - дополнительной информации не несет.
В картах есть какая-никакая привязка. Если карта с обстановкой, то название и формирование тоже.

Оба типа документов содержат диапазон дат создания и обычно диапазон дат для освещаемой информации.

______________________

Про карты я знаю все - их нужно все выкачивать, определять для каждой масштаб и номенклатуру листов склейки. Отдельно строить базу населенных пунктов с координатами.

Это даст возможность решать задачи типа "Что у нас есть по деревне Крюково"?
Это по собственно карте. Обстановка на карте, если есть, может еще по дате фильтроваться. Но очень много уныло неинформативно нарисованных обстановок.
Проще по текстовым документам нарисовать новые.

Работы много, но в идеале будет еще одна кнопка в сервисе поиска - А найди мне карту.

____________________

По документам труба - по уму нужен полнотекстовый поиск. Но на уровне полков куча документов это карандашем по бумажке. Нужно руками вычитывать. Файнридер не пройдет.
У Элара, как я понимаю, была структура надомников, которая Мемориал вычитывала.
Ну и на Память тоже работала. Но у них условно говоря перепутать
15 и 19 сд вполне получалось, потому что знаний - базы всех дивизий и где они и когда были нет. Отсюда полный провал их сервиса карт - мотает дивизии как это самое по Енисею.

________________________

Тут мы видим уже локальную задачу - справочник всех формирований ВОВ с привязкой к делам. Кто где когда был и кому подчинялся.
Базу понятно с поиском/просмотром через сайт, не книжку.

В одно лицо можно полки-дивизии из списка названий дел поднять. Что сидит внутри дел так не осилить. Нужен какой-то проект разделения ресурсов

В идеале конечно отработать инструменты и модель на паре тройке человек, а потом выйти под 9 мая с "национальным проектом" и припахать студентов и школяров. Сейчас есть нужда в подобных штуках.
Чтение живых документов оно полезно.

__________________
Еще люди есть, там конечно Мемориал это большой кусок работы. Но поднять список всех, кто хоть где-то по делу проходил (фонд 33, 58, Память) и привязать их к базе формирований тоже можно. Опять таки рабсила нужна. Технологии все есть.
От UFO
К apple16 (02.05.2016 06:21:27)
Дата 05.05.2016 01:09:17

Надо смотреть ещё многих вещей не понимаю...

Приветствую Вас!

Непрерывных документов по дивизиям, которые пробиваю нет. В том числе и по тем, которые в окружениях не пропадали и не переформировались. Какие-то с первого дня есть, дальше с перерывами, а какие-то, например в 43-м "возникают", хотя бумажные сканы их ЖБД есть, то есть в природе они существуют.

Отсутствует доступ к ряду ключевых карт - в поиске находятся, но не открываются.

Очень мало карт, схем и фотоматериалов вообще, а присутствуют какие-то случайные.

В общем, массив информации ещё хилый и непонятно, чего ждать в дальнейшем.


С уважением, UFO. ЖЖ: http://photonoid.livejournal.com/