Забавная задачка

[RVS]

Дано :

- есть кастомный функционал, который не описан (совсем), но как-то (достаточно криво и не слишком надежно) работает
- есть табличка в нем, которая, понятно, тоже не описана.. и в которой пара миллионов записей

Требуется получить : описание использования (наполнения) таблицы. То есть :

- какие поля используются, какие - нет. По наполнению, перекрестные ссылки - не предлагать )
- что в какие поля пишется. То есть - если это Enum - получить по одной записи для каждого значения этого Enum-а, упоминаемого в наполнении таблицы. Если это поле Id клиента - достаточно одной записи, где оно заполнено, все - не надо )

Вот как-то так.

Вопросы :

- оно вообще, кроме как "глазами и руками" + Ёксель - решаемо?
- если решаемо, то как, хотя бы примерно (я без идей пока)

Если нужны подробности - добавлю.

[gl00mie]

А почему "перекрестные ссылки не предлагать"? Если уж заниматься реверс-инжинирингом, то перекрестные ссылки тут - первейший инструмент Они не помогут разве что в случае, когда "кастомный функционал" работает с использованием механизмов отражения и/или написан вне приложения, скажем, в сторонней системе, работающей через Business Connector. Это - ваш случай?..

[RVS]

Цитата:

Сообщение от gl00mie

А почему "перекрестные ссылки не предлагать"?

Они не дадут наполнения. Требуется именно описание типа "что может быть записано в это поле" пока что. И все комбинации заполнения, имеющиеся в жизни (из тех, что сейчас есть в таблице)

Цитата:

Сообщение от gl00mie

Они не помогут разве что в случае, когда "кастомный функционал" работает с использованием механизмов отражения и/или написан вне приложения, скажем, в сторонней системе, работающей через Business Connector. Это - ваш случай?..

Нет, по счастью. Но - есть порядка 40 классов, использующих эту табличку. Есть десяток классов, которые туда пишут. Разматывать все это по коду - слуга покорный )

Единственное, что пока на голову приходит - выгрузить всю эту беду в Ёксель, и там уже шаманить с фильтрами etc..

===

PS : Это там интеграция с типа "интернет-магазином" так классно сделана..

[Ivanhoe]

Цитата:

Сообщение от RVS

Они не дадут наполнения. Требуется именно описание типа "что может быть записано в это поле" пока что. И все комбинации заполнения, имеющиеся в жизни (из тех, что сейчас есть в таблице)

Excel, сводная таблица. По скорости надо проверить, что быстрее - выгрузить в ексель и там строить сводную или напрямую к SQL подключиться.

[Logger]

Цитата:

Сообщение от RVS

Нет, по счастью. Но - есть порядка 40 классов, использующих эту табличку. Есть десяток классов, которые туда пишут. Разматывать все это по коду - слуга покорный )

Ну а как вы хотели ?
Чтобы ничего не делать и все было готово ?

Так не бывает.
Алгоритм заполнения все равно придется разбирать и понимать. Вам все равно по результатам предоставления этой таблички начнут задавать каверзные вопросы.

[sukhanchik]

Цитата:

Сообщение от RVS

Они не дадут наполнения. Требуется именно описание типа "что может быть записано в это поле" пока что. И все комбинации заполнения, имеющиеся в жизни (из тех, что сейчас есть в таблице)

А почему это перекрестные ссылки такую информацию не дадут? Фильтруемся по Write и получаем список мест (те 10 классов, которые туда пишут).

Ну да, получается разматывание по коду. Зато есть некоторая гарантия полноты. Все равно эмпирически придется догадываться. Так что, если какие-то "ветки" кода удастся легко размотать - это будет 100%-е обоснование - что туда пишется.

[mnt_dx]

Цитата:

Сообщение от Ivanhoe

Excel, сводная таблица. По скорости надо проверить, что быстрее - выгрузить в ексель и там строить сводную или напрямую к SQL подключиться.

А как обойти ограничение в миллион строк в экселе?

[Ace of Database]

На языке SQL для каждого поля таблицы пишете свой отдельный запрос:
select count(*), Field1 from MyTable group by Field1
select count(*), Field2 from MyTable group by Field2
select count(*), Field3 from MyTable group by Field3
и так далее.
С помощью этих запросов узнаете, какие значения записываются в каждое поле, и как часто встречаются те или иные значения.

Если считать частоту использования конкретных значений не надо, а просто получить уникальные значения для каждого поля, то такой запрос:
select distinct Field1 from MyTable

[Ivanhoe]

Предварительной группировкой или двумя - тремя листами

[RVS]

Цитата:

Сообщение от sukhanchik

А почему это перекрестные ссылки такую информацию не дадут? Фильтруемся по Write и получаем список мест (те 10 классов, которые туда пишут).

Я и так эти классы уже знаю. Прикол в том, что не все они (и уж точно - не все "ветки" в них.. я пока понятен? ))) реально используются. Это я - тоже знаю..

Цитата:

Сообщение от Logger

Ну а как вы хотели ?
Чтобы ничего не делать и все было готово ?

Я, я.. натюрлих.. и можно - без хлеба )))) Позабавили, спасибо..

Цитата:

Сообщение от Logger

Алгоритм заполнения все равно придется разбирать и понимать. Вам все равно по результатам предоставления этой таблички начнут задавать каверзные вопросы.

Вот не поверите - этих-то вопросов я и хочу добиться.. осмысленных.. от клиента.. Чтобы не у меня, а у пользователя голова болела на тему - "а .. зачем вот здесь у нас взялась вот такая .. фигня".. Мечты, мечты..

Тему снимаю, проблему не решил, но .. обошел.

[fed]

В общем - по моему собственному опыту борьбы с недокументированным кодом: Это - не программистская задача. Попытка проанализировать код и понять чего он делает очень трудоемка даже для граммотно написаного кода, а уж для безграмотно - она заведомо тупиковая. Надо сначала долго трясти пользователей с вопросами о том что система делает и что она должна делать. После сличения показаний многих пользователей, можно лезть в код и разбираться (с отладчиком) как оно работает. Всякие перекрестные ссылки помогают, но основной инструмент - допрос пользователей и отладчик...

[BOAL]

Малопонятный недокументированный код нужно просто тереть, сделав бэкап кода и данных, и потом по конкретному ТЗ, проснувшегося индивида (или он уволен уже и не проснется) и его ору "а где такая кнопочка??!!" вытрясять ТЗ и сценарии использования.

Таким образом переходил как-то с АХ2.5 на АХ3.0 потеряв кучищу разных модов по пути, перенося сперва все нужно-понятное, а далее еще пяток по принципу 3-4 мес использования и запроса "а вот раньше тут было..".

Конечно, предварительно проверить по перекрестным ссылкам (и я туда же), где эти самые данные используются дальше (то есть, чем и почему они там пишутся не столь важно), куда дальше идут.
Явно же есть отчеты или обработки, где они на входе.
Если данные только пишутся... то однозначно тереть, как диверсию.
(проверив до кучи, не юзаются ли они внешним обменом или ОЛАПОМ....) - но метод их стирания (переимонования таблицы) однозначно это выявит за пару дней (месяцев )

[RVS]

Цитата:

Сообщение от fed

Надо сначала долго трясти пользователей с вопросами о том что система делает и что она должна делать

Вот именно этим сейчас и пытаемся заняться..

Цитата:

Сообщение от BOAL

Малопонятный недокументированный код нужно просто тереть, сделав бэкап кода и данных, и потом по конкретному ТЗ, проснувшегося индивида (или он уволен уже и не проснется) и его ору "а где такая кнопочка??!!" вытрясять ТЗ и сценарии использования.
...

Все очень верно, осложняется только одним : это интеграция с внешним приложением, тестовой версии такого приложения - не предусмотрено (и не спрашивайте меня - почему.. я вообще - аутсорсер )), а проделывать такие вещи на рабочей базе - приложении.. "да хто ж ему (мне в данном случае) даст"..

Вот и выкручиваемся, как только можно..

[George Nordic]

Цитата:

Сообщение от RVS

Я и так эти классы уже знаю. Прикол в том, что не все они (и уж точно - не все "ветки" в них.. я пока понятен? ))) реально используются. Это я - тоже знаю..

В молодости ставил брэйк (или инфолог) на инсерт. Перехватывал и смотрел.

С Уважением,
Георгий

[RVS]

Цитата:

Сообщение от George Nordic

В молодости ставил брэйк (или инфолог) на инсерт. Перехватывал и смотрел.

С Уважением,
Георгий

Проблема в том, что вариантов много, работает пакетник, которые что-то отрабатывает, что-то - нет (из того, что в коде.. неясно еще, что "извне" могут передать, из того, что в Аксе в коде прописано.. тоже - люди не в курсе ))

Неделя времени на детальное описание процесса ) Которого, как сейчас выясняется, не понимает никто. Все, кто это писал (IBS), и кто это принимал (на клиенте) - давно уже об этом забыли..

Смоделировать все руками - просто времени нет понять, что, вообще, там творится. Отсюда, собственно, и возник вопрос о наполнении буферной таблички, куда данные из внешней системы валятся..

Сабж был - "забавная задачка". Она реально забавная, правда )

[Logger]

Еще как вариант (если конечно производительность позволит) настроить логирование этой таблички в sysDatabaseLog
А в sysDatabaseLog добавить еще поле со стеком вызова и с числовым хешем от этого стека вызова.

Дать поработать, затем проанализировать историю изменений.

[raz]

Статус "Отменено" в строках заказа

[BOAL]

Вместо совета вешать инфо в инсерт посоветую вешать в инсерт свой разбор полетов - в табличку (потом ее читать, тк инфо в пакетнике будет тормозить и не видно, да и после ххх записей повиснет)
Писать в свой лог
дату, время, какие-то ТТХ записи (может дельту с ориг(), и стек вызова, откуда эта запись приехала.

Тогда через пару дней наблюдений отловятся конкретные сценарии использования: кто что пишет, когда, как часто.
И только по ним уже ручками (головой) получить ответ "зачем".

Ну и код этих внешних обработчиков поизучать или, куда они дальше это дают\берут.

====
О пока писал, не обновлял форум, а этот совет выше уже дали

[RVS]

Коллеги, повторяю - там есть срок. Неделя. Не-де-ля..

С логами - напомнило - "поздно пить боржоми"..

Мои извинения. Решу - отпишусь, если кому интересно )

[Logger]

Ну почему же поздно.
Если это инет магазин то даже однодневная статистика может дать неплохую выборку.