Как составить словарь столбцов для анализа таблицы с ИИ
Столбец Revenue может означать сумму с налогом или без него, а Date - дату заказа, оплаты или доставки. Словарь данных фиксирует эти различия и делает запрос к ИИ проверяемым.
Что учесть до начала работы
Название столбца не всегда раскрывает единицу, период, допустимые значения и правило расчета.
ИИ не должен придумывать определения, которых нет у владельца данных.
Что подготовить
Что делать
Соберите технические имена
Выпишите точные заголовки, лист, диапазон и пример безопасного значения. Не переименовывайте поля только для красоты: связь с исходной выгрузкой должна сохраниться.
Результат: Каждый элемент словаря однозначно связан с колонкой файла.Опишите бизнес-смысл
Для каждого поля напишите, что оно измеряет, к какому объекту относится и на каком этапе процесса появляется. Расшифруйте внутренние сокращения и коды.
Результат: Читатель понимает значение поля без доступа к исходной системе.Зафиксируйте формат и единицу
Укажите тип данных, формат даты, валюту, часовой пояс, масштаб суммы, правило округления и разделитель дробной части. Для процентов уточните, хранится 15 или 0,15.
Результат: ИИ не смешивает текст, числа, даты, проценты и денежные единицы.Опишите качество и пропуски
Запишите допустимые значения, уникальность, обязательность, значение пустой ячейки и известные исключения. Отдельно отметьте служебные коды вроде 0, -1 или N/A.
Результат: Пропуск и специальный код не принимаются за обычное наблюдение.Раскройте расчетные поля
Для производного показателя добавьте формулу словами, исходные поля, период агрегации и условия исключения строк. Если правило неизвестно, так и напишите.
Результат: Расчет можно воспроизвести или пометить как непроверяемый.Согласуйте версию
Перед анализом передайте словарь владельцу данных и исправьте спорные определения. Укажите дату и версию выгрузки, для которой действует описание.
Результат: У таблицы есть согласованный словарь с датой проверки.Промпт для черновика словаря столбцов
Помоги оформить словарь столбцов для таблицы. Не придумывай бизнес-смысл и правила. Если сведений недостаточно, напиши ТРЕБУЕТ УТОЧНЕНИЯ. Цель анализа: [цель] Заголовки и безопасные примеры: [список] Известные определения: [описание] Верни таблицу: точное имя столбца, бизнес-смысл, тип и формат, единица, допустимые значения, значение пропуска, правило расчета, контрольный вопрос владельцу данных. В конце перечисли противоречия и поля, которые нельзя использовать до уточнения.
Проверка словаря данных
Что чаще всего портит результат
Смысл угадан по заголовку
Получите определение у владельца данных и до этого пометьте поле как неуточненное.
Процент описан без масштаба
Зафиксируйте, как хранится значение и какое форматирование применяется в ячейке.
Пустая ячейка считается нулем
Отдельно определите пропуск, нулевое значение и отсутствие события.
Короткие ответы
Нужно ли описывать очевидные поля?
Да, если от них зависит фильтр или расчет. Даже дата и сумма требуют уточнения события, периода, валюты и состава.
Можно ли сделать словарь после анализа?
Можно, но выводы придется проверить заново. Надежнее зафиксировать определения до расчета метрик.
Словарь столбцов для однозначного анализа данных
Название revenue или status редко достаточно для корректного анализа. Словарь хранит смысл, тип, единицу, допустимые значения, источник, период, правило пропусков и связь с другими полями. Отдельно отмечаются вычисляемые показатели и идентификаторы, которые нельзя суммировать.
До начала заведите контрольную таблицу: идентификатор материала, версия входа, владелец, обязательный результат, доказательство, статус и дата. Для каждой ручной правки записывайте причину, а промежуточные файлы называйте так, чтобы нельзя было перепутать черновик и принятую версию. Правило остановки тоже задается заранее: критичная ошибка в факте, правах, данных, формате или воспроизводимости возвращает работу на соответствующий этап. После приемки попросите коллегу повторить одну ключевую проверку только по переданному комплекту. Если ему нужна история личного чата или устное пояснение автора, передача еще не завершена. Такой журнал нужен не ради формальности: он показывает реальную стоимость исправлений, не дает потерять ограничение при следующем обновлении и помогает расследовать расхождение без повторения всей работы.
Ошибка, из-за которой результат выглядит надежнее, чем есть
Аналитик предполагает, что дата означает создание заказа, хотя это дата выгрузки, или суммирует уже накопительный показатель. Результат математически аккуратен, но неверен. Уточняйте гранулярность и происхождение.
Критерии, которые нужно записать до начала
Контрольный сценарий от входа до приемки
Поставить ограничение до запуска
Опишите запреты, допустимые данные и правило остановки, затем соберите актуальную выгрузку, схему источника, примеры строк, владельцев полей, бизнес-определения, единицы, часовой пояс, справочники статусов, правила пропусков, формулы показателей и историю изменений. Согласуйте, кто может видеть материал и кто подтверждает финальный результат. Не начинайте обработку, пока неизвестно, как будет удалена или сохранена рабочая копия.
Получить проверяемый черновик
Выполните инвентаризацию колонок, профилирование значений, сверку определений, фиксацию типов и единиц, описание ключей, разбор кодов и пропусков, проверку формул на примерах и подготовку безопасного фрагмента для ИИ так, чтобы каждый важный вывод можно было связать с входом. Просите обозначать неопределенность и пропуски. Сохраните черновик до редакторских исправлений для последующего разбора ошибок.
Провести контроль с правилом отказа
Проверьте соответствие названия смыслу, тип данных, диапазон, уникальность, единицы, даты и зоны, категориальные значения, происхождение, формулу, гранулярность строки, персональные данные и случаи, когда поле нельзя использовать. Если найдено критическое расхождение, остановите публикацию и вернитесь к соответствующей контрольной точке, а не исправляйте только заметный симптом.
Зафиксировать границы результата
Сформируйте версионный словарь, профиль выгрузки, справочники кодов, список проблем качества, безопасный набор, формулы, владельцев и дату актуальности, отдельно указав подтвержденные части, исключения и дату проверки. Получатель должен видеть не только итог, но и пределы его безопасного применения.
Граница применимости
Словарь отражает конкретную версию источника и устаревает после изменения схемы. Профилирование не объясняет бизнес-смысл без владельца данных. Чувствительные значения нельзя включать в пример без обезличивания.
Что передать следующему участнику
Аналитик и ИИ получают словарь, безопасный пример, версии формул и список известных дефектов. Любое новое поле сначала проходит описание у владельца, а затем допускается в анализ.
Коротко
Словарь столбцов связывает техническую таблицу с бизнес-правилами. Он уменьшает число догадок ИИ и дает проверяемую основу для формул, фильтров и выводов.