AI Engineering Tools

Анализ данных

Основные термины анализа данных и статистики

Понимание наборов данных, переменных, популяций, выборок, центра, разброса и взаимосвязей перед выбором аналитических методов.

12 терминов

Структура данных

Набор данных

Dataset

Значение

Структурированный набор связанных наблюдений, используемых для анализа.

Когда использовать

Определите область действия, период, источник и единицу измерения набора данных перед анализом.

Пример

Dataset: daily orders from 2025-01-01 through 2025-12-31.

Структура данных

Наблюдение

Observation

Значение

Один зарегистрированный случай, событие, человек, элемент или момент времени в наборе данных.

Когда использовать

Используйте это для уточнения того, что представляет собой одна строка.

Пример

Один объект представляет собой один завершенный заказ.

Структура данных

Переменная

Variable

Значение

Измеряемый атрибут, который может принимать разные значения в различных наблюдениях.

Когда использовать

Определите переменные, прежде чем выбирать сводки, диаграммы или модели.

Пример

Переменные: order_value, регион, канал и order_date.

Структура данных

Категориальная переменная

Categorical variable

Значение

Переменная, значения которой представляют группы или метки, а не измеренные величины.

Когда использовать

Используйте счетчики, пропорции, столбчатые диаграммы или закодированные категории для анализа.

Пример

channel = web, store, partner

Структура данных

Числовая переменная

Numerical variable

Значение

Переменная, представленная числами, для которых арифметические операции имеют смысл.

Когда использовать

Используйте распределение, центр, разброс, корреляцию или регрессионный анализ.

Пример

order_value = 49,900 KRW

Население и выборка

Население

Population

Значение

Полный набор единиц или событий, которые анализ призван описать.

Когда использовать

Укажите это явно, чтобы выводы не были обобщены за пределы предполагаемого объема.

Пример

Выборка: все клиенты, которые сделали заказ в Корее в 2025 году.

Население и выборка

Пример.

Sample

Значение

Подмножество популяции, выбранное для измерения или анализа.

Когда использовать

Используйте репрезентативную выборку при анализе всей популяции, когда это непрактично.

Внимание

Даже большой набор данных может быть предвзятым, если процесс отбора не является репрезентативным.

Пример

Случайным образом выберите 2000 заказов из общей выборки за год.

Центр

Mean

Mean

Значение

Сумма числовых значений, деленная на их количество.

Когда использовать

Используйте это в качестве центральной меры, когда экстремальные значения не доминируют в распределении.

Пример

mean_order_value = sum(order_value) / count(order_value)

Центр

Медиана

Median

Значение

Центральное значение после упорядочивания наблюдений.

Когда использовать

Используйте это для искаженных распределений или данных с влиятельными выбросами.

Пример

Сообщать о средней продолжительности доставки, когда несколько заказов имеют очень длительные задержки.

Распространение

Дисперсия

Variance

Значение

Среднее квадратичное расстояние значений от их среднего, при этом точный знаменатель зависит от контекста.

Когда использовать

Используйте это в статистическом моделировании и при разложении источников изменчивости.

Пример

sample_variance = sum((x - mean(x))^2) / (n - 1)

Распространение

Стандартное отклонение

Standard deviation

Значение

Квадратный корень из дисперсии, выраженный в той же единице, что и данные.

Когда использовать

Используйте это для передачи типичного отклонения вокруг среднего значения.

Пример

Average wait = 8 minutes; standard deviation = 2.1 minutes.

Связи

Корреляция

Correlation

Значение

Мера направления и силы ассоциации между переменными.

Когда использовать

Используйте это для предварительного анализа взаимосвязей перед более глубоким причинно-следственным или прогнозным анализом.

Внимание

Корреляция сама по себе не устанавливает причинно-следственную связь.

Пример

corr(ad_spend, sales) = 0.72