ДаліНаступний посібник
Інженерні конвеєри функцій і керування версіями даних
технічний
ПОСІБНИК З ОСНОВ
Feature engineering transforms raw measurements into inputs for a model.
Послухайте цей посібникШІ-розказаний · ~3 min
Encoding, aggregation, and interaction features can change what the model can represent, with their usefulness assessed for the intended prediction task.
Raw records can contain numbers, categories, timestamps, and repeated observations that require a representation suitable for a chosen model. Feature engineering creates or transforms those inputs. Extracting a day from a timestamp, encoding a category, and calculating an activity count over a defined earlier period are different examples. The choices should reflect the prediction task and the measurements available when a prediction will be made. A feature derived from an outcome observed only afterward can leak information into evaluation. Fitting a transformation on held-out data can also contaminate an assessment: a scaler should learn its mean and standard deviation on training data, then reuse them on validation or test inputs. Encoding choices address another issue. One-hot encoding represents categories with indicator columns; target encoding uses outcome information and requires additional care to avoid leaking targets. Numeric scaling can matter for objectives or distances sensitive to feature magnitude, but it is not a universal guarantee that no input dominates every model. StandardScaler uses estimated mean and variance, which are sensitive to outliers. An extreme observation can influence those estimates, motivating inspection or comparison with other transformations. Aggregated features also need an explicit window: a count of events before prediction time differs from a count that includes future events. Interaction features represent combinations of inputs. A degree-two polynomial expansion can include the product x1 times x2, so the stated values three and four yield an interaction value of twelve. This creates an input representation; whether it improves predictions remains a separate evaluation question.
Виявлення шахрайства: визначення частоти транзакцій, часу з останньої покупки та відстані від звичайного місця.
Прогнозування попиту: вилучення позначок днів тижня, свят і ковзних середніх значень із необроблених позначок часу продажів.
Кредитний скоринг: перетворення необробленої історії на такі співвідношення, як борг/дохід і кількість нещодавніх прострочених платежів.
Відтік клієнтів: об’єднання активності в такі функції, як логіни за місяць і дні з моменту останньої взаємодії.
Reusable transformations and pipeline tools can make feature definitions easier to inspect and apply consistently. Useful evaluations should record the time window, data split, fitted statistics, and representation used. Automated feature generation can supply candidates, but each candidate still needs an appropriate leakage check and performance assessment. Domain knowledge can suggest what to measure without proving that a proposed feature is predictive. Comparing transformations on the intended task is more informative than declaring manual or learned features universally superior across all tabular, image, or language problems.
Безплатний розсилок
Три перевірені історії про ШІ щоробочого ранку, написані простою мовою. Безплатно назавжди, без реклами.
Один лист щотижня з понеділка по п'ятницю. Відписатися в один клік. Ми ніколи не продаємо та не передаємо вашу адресу.
Перевір себе
Миттєва зворотна связь на кожну відповідь та сертифікат із перевіреним ідентифікатором, яким можна поділитися, після проходження курсу.
Підтримайте безплатну освіту у сфері ШІ. AI Understanding — це некомерційна організація 501(c)(3) — без реклами, без платних стін, назавжди. Зробіть пожертву
Feature engineering transforms raw measurements into inputs for a model. Encoding, aggregation, and interaction features can change what the model can represent, with their usefulness assessed for the intended prediction task.
Розробка функцій — це створення вхідних даних (функцій) із необроблених даних, щоб модель могла знайти корисні шаблони.
Engineering changes the available representation; a performance benefit needs evidence for the task.
The feature includes information unavailable when making the intended prediction, undermining a realistic evaluation.
Fitting preprocessing on training data avoids using held-out information to select the transformation.
Категориальні змінні зазвичай перетворюються на числа за допомогою одноразового або цільового кодування, щоб моделі могли їх використовувати.
Продовжуйте вчитися
Інші посібники, вибрані для цієї теми
ДаліНаступний посібник
Інженерні конвеєри функцій і керування версіями даних
технічний