类似用户画像预测的特征工程技巧总结

一情景
给定一批原始训练数据，这些数据有各个用户(user_id)多条历史记录。根据这些原始训练数据预测当中的部分或全部的用户(user_id)的可能行为。例如识别羊毛党项目：http://www.dcjingsai.com/common/cmpt/2018年甜橙金融杯大数据建模大赛_赛体与数据.html

二类似问题的特征工程技巧总结
单特征处理(统计单特征)
1 对于离散特征单特征处理时，引出”广义特征”概念
例如：交易类型这个离散特征，交易类型有"01",“02”,“03"三种，某一UID在历史数据集中"01"有16次，“02"有0次，“03"有45次，那么这个UID的"广义交易类型"就为"160045”(可对交易次数分段再编码以减少类型)。
还有count,nunque,max_val(比如出现次数最多的值),min_val
2 对于连续值特征单特征处理时，某个UID的对应特征可通过统计这个UID这个特征历史数据的sum,mean,max,min,media,nunique,count等来代表这个单特征。
组合特征处理
一般情况是UID与某一离散特征以及另外一个连续特征的组合。
例如：card_id、city_id与purchase_amount的组合，其中card_id是被描述对象。组合不同卡在不同城市的购买情况特征。
t = df.groupby([“card_id”, “city_id”])[“purchase_amount”].mean()
u=pd.DataFrame(t).reset_index().groupby(“card_id”)[“purchase_amount”].agg([“mean”, “min”, “max”])
u.columns = [“city_id”+“purchase_amount”+”_”+ col for col in u.columns.values]
u = u.reset_index()
其他特征处理，比如时间特征等根据实际数据。

类似用户画像预测的特征工程技巧总结相关推荐

【算法竞赛学习】二手车交易价格预测-Task3特征工程
二手车交易价格预测-Task3 特征工程三. 特征工程目标 Tip:此部分为零基础入门数据挖掘的 Task3 特征工程部分,带你来了解各种特征工程以及分析方法,欢迎大家后续多多交流. 赛题:零基础入 ...
二手车价格预测task03:特征工程
二手车价格预测task03:特征工程 1.学习了operator模块operator.itemgetter()函数 2.学习了箱线图 3.了解了特征工程的方法 (内容介绍) 4.敲代码学习,加注解以 ...
推荐算法 | 预测算法 | 特征工程
推荐算法有哪些? - 知乎一. 推荐算法非个性化推荐 "如果你不知道该推荐什么,那么推荐大家都喜欢的准没错". 基于热门榜单或者最多使用等方式进行的推荐颗粒度较为粗,执行 ...
【直播】王茂霖：二手车交易价格预测-千变万化特征工程（河北高校数据挖掘邀请赛）
二手车交易价格预测-千变万化特征工程目前河北高校数据挖掘邀请赛正在如火如荼的进行中.为了大家更好的参赛,王茂霖分享了从0梳理1场数据挖掘赛事!,完整梳理了从环境准备.数据读取.数据分析.特征工 ...
天猫用户重复购买预测之特征工程
特征工程处理数据 # 全量信息处理,合并数据 all_data = train_data.append(test_data) all_data = all_data.merge(user_info, ...
【推荐系统】特征工程技巧（kaggle比赛技巧、tx的做法）
内容总结前面6点均是常见的特征工程基础知识,第7点时kaggle比赛中常用特征交叉.特征筛选等技巧,第8点从特征提取(数值型.类别型.embedding特征).特征选择(过滤式.封装式.嵌入式).特 ...
【数据挖掘】心跳信号分类预测之特征工程 —— 学习笔记（三）
目录三.特征工程 3.1 特征工程概述 3.2 学习目标 3.3 内容介绍 3.4 代码与理论学习 3.4.1 安装.导入依赖并读取数据 3.4.2 数据预处理 3.4.3 使用 tsfresh 进 ...
二手车交易价格预测：特征工程
前言文章数据基于天池零基础入门数据挖掘 - 二手车交易价格预测的比赛:https://tianchi.aliyun.com/competition/entrance/231784/informati ...
二手车交易价格预测——Task3特征工程
二手车交易价格预测--特征工程一.目标二.异常值处理 (一)删除异常值三.特征构造 (一)构造时间特征 (二)构造地区特征四.数据清洗 (一)数据分桶 (二)删除冗余数据 (三)处理数据集中的 ...

类似用户画像预测的特征工程技巧总结

类似用户画像预测的特征工程技巧总结相关推荐

最新文章

热门文章