datawhalechina / team-learning-data-mining

主要存储Datawhale组队学习中“数据挖掘/机器学习”方向的资料。

简介

本项目主要存储Datawhale组队学习中“数据挖掘/机器学习”方向的资料。

主要包括：

• 概率统计
• 线性代数
• 集成学习
• AI入门体验
• 神经网络基础
• 动手学数据分析
• 机器学习算法基础
• 数据挖掘实践（房租预测）
• 数据挖掘实战（异常检测）
• 数据挖掘实践（金融风控）
• 数据挖掘实践（心跳信号分类）
• 数据挖掘实践（气象海洋预测）
• 数据挖掘实践（二手车价格预测）
• 数据挖掘实践（城市管理大数据）
• 数据挖掘实践（资金流入流出预测）
• 数据分析实践（学术前沿趋势分析）

备注

有关组队学习的开源内容

• team-learning：主要展示Datawhale的组队学习计划。
• team-learning-program：主要存储Datawhale组队学习中“编程、数据结构与算法”方向的资料。
• team-learning-data-mining：主要存储Datawhale组队学习中“数据挖掘/机器学习”方向的资料。
• team-learning-nlp：主要存储Datawhale组队学习中“自然语言处理”方向的资料。
• team-learning-cv：主要存储Datawhale组队学习中“计算机视觉”方向的资料。
• team-learning-rs：主要存储Datawhale组队学习中“推荐系统”方向的资料。
• team-learning-rl：主要存储Datawhale组队学习中“强化学习”方向的资料。

team-learning-data-mining's Issues

backward的算法在pytorch、tensorflow、opencv等等的不同

大佬讲的好棒，想请教您backward的算法和pytorch或者tensorflow或者opencv等等有关系吧？他们计算backward的算法有什么不同呀？

集成学习案例一，一个代码错误

错误地址
#部分特征处理，取众数（首先去除缺失值的数据）
for i in range(1,9+1):
data.loc[data['public_service_'+str(i)]<0,'public_service_'+str(i)] = data['public_service'+str(i)].dropna().mode().values_
for i in range(1,13+1):
data.loc[data['trust_'+str(i)]<0,'trust_'+str(i)] = data['trust'+str(i)].dropna().mode().values_
解决方法

1. 删除.values,如data['public_service_'+str(i)].dropna().mode()
2. 末尾添加[0]，如data['public_service_'+str(i)].dropna().mode().values[0]
3. 转换为int，如int(data['public_service_'+str(i)].dropna().mode().values)

贷款违约预测 KFold中为什么要对test_pre除以fold数？

https://github.com/datawhalechina/team-learning-data-mining/blob/master/FinancialRiskControl/baseline.md
test = test_pred / kf.n_splits
在单次fold内对测试集的预测概率求平均？

有梯度下降的完整代码吗

有梯度下降的完整代码吗

‘对象类型特征转换到数值’ 段落 转换前后 数值不一致

data_train['employmentLength'].value_counts(dropna=False).sort_index()

Markwown语法错误导致图片不能显示

问题地址

2.3之后的所有图片相关maekdown语法地址引用错误，导致图片不能显示。

如2.3的第一个图片，应该为
![dscreteoverall](tupian/discreteoverall.PNG)
而不是
![dscreteoverall](discreteoverall.PNG)

为什么提交结果是错的

特征工程中，箱型图不一致

您好，我前面两个小节和您的图出来是一致的，但在特征工程中箱型图和您完全不一样。
即使是使用您的代码，配合这份数据 依然结果不一致。请问您在特征工程前对数据进行了什么处理吗？

data_with_code = data_with_code[data_with_code['code_flag'] == 1]

code_flag应该是大于零，因为有的flag为2。
data_with_code.loc[data_with_code['code_flag'] > 0]

PermissionError: [Errno 13] Permission denied: 'result.zip'

When I run the following method, it raised error as stated at title

def make_zip(source_dir='./result/', output_filename = 'result.zip'):
zipf = zipfile.ZipFile(output_filename, 'w')
pre_len = len(os.path.dirname(source_dir))
source_dirs = os.walk(source_dir)
print(source_dirs)
for parent, dirnames, filenames in source_dirs:
print(parent, dirnames)
for filename in filenames:
if '.npy' not in filename:
continue
pathfile = os.path.join(parent, filename)
arcname = pathfile[pre_len:].strip(os.path.sep) #相对路径
zipf.write(pathfile, arcname)
zipf.close()
make_zip()

markdown语法错误导致图片不显示

错误地点

![](tupian/%E6%AD%A3%E6%80%81%E5%88%86%E5%B8%83%E5%9B%BE.png)
而不是
![](%E6%AD%A3%E6%80%81%E5%88%86%E5%B8%83%E5%9B%BE.png)