老师 spark 可以训练出url检测模型吗？大概什么思路呢？

Question

老师 spark 可以训练出url检测模型吗？大概什么思路呢？

Answer 1

小简同学 2022-04-04 19:09:22

同学你好，可以的，url检测可以看作是一个分类问题，拿就可以用分类算法，最常用的就是逻辑回归，也就是有监督的训练，也就是要准备正反两份训练数据，但url是文字类型的，需要提取url的数字特征进行训练，所以很自然的会想到使用TFIDF，以上就是大概的思路，祝学习愉快！

• 提问者 慕函数0552834 #1

  老师 “要准备正反两份训练数据”不是很明白这句，我是想训练一个恶意url测试模型

• 提问者 慕函数0552834 #2

  老师 参照那个章节内容？

• 小简同学 回复 提问者 慕函数0552834 #3

  就是需要人工标注哪些url格式是正常访问，哪些url格式是非法攻击的url，然后提交给算法模型训练

点开查看后面1条评论