基于人工标注的搜索引擎标注方法与实现

苏文杰 2016-11-29 17:51:01

本点博可采用思维简图模式查看

!方法
!!众包解决评估人员少,工作量少的难题
!!建立用户组区分评估能力不同的用户
!!建立认证体系,提高用户评估能力和准确性
!!拼装URL、解析页面、保存页面解决无法保存现场、评估步骤复杂的问题
!!通过任务管理来解决紧急任务
!!建立任务池解决评估任务分发、时间限制问题
!!插入监控case对用户评估效果进行监控
!!通过自动加入,屏蔽以得到正确答案的题目
!!通过平复数据报表下载,使用方可以得到相关性打分、对比打分等数据,解决数据难以利用的问题
!搜索引擎排序方法
!!超链接分析法
!!词频统计法
!搜索引擎研究方向
!!如何改进搜索引擎的排序结果
!!如何提高检索效率和速度
!!如何评价搜索引擎优劣和用户满意度
!搜索引擎评估方法
!!基于用户搜索和点击数据的方法:如ab-testing,interleaving等
!!基于人工标注的方法:如SBS,基于DCG等指标的评估以及pair-wise等
!评测指标
!!准确率召回率
!!CG,DCG,
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!
!!