《Information filtering and information retrieval: Two sides of the same coin? 》读书笔记

《Information filtering and information retrieval: Two sides of the same coin? 》这篇论文是 Nicholas J. Belkin 和 W. Bruce Croft于1992年发表的,这篇文章主要介绍信息检索和过滤的相关概念特点和二者的差异,给出了具体的模型分析,并且总结了检索研究对过滤的启发和经验教训。

一、信息检索(IR)和信息过滤(IF)

文章针对信息检索和信息过滤分别给出了相应的解释也给出了检索和过滤各自的特点,阅读完文章后我对IR与IF做出的认识是:(1)信息检索即从信息需求(目标)到寻找获取相关信息资源的一系列活动过程,在这个过程中检索系统需要提供能解决用户信息需求的信息资源;(2)信息过滤则是根据用户的信息需求对动态流入的大量信息结合长期性的配置文件(个人认为是收集得到的用户的兴趣模板文件,很类似停用词、同义词等相关文件)进行过滤将不相关的信息资源移除,把满足用户需求的更高效的信息传递给用户。

目前来说IF技术在信息处理中已经应用得十分的广泛了,IF技术实质上是一种信息检索技术,那么这就意味着IR系统与IF系统是十分类似的,但又犹如一枚硬币的两面还是存很多的不同之处,文章从很多方面对IR与IF进行了差异分析,Nicholas J. Belkin 和 W. Bruce Croft最主要从IR和IF的两个过程模型进行了差异分析以及二者的使用背景的差异:
①过程模型的差异:

  • 在IR一般涉及系统单次使用的情况下,具有一次性目标和一次性查询的人,IF涉及系统的重复使用,具有长期目标的人或个人利益。
  • IR识别出一系列查询的信息表达的内在信息需求,过滤则是通过配置文件对信息偏好做出的正确规范。
  • 如果IR关注文本的收集和组织,则过滤更关注组织或个人分发文本
  • IR通常与从相对静态的数据库中选择文本有关,过滤主要涉及从动态数据流中选择或删除文本。
  • IR与回应用户的问题有关,在一个单一的信息追求情节中与文本互动,过滤关注一系列信息追求剧集的长期变化。

总的来说IF与IR相比更多的是关注相关信息需求的长期性,通过过滤系统的重复使用对动态输入的大量数据进行基于配置文件的筛选和处理;在IR中构建索引即对文本信息进行收集和组织是十分重要的,而IF则会更加关注如何高效地将相关的文本资源分发给用户。
②使用背景的差异:

  • 文字相关问题。对于信息过滤,文本的及时性通常具有压倒一切的意义,对于IR来说,这通常不是这种情况。
  • 用户相关的问题。大体上,IR大体上在科学和技术领域内,在明确定义的特定领域中研究了定义明确的用户群。这些用户在寻求信息的行为中几乎总是充满动力。但是,过滤通常关注的是非常不明确的用户群体,例如在家中寻求娱乐的人,以及各种各样的域名。另外,过滤环境中的动机不能总是假定。
  • 环境问题。在这里,最显着的区别似乎是过滤在很多情况下都非常关注隐私问题; 由于种种原因,IR几乎没有注意到这种问题。

这一部分在文字相关问题上我认为作者表述得不是很清楚也没有给出相应的论据,看了很久还是没有理解到作者最终想表达文本及时性,我自己对此做出的认识是:过滤的过程其实是一个重复繁琐的过程,如何根据用户的偏好或者配置文件从大量的动态数据流中快速地进行筛选得到最终的满足要求的信息资源,提升信息的反馈效率是IF比IR更需要关注的。

二、检索的具体模型

IR和IF在过程上有很强的相似性,他们都依托于信息检索模型,文章中介绍了三种模型:布尔模型、矢量空间模型以及概率模型。作者针对特定的概率模型进行了讨论,概率检索模型是解决检索中存在的不确定性提出的,它的思想是给定一个用户的查询则会有一个包含相关文档且不包含相关文档的集合,通过概率检索模型可以计算出返回的信息对象与用户信息需求的匹配精度(相关概率),进而可以实现排序。

在概率检索模型中,检索模型主要是根据不同的信息需要建立查询网络,将多个传入的对象与单个查询进行比较,计算对象的概率,最终反馈给用户按照相关概率排序生成的对象列表。而过滤模型主要是将传入的信息流中的单个对象与大量的配置文件比较过滤,同时也进行相关度计算,将过滤后的结果按照相关概率排序生成对象列表反馈给用户。

三、检索研究对过滤的启发和经验

这一节作者也主要提到了三个方面:文本表示、检索技术以及获取信息需求。最吸引我的是信息需求的获取,前文的IR和IF的过程模型中都涉及到了用户的信息需求,我认为IR更多的是关注如何获取用户查询表达(查询语句或关键词)中的深层次信息需求;而IF则需要更关注在获取用户需求的过程构建用户兴趣模板(即前面说的配置文件),从而实现更好的过滤向用户提供高效满意的信息。正如文章里所说:

在检索系统中获取准确的信息需求描述是至关重要的,并且在过滤系统中同样重要。如前所述,过滤系统中的配置文件通常代表长期利益,并且可能有更多机会改善配置文件的质量。

看了一些相关的文章,总的来说获取信息需求有以下几种:
①用户主动填写信息需求或者关键词来表达信息需求和信息偏好;
②通过反馈来获取用户的信息需求和信息偏好;
③主动跟踪用户的信息需求,了解用户的行为来得到用户的信息偏好;
IF需要更进一步地基于用户的信息需求和信息偏好建立长久的用户兴趣模板(配置文件),实现向用户反馈高效及时、满意的信息。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,324评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,303评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,192评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,555评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,569评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,566评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,927评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,583评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,827评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,590评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,669评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,365评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,941评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,928评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,159评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,880评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,399评论 2 342

推荐阅读更多精彩内容

  • 秋日的风,透着凉爽。天空中白云朵朵,像极了巨型的棉花糖,在蓝色的天空里显得异常明亮而洁白。阳光从树叶间洒落在你深蓝...
    涂涂tyf阅读 817评论 17 15
  • 今天南宝要去春游。小家伙六点多就醒了,一骨碌爬了起来,大喊着,妈妈,起床了。我今天要去春游的,不能迟到哦。然...
    南南北北2012阅读 173评论 0 0
  • 说到邮件礼仪,我想起来一句老话叫:“字如其人”,对于我来说用手机用的标点符号都不会了,所以说:“邮件就如同一张...
    合肥李风丽阅读 172评论 0 0
  • 正午的林荫路 阳光被叶片们簇拥着 风也穿行迎面而来 单车骑的飞快 金色的光影斑驳在脸颊上 这就是夏天,我的爱 傍晚...
    就是笑笑啊_阅读 163评论 0 0