IMDB
先说说IMDB,现在到网上下载电影,会发现电影简介的格式越来越规范,而包含的资讯也越来越丰富,这在很大程度上要感谢IMDB,一个电影资料最全、数据库最大的网站。
IMDB全称Internet Movie Database(互联网电影数据库)。
IMDB的创世纪
开始的开始,是文本。
早期互联网的有限用户只能通过Email或Usenet(世界性的新闻组网络系统)彼此交换信息,他们来自互联网下的各类局域网,在公告牌和讨论版上展开热火朝天的讨论。
这其中一个叫rec.arts.movies的新闻组,渐渐汇集了一批探讨电影并分享信息的影迷,出于共同的话题需要,他们创建了FAQ's (常见问题表,Frequently Asked Questions lists),下设四个单元:男演员,女演员,导演,以及专门为已故影人设立的小传(俗称“死亡名单”"the 'dead' list")。到了1990年10月,这几个单元组收录的信息条目已超过23000个,覆盖了将近一万部电影及电视剧集。
天地之初一片混屯,于是组织创始人/现任常务董事科尔·尼达姆(Col Needham)说:“要有检索性”,于是便有了搜索引擎——但可想而知,太古时代的搜索引擎将是多么原始:科尔·尼达姆张贴了一份Unix系统下的命令解释程序〔壳体〕程序,用户可以借此使用命令语言发出搜索请求,并得到有意义的结果。以上提及的四组资源列表及其查询程序便组成了“IMDB前传”——纯文本Unix版,时称“rec.arts.movies电影数据库”(rec.arts.movies movie database)。
数据库的基本目标过去是现在仍是“为互联网上尽可能多的平台用户提供有用且免费的电影时效信息”("provide useful and up to date movie information freely available online across as many platforms as possible.")。在当时,所谓尽可能多的用户平台,其实主要是指Unix系统。后来,在志愿者的努力下,才终于创建了服务于DOS,OS/2甚至Amiga不同版本。
请记住,这是1990年。在那样一个蛮荒的年代,Windows操作系统还在襁褓之中,鼠标“点击”这一近乎“本能”的动作还要过几年才诞生,而第一版公众“浏览器”也尚未问世。那时,登陆互联网的绝大部分用户都要靠雇主或大学等机构提供Unix壳体程序的账号,他们知道怎样输入计算机命令语言,知道怎样编写计算机壳体程序——对他们来说,这并非难事。
这些初始程序给早期的用户们带来了无穷乐趣,愈快乐愈勤奋,他们接着建立了更多的分类目录和信息,包括编剧,作曲和摄影。然后就是投票系统,用来记录并统计用户们给每部电影从1到10的评分。
IMDB之革命
尽管在90年到93年之间,软件系统不断更新,IMDB的七个分类目录仍然保持着相对稳定。1993年,IMDB搜集和呈现信息的方法获得了巨变,内容的深度也同时得到了提高。
在剧组(movie cast)栏目中加入了角色的姓名,辅以八卦(trivia)(其下又加入疯狂字幕crazy credits),小传(biographies),剧情摘要(plot summaries)。更重要的是在日益“集权化”的数据库中添加了自动化的Email界面,这样,用户们就可以不必在自己的单机系统上运行IMDB的副本,直接用电子邮件发送搜索请求并得到信件回复。这一界面至今已有八年历史,仍在运行。
就在Email服务器推出之时,电影数据库的扇子们开始了创建万维网(web)版本的大胆构想,那时,互联网上第一个图形化万维网浏览器,NCSA的马赛克(Mosaic)甚至还处在beta版测试阶段。现在看来,这一构想绝对具有高瞻远瞩的战略意义,但它的缔造者们却没有从商业角度考虑,他们大多是朝气蓬勃的大学生和程序员,迫不及待的要在充满机遇与挑战的网络世纪大展身手。
终于,电影数据库的第一个web版本在位于威尔士的加蒂夫大学(Cardiff University)成功运行,它的界面创始人Rob Hartill和Col Needham为每天100次接入的惊人流量兴奋不已。随后,经过不断修改,IMDB拥有了每月来自350万来访者高达6500万次的接入纪录。
1994年4月,IMDB又向前迈进了一步:集中管理各类目下用户提交的更新信息。在此之前,人们要提交信息必须先找到拥有该类目的作者的Email地址,然后再寄给相关管理员。一旦把这一系统集权化,所有的信息就可以全部提交到同一个地方。
IMDB之合并
随着网站的日趋庞大,加蒂夫大学的一部服务器也渐渐不堪重负,1995年初,遍布世界各地的IMDB镜像网站开始运行,Email系统得到进一步完善,信息量成几何级数般增长,单周内流入的信息就超过1990年底整个数据库的容量。同年,每月一发的新闻邮件服务也开始投入使用。
更重要的是,尽管当时该网站仍然植根于rec.arts.movies新闻组,但实际上其操作层面已经遍布互联网各级,可谓无孔不入,为反映这发展,站点的名字随即改为“互联网电影数据库”(Internet Movie Database,即今天的IMDB)。同时,站内迅速繁殖的数据信息开始超出资助者所能提供的设备及带宽能力,也大大超出了志愿者们管理这些信息所能支出的时间和金钱。
离开Usenet之后,关于IMDB发展方向的争论渐趋激烈,一方面要秉承信息共享这一免费原则,另一方面又要继续供养网站的生存,与其他商业项目竞争,控制自己的命运。很明显,IMDB必须走商业化的道路。于是在95年底96年初,IMDB注册成为有限公司。
但与其他IT企业不同,IMDB并没有选择入住硅谷,也没有试图引入动辄数百万美元的风险投资,它的股东们仍然是当初那些一手缔造IMDB的“原始天尊”,他们主要通过广告,许可,合股等方式争取收入来源,而且除了少数几位负责管理运作的全职杀手之外,其他员工都是兼职,白天有自己的工作,只是到了晚上或周末才进入状态。
稍后,IMDB关掉了其他地区空间及带宽均有限的镜像站点,分别在美国和英国设立了更加专业的分站。出乎他们意料的是,走上商业化道路之后,当初他们预计的反商业后坐力并没有席卷而来,用户的抱怨微乎其微。毕竟,更正规的运作意味着更好的服务。不到一年之后,IMDB就在美国有了9部服务器。当然,这个能力很快就跟不上发展势头了。
IMDB与亚玛逊(Amazon.com)
1997年,IMDB全年提交的信息量达到1990年10月初运行时的100倍,相当于在95年之后翻了两番。来自广告/许可/合股的收入来源越来越显得杯水车薪,IMDB急需一股强大的资金流注入以减轻操劳过渡近乎义务工作的股东负担。
当时曾经一度盛传IMDB将被大企业收购,但谣言每次都不功自破。IMDB的管理者们担心,一旦被大鱼吞掉,那些大老板们就会把现有信息标上明码实价,当初立志要免费服务来访者的伟大信条就会随之破灭。
然后,杰夫·贝索斯(Jeff Bezos)出现了。
这是一个跟IMDB的同志们臭味相同的CEO,他深刻的理解网络/社区理念,而不只是盯着期间蕴含的市场潜力。于是,当亚玛逊(amazon.com)的人主动联系IMDB时,他们愿意耐心的听——他们听到了不可思议的声音:“我们要你们继续做现在做的事”。
当然,amazon.com不是横空出世的救世主,更不会白白烧钱。他们的计划是,利用IMDB庞大的信息资源帮助自己销售录像带,DVD等音像制品。IMDB有海量数据库,有业内专家,有才华过人的股东和员工,更有上百万的潜在客户。于是双方达成协议,IMDB成为amazon.com的子公司,多年付出的心血终于没有白费。
原有的IMDB核心成员仍然留任,当初夜以继日做“兼职”的同志们也终于可以回到IMDB领新水做全职。慢慢的,公司雇佣了更多的员工,协助管理数据,解放了相当一批功夫过硬的程序员做进一步的研发工作。
进入1998年,IMDB改头换面,数据不变,组织/呈现数据的方式却旧貌换新颜,编辑的特色得以显现,诸如首页的“今日影片”(Movie of the Day),每天发布的新闻邮件,以及每天一推的电影语录,名人生日,八卦精选/问答等等。
历经风雨,IMDB始终没有放弃初衷,不仅要做最好的,而且要同时为死硬派影迷和业余影迷提供最好用的服务。他们升级扩展了1999年5月始建的BBS,设计了更方便快捷的浏览导航,首页加入更多趣味信息,改进搜索引擎,建立了简单易用的在线帮助系统——IMDB大学(IMDb University)。
IMDB之未来
2001年末,功能更强大,内容更丰富,界面更精美的IMDB增强版(IMDB PRO)正式推出,这一增强版采取收费制,包月12.95美元,全年99美元,内容专门针对电影届从业人士,尤其增强了信息统计和多重检索功能,可谓业内人士不得不用的工作利器。
遥想当年,IMDB的创始人们从没想过要建立一个“产业”,他们只是追随自己的梦想——一群影迷彼此分享快乐的朴素愿望。十年一晃,来自世界各地数百万的影迷加入了这一行列,成为梦想的一部分。
“做自己想做的”,这就是IMDB的真谛。
最关心的东西:IMDB的得分
IMDB是目前全球互联网中最大的一个电影资料库,里面包括了几乎所有的电影,以及1982年以后的电视剧集。IMDB的资料中包括了影片的众多信息,演员,片长,内容介绍,分级,评论等,我们用的最多的也就是IMDB的得分。
而IMDB的得分又是如何来的呢?它的可靠性又有多少呢?让我们通过《魔戒1:护戒使者》来做具体分析吧,先看这张图——
本帖附件 · 1
这张图就是魔戒1的所有评分者的分数的一个条状统计图。
从中我们可以看到各个分数段的大致比例,比如这儿就可以发现,超过一半的人是打满分的。
图下面有两个分值,一个是算术平均值(arithmetic mean),一个是中值(median)。算术平均值大概就是平均数,中值是什么偶就不知道了。望justin来普及一下数学知识。。而最后我们查到的分数却既不是算术平均值,也不是中值。IMDB的分数的计算方法应该不是就做一下平均就ok了,在它的网页上也提到了它的计算方法是保密的。
top250分数算法:
imdb top 250用的是贝叶斯统计的算法得出的加权分(Weighted Rank-WR),公式如下:
weighted rank (WR) = (v ÷ (v+m)) × R + (m ÷ (v+m)) × C
其中:
R = average for the movie (mean) = (Rating) (是用普通的方法计算出的平均分)
v = number of votes for the movie = (votes) (投票人数,需要注意的是,只有经常投票者才会被计算在内,这个下面详细解释)
m = minimum votes required to be listed in the top 250 (currently 1250) (进入imdb top 250需要的最小票数,只有三两个人投票的电影就算得满分也没用的)
C = the mean vote across the whole report (currently 6.9) (目前所有电影的平均得分)
另外重点来了,根据这个注释:
note: for this top 250, only votes from regular voters are considered.
只有'regular voters'的投票才会被计算在IMDB top 250之内,这就是IMDB防御因为某种电影的fans拉票而影响top 250结果,把top 250尽量限制在资深影迷投票范围内的主要方法。regular voter的标准不详,估计至少是“投票电影超过xxx部以上”这样的水平,搞不好还会加上投票的时间分布,为支持自己的心爱电影一天内给N百部电影投票估计也不行。
因此,细心的人可以注意到,列入IMDB top 250的电影,其主页面上的分数与250列表中的分数是不同的。以魔戒1为例,它在自己的页面
http://www.imdb.com/title/tt0120737/ 中的分数是8.8,而列表中是8.7。一般250表中的得分都会低于自己页面中的得分,越是娱乐片差距越大。这大概是因为regular voter对于电影的要求通常较高的关系。)
而IMDB的过人之处不仅仅在于这儿,它除了给出分数,还给了一个更详细的投票人的列表
这个chart根据年龄、性别、国别等不同的情况,列出了不同的分数chart。而且你点击每个选项,上面(就是图一)都会出现一个不同的chart。这个其实是比较有用的。比如你在要选择动画片的时候,就应该点选一下小于18岁,或者30-44岁这个选项看看他们的评分,因为他们才是这部电影的最大观众群,其他人的分数都是仅供参考的。
碟报员或者我们在选择影片的时候,可以不仅仅看个总得分,多花一点时间,看看影片各个年龄段的得分会更有帮助的。有些影片我们觉得不好看,但是分数很高,你也可以参照一下,“us users”和“non-us users”这部分的数据,如果美国投票用户远远大于海外用户,那说明此片的确是有相当重的美国文化底蕴的,不觉得好看也是正常。相反的,如果我们觉得不错,但是IMDB的分数很低,这也许是老美的评分人数多,打的分低,就把总分给拉下来了。
从魔戒1的得分截图可以发现这部影片的确是各个年龄阶段都很喜欢,分数都打的很高的。
个人感觉,IMDB的得分是相当有参考价值的,只是我们不知道如何看到真实的数据而已。我这儿的想法也是很个人的,希望有人一起研究一下。
本帖附件 · 1
最关注的------IMDB TOP250排名
- 排名 得分 投票人数 电影
- 1 9.1 "205,864" 教父
- 2 9.1 "246,562" 肖申克的救赎/刺激1995/月黑高飞
- 3 8.9 "116,525" 教父续集/教父2/教父第二集
- 4 8.8 "60,172" 独行侠勇破地狱门/黄金三镖客/黄昏三镖客
- 5 8.8 "209,685" 低俗小说/黑色追缉令/危险人物
- 6 8.8 "188,348" 魔戒3:王者归来/指环王3:王者无敌
- 7 8.8 "97,522" 卡萨布兰卡/北非谍影
- 8 8.8 "145,310" 辛德勒的名单
- 9 8.8 "154,489" 星球大战5:帝国反击战
- 10 8.7 "53,115" 七武士/七侠四义
- 11 8.7 "106,043" 飞越疯人院/飞越杜鹃窝
- 12 8.7 "191,949" 星球大战/星球大战4:新的希望
- 13 8.7 "62,119" 后窗
- 14 8.7 "47,725" 十二怒汉
- 15 8.7 "227,317" 魔戒1:魔戒现身/指环王1:护戒使者
- 16 8.6 "132,696" 夺宝奇兵1:法柜奇兵
- 17 8.6 "63,150" 上帝之城/无主之城
- 18 8.6 "151,769" 普通嫌疑犯/非常嫌疑犯/刺激惊爆点
- 19 8.6 "110,436" 好家伙/盗亦有道/四海好家伙
- 20 8.6 "92,682" 奇爱博士/密码一一四/斯特伦奇洛夫博士/密码114
- 21 8.6 "31,787" 狂沙十万里/万里狂沙万里愁/西部往事
- 22 8.6 "77,967" 惊魂记/精神病患者/触目惊心
- 23 8.6 "85,468" 公民凯恩/大国民
- 24 8.6 "181,804" 魔戒2:双塔奇兵/指环王2:双塔奇兵
- 25 8.6 "52,283" 谍影疑云/西北偏北/夺魄惊魂
- 26 8.6 "140,463" 失忆/记忆碎片/凶心人/记忆迷局
- 27 8.6 "132,815" 沉默的羔羊
- 28 8.5 "45,635" 阿拉伯的劳伦斯
- 29 8.5 "59,094" 风云人物
- 30 8.5 "26,521" 日落大道/红楼金粉
- 31 8.5 "182,994" 格斗俱乐部/斗阵俱乐部/搏击会/搏击俱乐部
- 32 8.5 "96,641" 天使爱美丽/艾蜜莉的异想世界/阿梅丽的奇妙命运
- 33 8.5 "208,703" 黑客帝国/骇客帝国/22世纪杀人网络
- 34 8.5 "160,731" 美国丽人/美国心?玫瑰情/美国美人
- 35 8.5 "49,960" 迷魂记/晕眩
- 36 8.5 "75,769" 出租车司机/计程车司机/的士司机
- 37 8.5 "96,470" 现代启示录
- 38 8.4 "137,986" 七宗罪/火线追缉令
- 39 8.4 "89,571" 这个杀手不太冷/终极追杀令/杀手莱昂
- 40 8.4 "100,888" 纯洁心灵的永恒阳光/暖暖内含光/无痛失恋/美丽心灵的永恒阳光
- 41 8.4 "22,721" 光荣之路
- 42 8.4 "101,149" 美国X档案/野兽良民/美国历史档案/美国X历史
- 43 8.4 "45,893" 杀死一只知更鸟/梅岗城的故事/怪屋疑云
- 44 8.4 "39,963" 唐人街
- 45 8.4 "28,060" 第三个人/第三者/黑狱亡魂/黑狱之魂
- 46 8.4 "19,825" M就是凶手
- 47 8.4 "38,007" 潘恩的迷宫/潘神的迷宫
- 48 8.4 "32,912" 帝国的毁灭/帝国陷落
- 49 8.4 "57,473" 钢琴家/战地琴人/钢琴战曲
- 50 8.4 "90,893" 巨蟒和圣杯
- 51 8.4 "16,298" 碧血金沙/宝石岭
- 52 8.4 "99,630" 发条橙子/发条桔子
- 53 8.3 "93,536" 异形
- 54 8.3 "32,727" 桂河大桥
- 55 8.3 "46,991" 千与千寻/神隐少女
- 56 8.3 "97,816" 幕后嫌疑犯/铁面特警队/洛城机密
- 57 8.3 "41,771" 从海底出击
- 58 8.3 "28,947" 枭巢喋血战/群雄夺宝鹰/马耳他雄鹰
- 59 8.3 "85,439" 梦之安魂曲/梦的挽歌/迷上瘾
- 60 8.3 "81,820" 闪灵/鬼店/幽光
- 61 8.3 "18,276" 双重保险
- 62 8.3 "107,531" 落水狗/霸道横行
- 63 8.3 "37,243" 卢旺达饭店
- 64 8.3 "147,241" 拯救大兵雷恩/雷霆救兵/拯救大兵瑞恩
- 65 8.3 "19,528" 大都会
- 66 8.3 "87,316" 无间行者/美版无间道/无间道风云/神鬼无间
- 67 8.3 "19,361" 罗生门
- 68 8.3 "44,270" 愤怒的公牛/蛮牛/狂牛
- 69 8.3 "112,245" 罪恶之城/原罪之城/罪恶都市
- 70 8.3 "91,990" 异形续集/异形2
- 71 8.3 "30,490" 雨中曲/万花嬉春
- 72 8.3 "16,766" 摩登时代
- 73 8.3 "17,855" 蝴蝶梦/丽贝卡
- 74 8.3 "31,396" 大逃亡/第三集中营/龙虎榜
- 75 8.3 "91,442" 2001太空奥德塞/2001太空漫游/2001:星际漫游
- 76 8.3 "20,779" 谍影迷魂/满洲候选人
- 77 8.3 "37,285" 热情如火
- 78 8.2 "19,370" 彗星美人
- 79 8.2 "142,426" 阿甘正传
- 80 8.2 "53,624" 莫扎特传/阿玛迪斯
- 81 8.2 "17,412" 历劫佳人/狂野生死恋/历劫名花
- 82 8.2 "56,732" 美丽人生/一个快乐的传说
- 83 8.2 "16,535" 第七封印/第七印章
- 84 8.2 "114,520" 终结者2/魔鬼终结者2/未来战士2
- 85 8.2 "71,926" 大白鲨
- 86 8.2 "35,235" 骗中骗/刺激/老千计状元才/行骗天下
- 87 8.2 "16,910" 列车上的陌生人/火车怪客
- 88 8.2 "20,694" 码头风云/岸上风云/在江边
- 89 8.2 "61,652" 百万宝贝/百万金婴/ 登峰造击
- 90 8.2 "111,014" 蝙蝠侠:侠影之谜
- 91 8.2 "9,438" 窃听风暴/别人的生活/他人的生活
- 92 8.2 "26,806" 象人
- 93 8.2 "74,036" 金甲部队/全金属外壳
- 94 8.2 "22,401" 天堂影院
- 95 8.2 "134,709" 勇敢的心/英雄本色/惊世未了缘
- 96 8.2 "17,366" 公寓春光/桃色公寓
- 97 8.2 "17,798" 史密斯先生到华盛顿/史密斯游美京/民主万岁
- 98 8.2 "103,756" 银翼杀手
- 99 8.2 "12,335" 城市之光
- 100 8.2 "55,976" 绿野仙踪
- 101 8.2 "18,782" 乱
- 102 8.2 "113,255" 杀死比尔
- 103 8.2 "18,392" 正午/日正当中
- 104 8.2 "15,431" 夜长梦多
- 105 8.2 "16,347" 美人计
- 106 8.2 "91,690" 冰血暴/冰雪暴
- 107 8.2 "100,173" 死亡幻觉/怵目惊魂28天
- 108 8.2 "6,698" 刑房
- 109 8.2 "17,127" 大独裁者
- 110 8.2 "33,252" 美国往事/四海兄弟/义薄云天
- 111 8.2 "121,991" 星球大战6:绝地大反击/武士复仇/杰迪归来/绝地大反攻
- 112 8.1 "67,465" 超人特工队/ 超人总动员/超人家族
- 113 8.1 "22,139" 铁窗喋血/逃狱金刚
- 114 8.1 "32,580" 幽灵公主/魔法公主
- 115 8.1 "5,792" 恐惧的代价
- 116 8.1 "47,408" 不可饶恕/杀无赦/豪情盖天/不被饶恕的人
- 117 8.1 "73,912" 海底总动员/寻找尼莫
- 118 8.1 "35,306" 老男孩/原罪犯
- 119 8.1 "82,511" 撞车/冲撞
- 120 8.1 "102,838" 回到未来
- 121 8.1 "89,127" 夺宝奇兵3:圣战奇兵
- 122 8.1 "138,457" 第六感/灵异第六感/鬼眼
- 123 8.1 "31,130" 宾虚/宾汉/宾虚传
- 124 8.1 "33,205" 安妮?霍尔
- 125 8.1 "14,844" 大镖客
- 126 8.1 "88,241" V字仇杀队/V怪客
- 127 8.1 "11,509" 杀手
- 128 8.1 "95,782" 绿色英里/绿里奇迹/绿色奇迹/绿里/绿地
- 129 8.1 "50,444" 布莱恩的一生/万世魔星
- 130 8.1 "84,577" 杀死比尔2/标杀令2
- 131 8.1 "44,491" 猎鹿人/越战猎鹿人
- 132 8.1 "17,106" 黄昏双镖客/独行侠江湖伏霸/金钱与仇恨
- 133 8.1 "75,941" 公主新娘
- 134 8.1 "5,165" 阿尔及尔之战
- 135 8.1 "142,586" 角斗士/神鬼战士/帝国骄雄
- 136 8 "55,180" 野战排/前进高棉/杀戮战场
- 137 8 "70,339" 卧虎藏龙
- 138 8 "4,522" 卡比利亚之夜
- 139 8 "12,138" 偷自行车的人/偷单车的人
- 140 8 "12,296" 一夜风流
- 141 8 "42,086" 毕业生
- 142 8 "30,321" 虎豹小霸王
- 143 8 "24,481" 甘地传
- 144 8 "28,283" 爱情是狗娘/狗男女的爱/人、爱、狗
- 145 8 "6,075" 仁心与冠冕
- 146 8 "13,381" 八部半
- 147 8 "19,740" 非洲皇后/东非狂暴记/非洲女王号
- 148 8 "11,580" 罗宾汉历险记/侠盗罗宾汉/罗宾汉
- 149 8 "44,259" 人类之子/绝种浩劫
- 150 8 "5,862" 浴室情杀案
[ 本贴由 伟森 于 07-4-14 11:27 最后编辑 ]