历史学家的新技艺:遥读作为史料的电子邮件

每一行都可以被理解成一个主题,其格式分别代表主题编号、在数据集中的比率以及词群。词群不是简单的高频词叠加,虽然不免也有一些不相干的词乱入,但总体来看聚集起来的还是能够讲故事的相关联实体。看到不同的词群,许多往事立马就涌上心头。比如主题7,看到了北大历史系许多熟悉的名字,反映了笔者在北大读书期间的生活经历。关键词表明了大部分内容都跟学生工作相关,没错,“发件王”H就名列其中。在南海研究中心担任秘书的经历,体现在了主题6之中。曾经做辅导员的经历也被挖掘出来了,“辅导员”就是要跟不同学生打交道,与学生们的互动也就相当频繁,主题10还有诸如“申请表”等关键词,透露着学生工作的事务性。
主题模型精准提取主题的能力有时候令人惊讶。主题2分明是一个学生在国外(加拿大)发来的问候;而主题29则是笔者开设的《基督教文明史》、《德意志精神与文化》等课程,与学生们的课程交流。这两个主题在邮件集中属于小众内容,居然也被算法提取出来了。
文本聚类的算法为我们深入理解庞杂的电邮数据集提供了一种指引。有效信息当然不止步于每个主题的10个关键词。实际上,算法还提供了更加丰富的细节,不过它们往往以数据矩阵的方式存在,让我们历史学者一看就感觉头大。比如,它们可能是这样的:
或者是这样的:

我们需要换一种更加直观的方式来观察数据的细节。实际上,这些数据能够更清晰地描绘Chauvin用电子邮件编织起来的“书信空间”,并且彰显其独有的属性。比如,那位“发件王”H,TA究竟在发什么?屈尊第二的G,又有哪些不同?WH2与WH12在跟Chauvin交流什么?R用德语跟Chauvin在讨论什么问题?
每个主题用10个词来表达,是笔者的人为设定。实情是,算法给出了远远多于10个关键词的主题矩阵,而且每个词具有不同的权重。我们可以效法文字云,做出主题的词云来,每个主题的细节更加丰富了。于是,仍然以主题7为例,我们看到了诸如“报告会”、“研究生院”、“组织部”等词,北京大学的生活经历就变得愈加立体了。我们也看到广告邮件的顽强存在感,主题33表明Chauvin是“当当网”的忠实客户,但他不过是在他们家买了一些书,却被推送了许多不相关的商品。主题13则显示Chauvin是12306在线购买火车票的重度依赖者。

主题词云
郭台铭:网络经济有它的局限性,再怎样也不能按出一碗泡面来
来源: 澎湃新闻网
直击华为生态伙伴大会2018:容器与区块链服务为企业应用再次提速
来源: 51CTO传媒
把身后的车P到像“宇宙飞船”?金·卡戴珊也是神操作啊
来源: 淼骨君
科学家:全球目击不明物体及各种神秘事件 也许就是未来人!
来源: 玉阳科学大观
4轮融资、国内一流医疗AI企业行业的它将如何开启全球战略?
来源: 动脉网
第三届中美智慧教育大会召开 百度智慧课堂助力打造教育生态
来源: 砍柴网
火星上的“骨头”到底是什么?科学家:这或许是一个非凡的发现
来源: 科学趣谈
亮相CHINC大会,阿里钉钉定义未来医院
来源: 光明网
Scicome:科研医疗器材行业的耕耘者!
来源: 重庆时间网
现在人都不用淋浴头洗澡了!百元不到装在卫生间,经济实惠真享受
来源: 放心家居
7家顶尖猎头集体“收割”35岁人才 机关国企人员成主流
来源: 北青网
苹果和华为没想到,小米出了这个小玩意,宅男买了收获校花心!
来源: 时光微微甜
人走后或抵达另一个时空,科学家给出解释,暗指灵魂转移的可能性
来源: 探索宇宙奥秘
雷军曝MIX2S样张:预示小米7有重磅功能媲美iPhoneX
来源: 科技犬
能抵达地球的地外文明,便能轻易抹杀地球文明
来源: 天马行空的逍遥
打造指数级繁荣生态:2018年华为将投入35亿用于伙伴激励
来源: 飞象网
快递无人机驾驶员月薪可两万!更多快递员将沦弃子?
来源: 掌链
2018网易Q I大会主题揭幕 网易七鱼引领行业思考“服务破界”
来源: 凤凰网
外星生命可能与地球生命截然不同,也是我们无法发现他们的原因
来源: 独家爆料吃瓜群众
还记得华为当年是如何靠“坑”网友起家的? 网友: 从此华为是路人
来源: 小美的的故事
移动“再次道歉”:4000分钟国内通话+30G国内流量,老用户:转网!
来源: 用户1914801776
2017中国独角兽榜单164家,南京3家:社交电商拼多多、小红书等入榜
来源: 陆伟
2018年IT领袖峰会BAT中马云、李彦宏不玩了,马化腾是否寂寞?
来源: 科技圈子
国产最值得等待和购买的四大人气王手机,是你喜欢的风格吗?
来源: 玩转科技
“大神”分享如何成为一名网站制作工程师
来源: 张朋飞
海外和国内的价格差了一半,要和三星Note8说再见了
来源: 手机圈那点事
2018中国IT领袖峰会深圳在开幕,开展高端对话与前沿话题探讨
来源: 前沿科技观察老王
美研究证明饮料和心脏病的关系:每天一瓶果汁,死亡风险高一倍!
来源: 于九野
华为、比亚迪、都来招人了这类专业人最受企业青睐
来源: 深圳新闻网
餐北斗供应链完成数千万人民币 A 轮融资 黑马基金与启创资本领投
来源: 投资家