基于 iMacros 的数据爬虫设计及 Facebook 用户行为分析
社会与信息网络
2019-11-27 v2 人机交互
信息检索
摘要
在分析了在线社交网络（OSN）站点时，获取所需数据集仍是研究人员面临的主要挑战。OSN 服务提供商提供的用于检索数据的应用程序编程接口（API）施加了若干不可避免的限制，使得难以获得理想的数据集。在本文中，我们提出了一种基于 iMacros 技术的数据爬虫，称为 IMcrawler，能够在允许访问 OSN 上公开共享用户内容的法律框架内，收集通过浏览器可从 Facebook 网站访问的每一条信息。所提出的爬虫解决了与网络数据抽取方法以及 OSN 服务提供商提供的大多数 API 相关的多数挑战。已从 Facebook 用户档案中提取出两大类内容，即个人信息和动态活动。本工作是首个针对 Facebook 网站提供爬虫设计详细描述的研究尝试。
引用
@article{arxiv.1802.09566,
title = {Design of iMacros-based Data Crawler and the Behavioral Analysis of Facebook Users},
author = {Mudasir Ahmad Wani and Nancy Agarwal and Suraiya Jabin and Syed Zeeshan Hussai},
journal= {arXiv preprint arXiv:1802.09566},
year = {2019}
}