Google推出新的搜索引擎Dataset Search

来源:https://www.theverge.com/2018/9/5/17822562/google-dataset-search-service-scholar-scientific-journal-open-data-access

原文发表时间:2018/09/05

Google Dataset Search 帮助科学家找到所需的数据集,它可能成为科学家最好的朋友!

原文作者:

原文作者James Vincent

Google的目标一直是整理世界各地的信息,而其第一个目标是商业网络。 现在,它希望通过新的数据集搜索引擎为科学界做同样的事情。

这项名为Dataset Search的服务将于今天启动,并将与Google学术搜索(该公司流行的学术研究和报告搜索引擎)配合使用。 像大学和政府这样的在线发布数据的机构,需要在其网页中包含描述数据的元数据标签,包括数据的创建者,发布时间,收集方式等等。 然后,该信息将通过数据集搜索建立索引,并与Google知识图的输入结合起来。(这是为常见搜索而弹出的框的名称。因此,如果数据集X由CERN发布,则有关研究所的一些信息也将包含在结果中。)

帮助创建数据集搜索的Google AI研究科学家Natasha Noy在被The Verge采访时说,其目标是统一在线存储数据集的数以万计的不同存储库。 Noy说:“我们希望使这些数据可被发现,但将其保留在原处。”

目前,数据集发布极为分散。 不同的科学领域以及不同的政府和地方政府都有自己的首选存储库。 “科学家说,“我知道我需要去哪里寻找数据集,但这不是我一直想要的,”Noy说。 “一旦他们脱离了自己独特的社区,那就很难了。”

Noy举了一个她最近与之交谈的气候科学家的例子,她告诉她一直在为即将进行的研究寻找海洋温度的特定数据集,但任何地方都找不到。 直到在一次会议上遇到一位同事,她才找到了数据集,并告诉她数据集的托管位置。 只有这样她才能继续她的工作。 “而且,这甚至不是一个特别的精品店,”Noy说。 “该数据集在相当突出的地方写得很好,但是仍然很难找到。”


An example search for weather records in Google Dataset Search. Image: Google

Dataset Search的初始版本将涵盖环境和社会科学,政府数据以及来自ProPublica等新闻机构的数据集。但是,如果这项服务流行起来,那么随着机构和科学家争相访问其信息,它所索引的数据量应该会迅速增加。

最近全球范围内开放数据计划的兴起应对此有所帮助。 “我确实认为在过去几年中,存储库的数量激增了,” Noy说。她认为这是因为数据在科学文献中的重要性日益提高,这意味着期刊要求作者发表数据集,以及“美国和欧洲的政府法规以及开放数据运动的普遍兴起”。

开放数据研究所(ODI)首席执行官Jeni Tennison说,让Google参与应该有助于使该项目成功。她说:“数据集搜索一直以来都是很难支持的,我希望Google介入将使它变得更容易。”

Tennison说,要创建一个像样的搜索引擎,您需要知道如何构建用户友好的系统,并理解人们输入某些短语时的含义。 Google知道这两个部门的工作情况。实际上,理想情况下,Google会发布有关如何使用Dataset Search 的自己的数据集。尽管该公司用于使搜索爬虫可见的数据集的元数据标签是一个开放标准(这意味着任何竞争者(如Bing或Yandex)都可以使用它们来构建自己的竞争服务),但是当搜索引擎处于关键状态时,搜索引擎的改进最快大量的用户可以提供他们所做的数据。

Tennison说:“仅了解人们的搜索方式很重要……他们使用什么样的术语,如何表达它们。” “如果我们想掌握人们如何搜索数据并使之更易于访问,那么如果Google在此基础上开放自己的数据,那就太好了。”

换句话说:Google应该发布有关Dataset Search 的数据集,该数据集将由Dataset Search 建立索引。哪个更合适?

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,529评论 5 475
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,015评论 2 379
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,409评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,385评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,387评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,466评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,880评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,528评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,727评论 1 295
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,528评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,602评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,302评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,873评论 3 306
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,890评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,132评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,777评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,310评论 2 342

推荐阅读更多精彩内容