新闻语料库免费下载及使用指南:网易、腾讯、凤凰、新浪新闻素材整理
佚名
2024-12-20 08:10:09
0

网易新闻娱乐八卦_娱乐新闻网易新闻_x网易新闻

注:博文转载、语料库使用,请注明提供者、来源以及空间提供方。

免责声明:此语料库仅供自然语言处理的业余爱好者研究和交流,禁止用于任何商业用途(包括在资源内部链接广告等行为)。

感谢网易新闻中心、腾讯新闻中心、凤凰新闻中心以及新浪新闻中心提供新闻素材。新闻著作权归以上网站所有,任何人未经上述公司允许不得抄袭。

语料库下载地址:

语料素材来源: 凤凰新闻中心、网易新闻中心、腾讯新闻中心、新浪新闻中心。

语料库整理提供者: finallyliuyu

语料库空间提供方: 博客园(无偿提供)

说明:

1、此语料库非职务作品,由本人在业余时间搜集整理,免费提供给对NLP狂热的业余爱好者学习研究使用;本人是自然语言处理的业余爱好者,在类别定义等方面都可能存在一些欠缺,欢迎大家提出宝贵意见和建议;

2、下载地址提供的是MS SQL2000数据库的备份文件。使用此数据库,您需要安装 MS SQL2000 server,然后将corpus.rar解压并还原。压缩包大小为54.8M,共包含39247篇新闻,分为历史、军事、文化、读书、教育、IT、娱乐、社会与法制等八个类别。历史类、文化类、读书类新闻来自于凤凰网,IT类的新闻全部来自tech.qq,教育类的新闻来自edu.qq,娱乐类的新闻来自网易。社会与法制类的新闻来自于新浪和腾讯的几个版面;

3、需要特别注意的是,有的新闻在开头处有大量空白,因此在查询数据库ArticleText字段中有大片空白的,不是空新闻,是整个新闻体截断显示的缘故。

4、有关语料库的其他情况,请参考《献给热衷于自然语言处理的业余爱好者的中文新闻分类语料库之一》。

我本人在此语料库做过的验证性实验有:《KL语义距离计算系列》 ,《Kmeans聚类系列》以及《文本分类和特征词选择系列》。

感谢DUDU在博客园无偿帮忙提供空间;也感谢博客园团队。衷心祝愿你们越办越好!

相关文章:“我爱自然语言处理”两周岁自动作文评分与自然语言处理fastText原理及实践(达观数据王江)

文章导航

微软:Web N-gram Services

请求捐赠短信,为短信语料库的创建出一份力

相关内容

新闻语料库免费下载及使用指...
注:博文转载、语料库使用,请注明提供者、来源以及空间提供方。免责声...
2024-12-20 08:10:09

热门资讯

法国啄木鸟系列MarcDorc... 如果你是一名老宅男,老司机,那么啄木鸟这种知名片商的名字你一定听过,法国啄木鸟公司是世界著名的电影公...
挑战八卦1000位明星之:虞书... 挑战八卦1000位明星之:虞书欣,丁禹兮,白鹿,王鹤棣,张凌赫,赵露思,刘宇宁
抖音十大网红美女 抖音最美女主... 抖音十大网红美女 抖音最美女主播排行榜 盘点抖音超好看的小姐姐抖音上聚集了众多美女网红,下面就是一份...
翁青雅疑似男友发声引爆社交圈,... 近日,网络上出现了一则关于翁清雅的疑似前男友发声的消息,一时间引发了网友们的热议。这位疑似男友的发言...
麦琳评论区再沦陷!买熏鸡嘲葛夕... 广大观众终于被麦琳——李行亮的老婆,逼疯了!《再见爱人4》杨子+黄圣依的流量,都不如麦琳买两只熏鸡干...
《魔兽世界》导航语音包隐藏彩蛋... 魔兽世界是一款非常经典的多人在线角色扮演游戏, 游戏中拥有玩家们非常耳熟能详的经典英雄角色,还有史诗...
BIGBANG全员重聚MAMA... 天团BIGBANG,他们即将在MAMA(Mnet Asian Music Awards,即Mnet亚...
陈昊宇与李斯丹妮的黑历史大曝光... 近日,陈昊宇与李斯丹妮这两位炙手可热的年轻艺人又一次成为热议的中心——这一次,不再是他们的作品或活动...
陈奕迅的富士山下的歌词到底讲的... 陈奕迅的富士山下的歌词到底讲的是什么意思?这首歌大概讲了这样一个故事:情侣分手后,女孩依旧对男孩念念...
江嘉敏大胆艺术照曝光:真空上阵... 本文编辑剧透社:issac未经授权严禁转载,发现抄袭者将进行全网投诉TVB知名女星,有“是非精”之称...