practical writing practical



前言朴树去年新出了一张专辑《猎户星座》,其中出了几首个人非常欣赏的曲子 。朴树这个人很奇怪,不走寻常路 。对他的个人不做过多评价,就想看看能不能通过他的音乐来了解一下它 。旋律什么的都不是很懂,我只决定好听就行了 。那么,剩下的只能分析歌词了 。所以我爬取了朴树的所有歌曲的歌词 。以下就爬取过程和爬下来的结果进行一波分析 。
结果分析总共爬取了80首歌,总共14张专辑的歌 。然后对所有的歌词进行分词,根据分词后的结果进行了统计 。由于分词后的结果占比最多的肯定是一个字的,但是一个字的东西给的信息太少,所以我挑选了所有结果的前200个的二字词语和三字词语 。这时候就可以看出很多的信息了 。
二个字的词语分析下面是出现次数的最多的前200词语中的二字词语:
'什么', 87)('my', 87)('我们', 74)('曾经', 70)('朴树', 68)('一切', 67)('就让', 53)('那么', 49)('这么', 47)('不能', 44)('放在', 42)('on', 39)('所有', 36)('归来', 36)('天真', 36)('人生', 36)('世界', 36)('坠入', 33)('那个', 33)('时光', 30)('永远', 30)('年少', 30)('放开', 29)('黑夜', 29)('没有', 29)('咿呀', 29)('只有', 27)('明天', 27)('路过', 27)('no', 26)('那些', 26)('他们', 26)('交给', 25)('一样', 25)('沉入', 25)('故事', 25)('不知', 24)('快乐', 24)('天空', 24)('黑暗', 24)('自然', 23)('亚东', 23)('一天', 21)('植物', 21)('离开', 21)('真得', 20)('动物', 20)('in', 20)('还是', 19)('今天', 19)('两手', 19)('拥有', 19)('野草', 19)('就算', 19)('风吹', 19)('自己', 18)('今日', 18)('从此', 18)('再见', 18)('天涯', 18)('知道', 17)('骄傲', 17)('命运', 16)('夕阳', 16)('暗中', 16)('才能', 16)('平凡', 16)('向前', 16)('up', 16)('is', 16)('永不', 15)('这样', 15)('熄灭', 15)('再次', 15)('真正', 15)('过人', 15)('阳光', 14)('昨天', 14)('沉默', 14)('不再', 14)('陌生', 14)('彻底', 14)('不敢', 14)('反顾', 14)括号中分别是他们的出现的频率 。仔细分析一下,还是能看出,整个辞藻还是很多大气的,朴树的人还是很理想的 。好吧,其实我也看不出到底主要是什么感情色彩的,或者展现了朴树的什么性格 。是否有现成的一些识别词语的褒义还是贬义或者是积极还是消极的词的库,把上面的所有高频词进行一波判断,然后在得出结果,应该就能看出朴树的歌词的积极和消极了吧(我猜的QAQ) 。这个其实歌曲还是很主观的,每个人的理解不同,还是不能这么理性的分析 。
三个词的分析前200个单词中出现3个字的词语就只有这些个词 。
('now', 70)('and', 25)('为什么', 23)('bad', 20)('the', 20)('can', 20)('way', 19)('向前走', 16)如果只看第一眼,还是能看出朴树的歌曲还是很积极的,但是中文是很博大精深的,很多东西是要根据语境来判断的,这只能说用词还是蛮积极向上的 。
四个词的词语四个词的词语就如下这些了:
('that', 39)('open', 35)('yeah', 19)('灰飞烟灭', 15)('good', 14)('义无反顾', 14)其实我也分析不出来什么,就大概这么个意思吧 。每个人心中都有一个莎士比亚还是哈姆雷特来着,大概就是这个意思 。
爬取思路前奏第一目标本来是打算爬取网易云的朴树的所有歌曲的歌词的,但是,实践告诉我不行,网易云的html是动态加载的,访问的html都是渲染前的,根本加载不出所有的链接或者信息 。是需要浏览器的运行环境,才能动态加载 。但是我写的脚本是直接发的HTTP请求,请求该html页面,并没有浏览器的环境 。
第二目标又转战腾讯,想爬qq音乐的歌曲,但是呢,qq音乐的歌曲的链接信息也是动态操作才能加载的 。是通过鼠标的onmouseover和mouseout事件控制信息的显示 。对于HTTP请求静态资源,我并不能模拟用户的鼠标操作,也没有浏览器的运行环境 。所以爬QQ音乐卒 。
结果就找了阿里家的虾米音乐,可能用户量不大吧,所有的资源一如既往的好爬 。

秒懂生活扩展阅读