第５回

私たちのグループは、一部の歌詞を入力すると
該当する曲の「曲名」や「歌詞」が表示される仕組みを作ることはできないかと考えました。
そのためにまず、歌詞検索サイトのリンクからPython上で歌詞を表示させる仕組みを
「スクレイピング」で実現させる方法を試しました。
参考サイトを基にbeautiful soupというライブラリをインポートしスクレイピングを行いました。

サイトをコピペしたコードが以下のようになります。

1. import requests
3. from bs4 import BeautifulSoup
5.  
7. print("歌手名入力")
9. band = input()
11. print("歌名入力")
13. song = input()
15.  
17. def main():
19.     # URL の指定
21.     url = "https://utaten.com/lyric/" +str(band) + "/"+str(song)
23.     # ページの取得
25.     html = requests.get(url).text
27.     # HTML の保存
29.     with open("config.html", mode="w", encoding="utf-8") as file:
31.         file.write(html)
33.  
35.     soup = BeautifulSoup(html, "html.parser")
37.     article = soup.find("article", class_="contentsBox movie_box")
39.  
41.     # タイトルの取得
43.     span = article.find("span", class_="movieTtl_mainTxt")
45.     title = span.text[1:-1]
47.  
49.     # 作者の取得
51.     dl = soup.find("dl", class_="lyricWork")
53.     dds = dl.find_all("dd")
55.     lyricist = dds[0].text
57.     composer = dds[1].text
59.  
61.     # 歌詞の取得
63.     div = soup.find("div", class_="hiragana")
65.     div.find("span", class_="rt").extract()
67.  
69.     print(title)
71.     #print(lyricist, composer)
73.     print(div.get_text())
75.     
77.     #書き込み用ファイルの生成
79.     path_w = "kashi.txt"
81.  
83.     s = div.get_text()
85.  
87.     with open(path_w, mode='a') as f:
89.         f.write(s)
91.  
93. if __name__ == '__main__':
95.     main()

サイト通りに実行してみると、「歌手名」と「歌名」を入力した段階でエラーが発生してしまいました。
その後、道用先生の助けを借りて、参考サイトと現在のうたてん(歌詞検索サイト)のタグが異なっていることが判明しました。
この部分↓

そのため、曲名や作曲者、歌詞を囲んでいるタグの中身を、HTMLのソースコードから探し出し、
それっぽいものをひとつずつ打ち込んでいけば成功するかもしれないとアドバイスをいただきました。
↓この辺から該当しそうなタグを探す


そして実践してみた結果


最終的に歌詞を表示させることはできませんでした。
しかし、課題を通してスクレイピングとは何か、スクレイピングをするために使うライブラリとは何かなど
様々なことを学ぶことができました。
また、今回は課題提出の時間までに間に合わず完成させることができなかったのですが、
他のサイトを参考にしてみたり、タグを片っ端から入れてみたりすれば完成させられるかもしれないので
時間があるときにやってみようと思います。

参考サイト
スクレイピングとは

デザイン演習TOP XBPTOP