身近な日常をやんわりデータサイエンスしてみよう

身近な情報や現象からデータを取り出して解析してみます。

中島みゆきと松任谷由実の歌詞を言葉の出現頻度と高頻出ワードの類似ワードで比較してみる

自然言語処理、テキストマイニングに関するプログラムのライブラリが多く公開されてきて、PythonやRなどによるプログラミングのスキルさえ習得すれば、大量の文章から言葉と言葉の関係、文章と文章の関係などを誰でも容易く分析することができるようになって…

カイトが舞うのは嵐の真っただ中?、それとも米津玄師ワールドとの際か? テキストマイニングでビジュアル化

2014年に公開されたdoc2vecや、最近では2018年に公開されたBERTなどの自然言語解析のプログラムライブラリの登場で、大量の文章や歌詞の解析が誰でもできるようになりました。 以前、嵐の歌詞と米津さんの歌詞の違いを各単語の出現頻度によるビジュアル化を…

嵐に愛と感謝を込めて

嵐の応援うちわ 妻が大ファンの嵐は2021年から活動を休止します。 そこで、下図のように「嵐」の文字からマスクシェイプを作成し、ワードクラウドというプログラムを用いて、そこに世界中の言語で"愛"または"感謝"のワードを詰め込んでみました。実際は嵐の…

2020年期待の食のヒットの種 - シュクメルリ -

鶏モモ肉を細かく切りすぎたシュクメルリ 昨年の12月から松屋の一部の店舗で販売して、話題化したのがシュクメルリ。ジョージア料理だそうです。 グーグルトレンドで「バスク チーズケーキ」と比べて関心の高さを比較してみましょう。松屋で2月限定で全国発…

2020年期待の食のヒットの種 -コーンフレークやないか! ハッシュドポテト-

餡ボールとコーンフレーク・ハッシュドポテト 昨年M-1グランプリを制した「ミルクボーイ」のネタで取り上げられ、現在も大ブレイク中の「コーンフレーク」。「コーンフレークやないか!」レシピがブレイクしないか注目しています。かつやが3月6日からコーンフ…

2020年期待の食のヒットの種 - チーズボール -

チーズボール 主にグーグルニュースとグーグルトレンドを用いて、食のヒットの種を探索しています。 「チーズボール」はクックパッドの2020年トレンド予測に取り上げられていて、注目しました。 cookpad.com グーグルトレンドで確認してみると、確かにトレン…

食のヒットの種を見つけだそう! - 2019年10月はスイートポテトパイ

POGGのスイートポテトパイ グーグルニュースとグーグルトレンドのデータを組み合わせて、"食のヒットの種"を見つけるシステムを検討しています。 まだ大きなヒット商品が生まれる、あるいは大きなトレンドに育っていない前に、個々のニュースに対してそれを…

嵐と米津玄師の歌詞の違いを自然言語解析してみた

我が家は嵐とSMAP、米津玄師さんのファンです。 2020年一杯で休養に入る嵐のこれまでの歌詞の特徴をデータサイエンスして、米津さんの歌詞との違いを解析してみました。 今は、日本語の文章を単語に分ける形態素解析のプログラムライブラリ(mecab, janome な…

ヨーロッパ各国の食品消費量データの主成分分析結果をヨーロッパ地図上で分かり易く表現してみた!?

主成分分析は変数の多いデータ全体の主な差異の構造を次元縮減して可視化するのに優れた多変量解析方法です。主成分分析の結果は、合成された主成分に対するデータサンプルのポジションをスコアプロットで、主成分に対する変数の重みづけ(関係)をローディ…

食のヒットの種を見つけだそう! (3) - 2019年9月はタピオカティーに続く台湾発の食 、特に「チーズティー」

チーズティー グーグルニュースとグーグルトレンドのデータを組み合わせて、"食のヒットの種"を見つけるシステムを検討しています。 まだ大きなヒット商品が生まれる、あるいは大きなトレンドに育っていない前に、個々のニュースに対してそれを見た消費者の…

食のヒットの種を見つけだそう! (2)   - 2019年6月~8月は「完全食」と「天気の子レシピ」-

グーグルニュースとグーグルトレンドのデータを組み合わせて、"食のヒットの種"を見つけるシステムを検討しています。 前記事では、今年3月末に発売されたローソンの大ヒット「バスチー」のヒットの兆候を前年2018年5月~8月に「バスクチーズケーキ」に関す…

データサイエンスで食のヒットの種を見つけだそう! (1) - ローソンのバスチー ヒットの秘密 -

このブログでは、身近にある様々な情報や現象にデータサイエンスをトライしていきます。 ここ数年、主に「食」のデータサイエンスに取り組んでいます。 バスチー 食のヒットの種を見つけよう! これからどんな商品がヒットするのか、次にくるトレンドは何か、…