ドンが語る！NanmiCoder/MediaCrawlerでSNS情報を手中に収める方法
今日は、皆さんのビジネスをさらに繁栄させるために、とある強力なツール「NanmiCoder/MediaCrawler」について、ドンである私がソフトウェアエンジニアの視点から、その活用法から導入方法、そしてサンプルコードまで、懇切丁寧に、しかし分かりやすく解説していきましょう。
この「NanmiCoder/MediaCrawler」は、まるで私の情報収集部隊のように、様々な中国SNSプラットフォームから公開されているデータを効率的に集めてくることができるツールです。具体的には、以下のような情報を手に入れることができます。
小紅書（RED）
ユーザーの投稿（ノート）やそれに対するコメント
抖音（Douyin/TikTok中国版）
動画やそれに対するコメント
快手（Kuaishou）
動画やそれに対するコメント
Bilibili（B站）
動画やそれに対するコメント
微博（Weibo）
ユーザーの投稿（つぶやき）やそれに対するコメント
百度貼吧（Baidu Tieba）
掲示板の投稿やそれに対するコメント、返信
知乎（Zhihu）
質問、回答、記事やそれに対するコメント
なぜこのような情報が重要なのか、皆さんならお分かりでしょう？ 顧客の声を分析したり、競合の動向を把握したり、最新のトレンドを掴んだり…これらはすべて、ビジネスの成功には不可欠な情報です。
このツールは、我々エンジニアにとってまさに宝の山です。
手作業で一つずつ投稿やコメントをチェックするのは、骨の折れる作業です。しかし、このMediaCrawlerを使えば、特定のキーワードやユーザーに関連するデータを自動で大量に収集できます。例えば、
自社製品に関する口コミをリアルタイムで監視し、顧客の声を素早くフィードアップする。
新しいファッションやガジェットのトレンドが、どのプラットフォームで、どのように広まっているかを分析する。
競合他社の商品に対するユーザーの反応を詳細に調査し、自社の戦略に活かす。
これにより、人間では追いつかない規模の情報収集が可能になり、よりデータに基づいた意思決定ができるようになります。
コンテンツマーケティングに力を入れている企業であれば、どのようなコンテンツがユーザーに響くのかを知ることは非常に重要です。
人気のある動画のコメントから、ユーザーがどのような点に興味を持っているのかを把握し、次の動画コンテンツのヒントにする。
特定のキャンペーンに対するユーザーの反応を数値化し、キャンペーンの効果を客観的に評価する。
エンゲージメントの高い投稿の共通点を分析し、自社のSNS運用戦略を改善する。
これにより、効果的で魅力的なコンテンツを生み出すための洞察を得られます。
ユーザーからの生の声は、製品やサービスの改善に直結します。
製品のレビューや不満点を自動で収集し、開発チームにフィードバックする。
ユーザーがどのような機能を求めているのか、具体的なコメントからニーズを洗い出す。
顧客の声を迅速かつ網羅的に収集することで、よりユーザーに寄り添った製品開発が可能になります。
さて、この強力なツールを皆さんの手に収めるための具体的な手順です。恐れることはありません、私が手取り足取り教えましょう。
まず、Python 3.8以上がインストールされていることを確認してください。Pythonは、このツールの心臓部です。
# ターミナルを開いて確認
python3 --version
もしインストールされていなければ、Python公式サイトからダウンロードしてインストールしてください。
Gitリポジトリのクローン まずは、このMediaCrawlerを皆さんのPCに連れてきます。
git clone https://github.com/NanmiCoder/MediaCrawler.git
cd MediaCrawler
依存関係のインストール このツールがスムーズに動くために必要な部品（ライブラリ）を揃えます。
pip3 install -r requirements.txt
これで基本的な準備は完了です。
それでは、実際にこのツールを動かしてみましょう。例として、小紅書（RED）から特定のノートのコメントを収集する方法を示します。
このツールは設定ファイル（config.ini）を使って動きます。まずは、config.iniを編集する必要があります。
config.iniのコピー
config_example.iniをコピーしてconfig.iniとして保存します。
cp config_example.ini config.ini
config.iniの編集
config.iniを開き、以下のセクションを編集します。
[Red]
note_id = "ここに取得したいノートIDを入力" # 例: 66a3d1b60000000000000000
# comments_count = 100 # 取得したいコメント数（任意）
ノートIDの見つけ方
小紅書のノートのURLを見ると、https://www.xiaohongshu.com/explore/66a3d1b60000000000000000 のように数字とアルファベットが混じった部分があります。これがノートIDです。
実行 ターミナルで以下のコマンドを実行します。
python3 main.py red_comments
これで、指定したノートのコメントが取得され、通常はoutputディレクトリにCSVファイルとして保存されます。
他のプラットフォームについても、基本的には同様の手順です。
config.iniの該当するセクション（[Douyin], [Kuaishou], [Bilibili], [Weibo], [Tieba], [Zhihu]など）を編集し、必要なIDやキーワードを設定します。
その後、対応するコマンドを実行します（例
python3 main.py douyin_videos、python3 main.py weibo_postsなど）。
具体的なコマンドや設定項目は、NanmiCoder/MediaCrawlerのGitHubリポジトリを参照するのが一番確実です。ドキュメントには、各プラットフォームごとの詳細な使用方法が記載されています。
ファミリーの皆さん、忘れてはならない重要なことがあります。
利用規約の遵守
各SNSプラットフォームには、データの収集に関する利用規約が存在します。これを遵守し、倫理的に正しい方法で利用することが、何よりも重要です。スクレイピング行為自体が規約違反となる場合や、サーバーに過度な負荷をかける行為は、絶対にしてはなりません。あくまで公開されている情報のみを、適切な範囲で利用してください。
アカウント凍結のリスク
大量のリクエストを短時間に行うと、アカウントが凍結されるリスクがあります。適切な間隔を空けたり、プロキシを使用したりするなど、対策を講じる必要がある場合があります。
データの鮮度と信頼性
収集したデータは、あくまで収集時点のものであり、情報の鮮度や完全性を常に保証するものではありません。また、SNS上の情報は主観的な意見も多く含まれるため、批判的な視点で分析することが不可欠です。
このツールは強力ですが、その力を悪用せず、あくまで皆さんのビジネスをより良い方向に導くために活用してください。