Open obfuscated HTML and look into devTools. It is magical how some invisible zero-width characters can change the text for a computer or bot but, it looks same for human eys! This Python script can ...
「Webサイトの情報を自動で集めたい!」 そう思ってスクレイピングを始めたものの、requests で取得した HTMLの壁(大量のタグの羅列) を前に絶望したことはありませんか? 正規表現で <p>.*?</p> のようなパターンを書いて抽出するのは、もうやめましょう。