2022/12/thematic-cartography/

[utterances-bot]

探索美国的失业率 - Xiangyun Huang | 黄湘云

https://xiangyun.rbind.io/2022/12/thematic-cartography/

[earfanfan]

摸鱼摸到你这，吐点槽。

1.太多的代码和图表似乎阻断了文字阅读的流畅度。
2.图太多了，探索和分析像是没做完。

[XiangyunHuang]

隐藏成交价，我感觉就是准备两头割韭菜，一边是买房的，一边是卖房的。链家（现在的贝壳找房）的初衷是打破信息差，搞真房源，只赚服务费，现在国家搞信息不透明，完全反着来。买房的看不到真实信息本来就吃亏了。后来发生的事实也证明如此，什么中介 PUA 房东啦。

[XiangyunHuang]

也是想着抓链家的数据，结果突破不了

我的爬虫术也就够对付对付静态网页，链家二手房网站这种复杂的怎么爬，我还挺好奇的。

[XiangyunHuang]

我想起来一篇文章 https://cosx.org/2017/08/web-scrap-tools/ 你是根据这篇文章爬的链家数据吗？

[earfanfan]

我是根据这篇文章学了一些抓取静态网页的东西，不过我搜集链家数据是这么干的：按照链接的分区展开，比如武汉分为江岸区、江汉区等，这样的话一个区有好多页，一页有30个小区的信息，我手动把每一页存下来，最后用抓静态网页的方式提取数据。

链家的反爬虫技术提升很多，我找了很多以前的博客，也让 AI 去分析，发现我现在也是突破不了。

[XiangyunHuang]

那也确实不容易。