小白问网页scraping 的一个问题# JobHunting - 待字闺中
o*g
1 楼
如果要scrape 一个网页得到一些信息，如amazon scrape 得到一些产品的信息，
reviews 这些。是必须要有这个网页的api key 吗？
不用他们的api, 也不用他们的api key 能scrape 吗？或者那样做有什么弊端？
reviews 这些。是必须要有这个网页的api key 吗？
不用他们的api, 也不用他们的api key 能scrape 吗？或者那样做有什么弊端？
t*b
2 楼
不用api就要自己模拟行为
理论上任何内容都可以爬 就看模拟得好不好了
理论上任何内容都可以爬 就看模拟得好不好了
c*1
3 楼
google selenium
【在 t****b 的大作中提到】
: 不用api就要自己模拟行为
: 理论上任何内容都可以爬 就看模拟得好不好了
【在 t****b 的大作中提到】
: 不用api就要自己模拟行为
: 理论上任何内容都可以爬 就看模拟得好不好了
相关阅读
急问NSC拿到EAD卡的同学Re: OPT估计没有比我更慢的了吧？Offer选择，纽约or 湾区， 求指点！请教opt开始之后，入职之前，还能拿学校的RA的钱吗美元贬值之后美国平均工资低了好多!谁知道Apple的Principal是哪一个级别？请问multimedia的公司都有。。。？收到的OPT arrpoval很奇怪H1B transfer 求bless!请问二叉搜索树如何找到两个点的最近祖先？大公司还是咨询公司？求建议：想在NJ附近找份工，新近毕业，生物+统计的背景M家问题请教：hiring manager电面完，HR的人再电面，大概要谈什么？一般公司愿意等申请OPT多久啊？在EAD卡上的开始日期之前工作可以吗？请推荐distributed system/map reduce方面的reading/booksH1B transfer/petition和LCA的关系？急求高人指点！！！！都是给offer, 为什么差别也这么大呢？