其他回答(1)
在火狐上面，按F12，会弹出一个窗口，窗口左上角有一个箭头，点击一下，然后把鼠标移到你想查看的页面内容上面去点一下就是了，你可以看到弹出的窗口内容有所改变，鼠标移动到改变了的源码，鼠标右键点击，你可以选择复制内部html和复制外部html
&&&您需要以后才能回答，未注册用户请先。>> 一个守护进程的Python写的文字你如果你有新的邮件。
一个守护进程的Python写的文字你如果你有新的邮件。
所属分类：
下载地址：
mailToText.py文件大小：4.13 kB
分享有礼！ 》
请点击右侧的分享按钮，把本代码分享到各社交媒体。
通过您的分享链接访问Codeforge，每来2个新的IP，您将获得0.1 积分的奖励。
通过您的分享链接，每成功注册一个用户，该用户在Codeforge上所获得的每1个积分，您都将获得0.2 积分的分成奖励。
MailToText will text you if you have new email in any imap account only when you are away from your computer. Right now it is pretty featureless, except for the above, but hopefully I can write a little plasmoid or something like that with it and it can have a good user interface and maybe even allow you to respond to emails via text message.
Sponsored links
源码文件列表
温馨提示： 点击源码文件名可预览文件内容哦 ^_^
（提交有效评论获得积分）
评论内容不能少于15个字，不要超出160个字。
评价成功，多谢！
下载mailToText.py
CodeForge积分（原CF币）全新升级，功能更强大，使用更便捷，不仅可以用来下载海量源代码马上还可兑换精美小礼品了
您的积分不足，优惠套餐快速获取 30 积分
10积分 / ￥100
30积分 / ￥200原价 ￥300 元
100积分 / ￥500原价 ￥1000 元
订单支付完成后，积分将自动加入到您的账号。以下是优惠期的人民币价格，优惠期过后将恢复美元价格。
支付宝支付宝付款
微信钱包微信付款
更多付款方式：、
您本次下载所消耗的积分将转交上传作者。
同一源码，30天内重复下载，只扣除一次积分。
鲁ICP备号-3 runtime:Elapsed:206.020ms - init:0.1;find:7.5;t:0.6;tags:0.3;related:125.7;comment:0.1; 27.69
登录 CodeForge
还没有CodeForge账号？
Switch to the English version?
^_^"呃 ...
Sorry!这位大神很神秘，未开通博客呢，请浏览一下其他的吧只需一步，快速开始
后使用快捷导航没有帐号？
查看: 258|回复: 7
[已解决]关于浏览器【检查】和【网页源代码】内容不一样的疑惑
累计签到：26 天连续签到：1 天&
马上注册加入鱼C，享用更多服务吧^_^
才可以下载或查看，没有帐号？
初学Python
一直用的是Chrome浏览器去寻找URL和标签
之前我一直发现一个问题：
使用【检查】和查看【网页源代码】显示的内容大多数不一样
页面能够显示的东西用【检查】都能查看到标签，但是【网页源代码】中却找不到相关信息
由于这个问题，我经常都找不到准确的URL
这个是【检查】，其实就是查看页面内容所在的标签
今天我查看了这2中查看网页标签的方式，发现原来【检查】看到的是经过JS加载过的代码，所以信息是比较多的
那么，我的问题是，如果我寻找URL去爬取信息，是不是我能够用【检查】看到我要的信息的那个地址就是我需要的URL?
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：43 天连续签到：1 天&
对头，用检查的话都是处理过的数据，也是能够直接访问的。
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：26 天连续签到：1 天&
对头，用检查的话都是处理过的数据，也是能够直接访问的。
我还是发现了这2种的不同直接影响了我爬数据
因为我将URL作为requests对象去请求之后得到的html网页里面跟源代码一样，也是不包含【检查】里面的信息的，也就是说这些JS或者其他地方加载出来的信息并不能用这个URL去获取
这个问题非常困扰我，因为这个样子我根本没办法找到那个包含了我需要的信息的URL
我试过拿着我要的信息去在JS里面查找，根本没有找到
请问这种情况到底怎么去确认URL
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：232 天连续签到：13 天&
&&&本楼为最佳答案&&&
我还是发现了这2种的不同直接影响了我爬数据
因为我将URL作为requests对象去请求之后得到的html网页里面 ...
确实会有遇到某些url是经过js处理然后再生成的情况（比如某些url的加密解密，id的运算等），这样的情况下你直接看网页源代码是找不到直接的url的，而通过检查是可以看到经过处理的url的。
一般遇到这个情况，除非你了解这些url的生成方式，自行设计算法来破解，不然直接用requests库就显得力不从心了。
当然，遇到这种情况也有一个“曲线救国”的办法，就是借助selenium或者splinter来模拟浏览器访问，既然是模拟浏览器，当然它们都是可以处理js程序的，所以你看到的也是直接可以访问的url。
至于怎么使用selenium或者splinter，网上教程很多，更推荐splinter，使用更方便，当然splinter本身就是用selenium写的，所以要用splinter的话，selenium和splinter都需要安装。
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：26 天连续签到：1 天&
确实会有遇到某些url是经过js处理然后再生成的情况（比如某些url的加密解密，id的运算等），这样的情况下 ...
感谢提醒，我昨天已经查看了这种动态网页爬取的确是需要截取模拟浏览器行为去爬数据的，所以已经开始准备好好学学selenium了
爬虫是个大坑啊，跳进去烧脑
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：232 天连续签到：13 天&
感谢提醒，我昨天已经查看了这种动态网页爬取的确是需要截取模拟浏览器行为去爬数据的，所以已经开始准备 ...
新手的话，推荐学splinter+phantomjs，更容易学，功能和selenium+chrome是一样的。
如果需要深度学习当然selenium是必须的，不过一般爬取和使用的话，splinter足够了。
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：67 天连续签到：1 天&
我也遇到这个问题了，阿里联盟的。按你说的试验一下。遇到楼主很多次了。楼主多大了，学了多久。感觉比我学的快很多啊
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
累计签到：26 天连续签到：1 天&
我也遇到这个问题了，阿里联盟的。按你说的试验一下。遇到楼主很多次了。楼主多大了，学了多久。感觉比我学 ...
淘宝的爬虫我早已经搞定了，需要分析cookie，然后自行构造
加载的信息使用selenium可以爬到，selenium是爬虫神器，但是速度太慢了，一般我只在需要账号密码登陆的爬虫中用，比如登陆QQ和微博这种
1. 如果您的提问得到满意的答案，请务必选择【最佳答案】；2. 如果想鼓励一下楼主或帮助到您的朋友，可以给他们【评分】作为奖励；3. 善用【论坛搜索】功能，那里可能有您想要的答案；4. 粘贴代码请点击编辑框上的
按钮，否则您的代码可能会被“吃掉”！
•••(
Powered by}