如何获取网站数据

① 如何获取并分析一个网站的相关信息

随着很多网站的做大做细，网站数据分析变得更为重要。通过网站数据分析可以充分了解一个网站的运作情况，并加以改进。这些数据会告诉你，你的网站流量是否有效？流量在哪里流失？目标受众是否精准？如何改善网站产品格局和网站运营？等等一系列问题。但在这之前的第一步就是需要获取网站的数据。本文主要介绍如何获取网站数据以及需要获取哪些关键数据。
1，网站内部数据
网站内部数据是网站最容易获取到的数据，它们往往就存放在网站的文件系统或数据库中，也是与网站本身最为密切相关的数据，是网站分析最常见的数据来源，我们需要好好利用这部分数据。
服务器日志
网站分析不再局限于网页浏览的PV、UV，转化流失等，基于Events的分析将会越来越普遍，将会更多的关注用户在接受网站服务的整个流程的情况。
随着网站应用的不断扩张，以及前端技术的不断升华。网站日志不再局限于点击流的日志数据，如果你的网站提供上传下载、视频音乐、网页游戏等服务，那么很明显，你的网站服务器产生的绝不仅有用户浏览点击网页的日志，也不只有标准的apache日志格式日志，更多的W3C、JSON或自定义格式的输出日志也给网站分析提供了新的方向。
网站分析工具
通过网站分析工具获得数据是一个最为简便快捷的方式，通过网站分析工具获得的数据一般都已经经过特殊计算，较为规范，如PV、UV、Exit Rate、Bounce Rate等，再配上一些趋势图或比例图，通过细分、排序等方法让结果更为直观。
但通过网站分析工具得到数据也远不止这些，上面的这些数据也一样可以通过统计网站日志获得，但网站分析工具的优势在于其能通过一些嵌入页面的JS代码获得一些有趣的结果，如一些网站分析工具提供的点击热图，甚至鼠标移动轨迹图。这些分析结果往往对网站优化和用户行为分析更为有效。
数据库数据
对于一般的网站来说，存放于数据库中的数据可以大致分为3个部分：
网站用户信息，一般提供注册服务的网站都会将用户的注册账号和填写的基本信息存放在数据库里面；
网站应用或产品数据，就像电子商务的商品详细信息，如商品信息会包含商品名称、特征描述、产品属性等；
用户在应用服务或购买产品时产生的数据，最简单的例子就是电商网站的用户购买(购买单、报价单、询盘)数据——购买时间、购买的用户、购买的商品、购买数量、支付的金额等。
当然，这一部分数据的具体形式会根据网站的运营模式存在较大差异，一些业务范围很广，提供多样服务的网站其数据库中数据的组合会相当复杂。
其它
其它一切网站运营过程中产生的数据，有可能是用户创造，也有可能是网站内部创造，其中有一大部分我们可以称其为“线下数据”。
2，外部数据
网站分析除了可以从网站内部获取数据以外，通过互联网这个开放的环境，从网站外部获取一些数据可以让分析的结果更加全面。
互联网环境数据
可以去一些网络数据分析平台查一下互联网中顶级网站的访问量趋势。
竞争对手数据
时刻关注竞争对手的情况可以让你的网站不至于在竞争中落伍。除了一些网站数据查询平台以外，直接从竞争对手网站上获取数据也是另外一条有效的途径，也有网站会出于某些原因（信息透明、数据展示等）将自己的部分统计信息展现在网站上，看看那些数据对于掌握你的竞争对手的情况是否有帮助。
在获取上述几类数据的同时，也许我们还可以从其他方面获取一些更为丰富的数据。
合作伙伴数据
如果你有合作的网站或者你经营的是一个电子商务网站，也许你会有相关的产品提供商、物流供应商等合作伙伴，看看他们能为你提供些什么数据。
用户数据
如果你的网站已经小有名气，那么尝试在搜索引擎看看用户是怎么评价你的网站，或者通过SNS网站等看看用户正在上面发表什么关于你的网站的言论。
当然通过用户调研获取数据是另外一个不错的途径，通过网站上的调查问卷或者线下的用户回访，电话、IM调查，可用性实验测试等方式可以获取一些用户对网站的直观感受和真实评价，这些数据往往是十分有价值的，也是普通的网站分析工具所获取不到的。

在分析网站的外部数据的时候，需要注意的是不要过于相信数据，外部数据相比内部数据不确定性会比较高。网站内部数据即使也不准确，但我们至少能知道数据的误差大概会有多大，是什么原因造成了数据存在误差。而外部数据一般都是有其他网站或机构公布的，每个公司，无论是数据平台、咨询公司还是合作伙伴都可能会为了某些利益而使其公布的数据更加可信或更具一定的偏向性，所以我们在分析外部数据是需要更加严格的验证和深入的分析。而对于用户调研中获取的数据，我们一般会通过统计学的方法检验数据是否可以被接受，或者是否满足一定的置信区间，这是进行数据分析前必须完成的一步。

② Excel怎么从提取网页数据

• 单击【数据】--【获取外部数据】--【自网站】，单击进入。

  

③ 请教高手，如何得到这个网页上的数据

根据你的描述：

用httpwatch跟踪一下就知道，该网站用Ajax轮询一个URL，从这个URL中可以获取XML数据，并填充到页面中。你可以直接get一下这个URL即可。

仅供参考，可以将问题描述更详细些，一起讨论。

④ 怎么从网站上面获取数据

IE浏览器有OLE对象，可以通过这个功能，提取所有元素的信息，还有就是有些软件应该可以。。。
如果想白手起家，那就直接正则匹配文本，写一个提取元素的小程序，也行。。。

⑤ 网站分析的数据来源

网站分析的数据来源

Avinash Kaushik在他的《Web Analytics》一书中将数据的来源分为4部分：点击流数据（Clickstream）、运营数据（Outcomes）、调研数据（Research/Qualitative）和竞争对手数据（Competitive Data）。点击流数据主要指的是用户浏览网站时产生的数据；Outcomes我更习惯叫做运营数据，主要指用户在网站中应用服务或者购买产品时记录下来的数据；调研数据主要是网站通过某些用户调研手段（线上问卷或者线下调研）获取的一些定性数据；Competitive Data直译为竞争对手数据可能不太合适，因为根据Avinash Kaushik的阐述，更像是跟网站有业务关系或竞争关系或存在某种利益影响的一切网站的可能的数据来源。
在获取上述几类数据的同时，也许我们还可以从其他方面获取一些更为丰富的数据。下面是我对网站分析数据获取途径的整理：
网站内部数据
网站内部数据是网站最容易获取到的数据，它们往往就存放在网站的文件系统或数据库中，也是与网站本身最为密切相关的数据，是网站分析最常见的数据来源，我们需要好好利用这部分数据。
服务器日志
随着网站应用的不断扩张，网站日志不再局限于点击流的日志数据，如果你的网站提供上传下载、视频音乐、网页游戏等服务，那么很明显，你的网站服务器产生的绝不仅有用户浏览点击网页的日志，也不只有标准的apache日志格式日志，更多的W3C、JSON或自定义格式的输出日志也给网站分析提供了新的方向。
网站分析不再局限于网页浏览的PV、UV，转化流失等，基于事件（Events）的分析将会越来越普遍，将会更多的关注用户在接受网站服务的整个流程的情况：上传下载是否完成，速度如何；用户是否观看的整部视频，视频的加载情况；及用户在玩网页游戏时的操作和体验分析等。Google Analytics已经支持了基于事件的分析——Event Tracking，通过JS的动作响应获取数据，但是还存在着一定的局限性。
网站分析工具
当然，通过网站分析工具获得数据是一个最为简便快捷的方式，从原先的基于网站日志的AWStats、webalizer，到目前非常流行的基于JS Tags的Google Analytics、Omniture的SiteCatalyst，及JS和网站日志通吃的WebTrends。通过网站分析工具获得的数据一般都已经经过特殊计算，较为规范，如PV、UV、Exit Rate、Bounce Rate等，再配上一些趋势图或比例图，通过细分、排序等方法让结果更为直观。
但通过网站分析工具得到数据也不远只这些，上面的这些数据也一样可以通过统计网站日志获得，但网站分析工具的优势在于其能通过一些嵌入页面的JS代码获得一些有趣的结果，如Google Analytics上的Overlay或者也叫Click Density——网站点击密度分布，及一些其它的网站分析工具提供的点击热图，甚至鼠标移动轨迹图。这些分析结果往往对网站优化和用户行为分析更为有效。
数据库数据
对于一般的网站来说，存放于数据库中的数据可以大致分为3个部分：
网站用户信息，一般提供注册服务的网站都会将用户的注册账号和填写的基本信息存放在数据库里面；
网站应用或产品数据，就像电子商务的商品详细信息或者博客的文章信息，如商品信息会包含商品名称、库存数量、价格、特征描述等；
用户在应用服务或购买产品时产生的数据，最简单的例子就是博客上用户的评论和电子商务网站的用户购买数据，购买时间、购买的用户、购买的商品、购买数量、支付的金额等。
当然，这一部分数据的具体形式会根据网站的运营模式存在较大差异，一些业务范围很广，提供多样服务的网站其数据库中数据的组合会相当复杂。
其它
其它一切网站运营过程中产生的数据，有可能是用户创造，也有可能是网站内部创造，其中有一大部分我们可以称其为“线下数据（Offline Data）”。如用户的反馈和抱怨，可能通过网站的交流论坛，也有可能通过网站时公布的客服电话、即时通讯工具等，如果你相信“客户中心论”，那么显然对于这些数据的分析必不可少；另外一部分来源就是网站开展的线下活动，促销或推广，衡量它们开展的效果或投入产出，以便于之后更好地开展类似的线下推广。
外部数据
网站分析除了可以从网站内部获取数据以外，通过互联网这个开放的环境，从网站外部捕获一些数据可以让分析的结果更加全面。
互联网环境数据
即使你的网站只是一个很小的网站，但如果想让你的网站变得更好，或者不至于落后于互联网的前进脚步，那么建议你关注一下互联网的发展趋势。可以上Alexa查一下互联网中顶级网站的访问量趋势；看看comScore发布的数据或者199IT–中国互联网数据中心网站上的各种数据分析和研究资料；如果经营电子商务网站，淘宝数据中心也许会让你感兴趣。
竞争对手数据
时刻关注竞争对手的情况可以让你的网站不至于在竞争中落伍。除了在Alexa及一些其他的网站数据查询平台以外，直接从竞争对手网站上获取数据也是另外一条有效的途径，一般网站会出于某些原因（信息透明、数据展示等）将自己的部分统计信息展现在网站上，看看那些数据对于掌握你的竞争对手的情况是否有帮助。
合作伙伴数据
如果你有合作的网站或者你经营的是一个电子商务网站，也许你会有相关的产品提供商、物流供应商等合作伙伴，看看他们能为你提供些什么数据。
用户数据
尝试跟踪用户的脚步去看看他们是怎么评价你的网站的。如果你的网站已经小有名气，那么尝试在搜索引擎看看用户是怎么评价你的网站，或者通过Twitter、新浪微博等看看用户正在上面发表什么关于你的网站的言论。
当然通过用户调研获取数据是另外一个不错的途径，通过网站上的调查问卷或者线下的用户回访，电话、IM调查，可用性实验测试等方式可以获取一些用户对网站的直观感受和真实评价，这些数据往往是十分有价值的，也是普通的网站分析工具所获取不到的。
在分析网站的外部数据的时候，需要注意的是不要过于相信数据，外部数据相比内部数据不确定性会比较高。网站内部数据即使也不准确，但我们至少能知道数据的误差大概会有多大，是什么原因造成了数据存在误差。而外部数据一般都是有其他网站或机构公布的，每个公司，无论是数据平台、咨询公司还是合作伙伴都可能会为了某些利益而使其公布的数据更加可信或更具一定的偏向性，所以我们在分析外部数据是需要更加严格的验证和深入的分析。而对于用户调研中获取的数据，我们一般会通过统计学的方法检验数据是否可以被接受，或者是否满足一定的置信区间，这是进行数据分析前必须完成的一步。

⑥ 如何获取网站后台数据

网站环境不同，不同程序有不同的数据库配置位置以discuz为例，其他的随机应变：
1.Discuz论坛的数据库在程序中有设置文件对应查询账号密码，目录位置：
/config/config_global.php
/uc_server/data/config.inc.php
/config/config_ucenter.php
文件都含有Discuz论坛数据库的登录账号密码信息，可以参考查询数据库信息。

网站本身的数据库是和程序分开的，大部分主机都是储存在两个空间。小型虚拟主机，没有权限查看数据库文件，但是会提供在线管理的工具，一般在空间后台有提供链接。

云主机，快云VPS，云服务器，以及独立主机，都有远程服务器管理权限的，直接登录远程，就可以查看数据库位置。

目前的情况看，快云VPS都自带云数据库，也有管理平台，可以后台直接打开，登录管理数据库。

⑦ 怎么样可以抓取到一个网站的数据

有很多种方法啊，例如自己编写一段python爬虫语言，不过这个方法就需要你会编写代码了，或者你也可以使用网上的那些采集器，这些采集器都可以采集网站的数据。不过在选择采集器的时候你也要甄别一下，有的采集器不支持可视化采集，对于没什么计算机基础的人来说，没有可视化采集的采集器就没什么意义了，所以你可以试试前嗅的采集器，这个是可以支持可视化采集的。

⑧ 如何简单获取目标网站的数据库

关于"%5c"暴库大法：
这种方法被认为是暴库绝招，很是流行了一阵（随着知道的人多了，防备也加强了，没以前那么有效了）。这种方法，简单点说就是，打开网页时，把网址址中的"/"换成"%5c"，然后提交，就可以暴出数据库的路径。
实际上，并不是所有网址都有效，需要"asp?id="这样的网页地址（表示有调用数据库的行为），如果你确认这个网页有调用数据库的，后面不是这样的也可以，比如chklogin.asp等也可以。（当然，也还有其它条件，后面再谈。）

⑨ 怎样提取某个网页的数据

用WebRequest方法获取网站的数据：
private string GetStringByUrl(string strUrl)
{
WebRequest wrt = WebRequest.Create(strUrl);
WebResponse wrse = wrt.GetResponse();
Stream strM = wrse.GetResponseStream();
StreamReader SR = new StreamReader(strM, Encoding.GetEncoding("gb2312"));
string strallstrm = SR.ReadToEnd();
return strallstrm;
}

然后自己写方法处理里面的数据来获取你想要的值

⑩ 如何获取网站后台数据

只要不是特别烂的个人搭建的网站，很难获得后台数据的。

一般思路：

1. 尝试开放端口对应的应用服务的弱口令

2. sql注入后获得权限

3. 远程ssh过去

4. 获得数据库

5. 清理痕迹

仅仅是思路，没有先后顺序，不是为了黑什么，但是脆弱的网站一般这样下来就可以搞下了，所以防御也可以按这个思路去加强。