如何獲取網站數據

① 如何獲取並分析一個網站的相關信息

隨著很多網站的做大做細，網站數據分析變得更為重要。通過網站數據分析可以充分了解一個網站的運作情況，並加以改進。這些數據會告訴你，你的網站流量是否有效？流量在哪裡流失？目標受眾是否精準？如何改善網站產品格局和網站運營？等等一系列問題。但在這之前的第一步就是需要獲取網站的數據。本文主要介紹如何獲取網站數據以及需要獲取哪些關鍵數據。
1，網站內部數據
網站內部數據是網站最容易獲取到的數據，它們往往就存放在網站的文件系統或資料庫中，也是與網站本身最為密切相關的數據，是網站分析最常見的數據來源，我們需要好好利用這部分數據。
伺服器日誌
網站分析不再局限於網頁瀏覽的PV、UV，轉化流失等，基於Events的分析將會越來越普遍，將會更多的關注用戶在接受網站服務的整個流程的情況。
隨著網站應用的不斷擴張，以及前端技術的不斷升華。網站日誌不再局限於點擊流的日誌數據，如果你的網站提供上傳下載、視頻音樂、網頁游戲等服務，那麼很明顯，你的網站伺服器產生的絕不僅有用戶瀏覽點擊網頁的日誌，也不只有標準的apache日誌格式日誌，更多的W3C、JSON或自定義格式的輸出日誌也給網站分析提供了新的方向。
網站分析工具
通過網站分析工具獲得數據是一個最為簡便快捷的方式，通過網站分析工具獲得的數據一般都已經經過特殊計算，較為規范，如PV、UV、Exit Rate、Bounce Rate等，再配上一些趨勢圖或比例圖，通過細分、排序等方法讓結果更為直觀。
但通過網站分析工具得到數據也遠不止這些，上面的這些數據也一樣可以通過統計網站日誌獲得，但網站分析工具的優勢在於其能通過一些嵌入頁面的JS代碼獲得一些有趣的結果，如一些網站分析工具提供的點擊熱圖，甚至滑鼠移動軌跡圖。這些分析結果往往對網站優化和用戶行為分析更為有效。
資料庫數據
對於一般的網站來說，存放於資料庫中的數據可以大致分為3個部分：
網站用戶信息，一般提供注冊服務的網站都會將用戶的注冊賬號和填寫的基本信息存放在資料庫裡面；
網站應用或產品數據，就像電子商務的商品詳細信息，如商品信息會包含商品名稱、特徵描述、產品屬性等；
用戶在應用服務或購買產品時產生的數據，最簡單的例子就是電商網站的用戶購買(購買單、報價單、詢盤)數據——購買時間、購買的用戶、購買的商品、購買數量、支付的金額等。
當然，這一部分數據的具體形式會根據網站的運營模式存在較大差異，一些業務范圍很廣，提供多樣服務的網站其資料庫中數據的組合會相當復雜。
其它
其它一切網站運營過程中產生的數據，有可能是用戶創造，也有可能是網站內部創造，其中有一大部分我們可以稱其為「線下數據」。
2，外部數據
網站分析除了可以從網站內部獲取數據以外，通過互聯網這個開放的環境，從網站外部獲取一些數據可以讓分析的結果更加全面。
互聯網環境數據
可以去一些網路數據分析平台查一下互聯網中頂級網站的訪問量趨勢。
競爭對手數據
時刻關注競爭對手的情況可以讓你的網站不至於在競爭中落伍。除了一些網站數據查詢平台以外，直接從競爭對手網站上獲取數據也是另外一條有效的途徑，也有網站會出於某些原因（信息透明、數據展示等）將自己的部分統計信息展現在網站上，看看那些數據對於掌握你的競爭對手的情況是否有幫助。
在獲取上述幾類數據的同時，也許我們還可以從其他方面獲取一些更為豐富的數據。
合作夥伴數據
如果你有合作的網站或者你經營的是一個電子商務網站，也許你會有相關的產品提供商、物流供應商等合作夥伴，看看他們能為你提供些什麼數據。
用戶數據
如果你的網站已經小有名氣，那麼嘗試在搜索引擎看看用戶是怎麼評價你的網站，或者通過SNS網站等看看用戶正在上面發表什麼關於你的網站的言論。
當然通過用戶調研獲取數據是另外一個不錯的途徑，通過網站上的調查問卷或者線下的用戶回訪，電話、IM調查，可用性實驗測試等方式可以獲取一些用戶對網站的直觀感受和真實評價，這些數據往往是十分有價值的，也是普通的網站分析工具所獲取不到的。

在分析網站的外部數據的時候，需要注意的是不要過於相信數據，外部數據相比內部數據不確定性會比較高。網站內部數據即使也不準確，但我們至少能知道數據的誤差大概會有多大，是什麼原因造成了數據存在誤差。而外部數據一般都是有其他網站或機構公布的，每個公司，無論是數據平台、咨詢公司還是合作夥伴都可能會為了某些利益而使其公布的數據更加可信或更具一定的偏向性，所以我們在分析外部數據是需要更加嚴格的驗證和深入的分析。而對於用戶調研中獲取的數據，我們一般會通過統計學的方法檢驗數據是否可以被接受，或者是否滿足一定的置信區間，這是進行數據分析前必須完成的一步。

② Excel怎麼從提取網頁數據

• 單擊【數據】--【獲取外部數據】--【自網站】，單擊進入。

  

③ 請教高手，如何得到這個網頁上的數據

根據你的描述：

用httpwatch跟蹤一下就知道，該網站用Ajax輪詢一個URL，從這個URL中可以獲取XML數據，並填充到頁面中。你可以直接get一下這個URL即可。

僅供參考，可以將問題描述更詳細些，一起討論。

④ 怎麼從網站上面獲取數據

IE瀏覽器有OLE對象，可以通過這個功能，提取所有元素的信息，還有就是有些軟體應該可以。。。
如果想白手起家，那就直接正則匹配文本，寫一個提取元素的小程序，也行。。。

⑤ 網站分析的數據來源

網站分析的數據來源

Avinash Kaushik在他的《Web Analytics》一書中將數據的來源分為4部分：點擊流數據（Clickstream）、運營數據（Outcomes）、調研數據（Research/Qualitative）和競爭對手數據（Competitive Data）。點擊流數據主要指的是用戶瀏覽網站時產生的數據；Outcomes我更習慣叫做運營數據，主要指用戶在網站中應用服務或者購買產品時記錄下來的數據；調研數據主要是網站通過某些用戶調研手段（線上問卷或者線下調研）獲取的一些定性數據；Competitive Data直譯為競爭對手數據可能不太合適，因為根據Avinash Kaushik的闡述，更像是跟網站有業務關系或競爭關系或存在某種利益影響的一切網站的可能的數據來源。
在獲取上述幾類數據的同時，也許我們還可以從其他方面獲取一些更為豐富的數據。下面是我對網站分析數據獲取途徑的整理：
網站內部數據
網站內部數據是網站最容易獲取到的數據，它們往往就存放在網站的文件系統或資料庫中，也是與網站本身最為密切相關的數據，是網站分析最常見的數據來源，我們需要好好利用這部分數據。
伺服器日誌
隨著網站應用的不斷擴張，網站日誌不再局限於點擊流的日誌數據，如果你的網站提供上傳下載、視頻音樂、網頁游戲等服務，那麼很明顯，你的網站伺服器產生的絕不僅有用戶瀏覽點擊網頁的日誌，也不只有標準的apache日誌格式日誌，更多的W3C、JSON或自定義格式的輸出日誌也給網站分析提供了新的方向。
網站分析不再局限於網頁瀏覽的PV、UV，轉化流失等，基於事件（Events）的分析將會越來越普遍，將會更多的關注用戶在接受網站服務的整個流程的情況：上傳下載是否完成，速度如何；用戶是否觀看的整部視頻，視頻的載入情況；及用戶在玩網頁游戲時的操作和體驗分析等。Google Analytics已經支持了基於事件的分析——Event Tracking，通過JS的動作響應獲取數據，但是還存在著一定的局限性。
網站分析工具
當然，通過網站分析工具獲得數據是一個最為簡便快捷的方式，從原先的基於網站日誌的AWStats、webalizer，到目前非常流行的基於JS Tags的Google Analytics、Omniture的SiteCatalyst，及JS和網站日誌通吃的WebTrends。通過網站分析工具獲得的數據一般都已經經過特殊計算，較為規范，如PV、UV、Exit Rate、Bounce Rate等，再配上一些趨勢圖或比例圖，通過細分、排序等方法讓結果更為直觀。
但通過網站分析工具得到數據也不遠只這些，上面的這些數據也一樣可以通過統計網站日誌獲得，但網站分析工具的優勢在於其能通過一些嵌入頁面的JS代碼獲得一些有趣的結果，如Google Analytics上的Overlay或者也叫Click Density——網站點擊密度分布，及一些其它的網站分析工具提供的點擊熱圖，甚至滑鼠移動軌跡圖。這些分析結果往往對網站優化和用戶行為分析更為有效。
資料庫數據
對於一般的網站來說，存放於資料庫中的數據可以大致分為3個部分：
網站用戶信息，一般提供注冊服務的網站都會將用戶的注冊賬號和填寫的基本信息存放在資料庫裡面；
網站應用或產品數據，就像電子商務的商品詳細信息或者博客的文章信息，如商品信息會包含商品名稱、庫存數量、價格、特徵描述等；
用戶在應用服務或購買產品時產生的數據，最簡單的例子就是博客上用戶的評論和電子商務網站的用戶購買數據，購買時間、購買的用戶、購買的商品、購買數量、支付的金額等。
當然，這一部分數據的具體形式會根據網站的運營模式存在較大差異，一些業務范圍很廣，提供多樣服務的網站其資料庫中數據的組合會相當復雜。
其它
其它一切網站運營過程中產生的數據，有可能是用戶創造，也有可能是網站內部創造，其中有一大部分我們可以稱其為「線下數據（Offline Data）」。如用戶的反饋和抱怨，可能通過網站的交流論壇，也有可能通過網站時公布的客服電話、即時通訊工具等，如果你相信「客戶中心論」，那麼顯然對於這些數據的分析必不可少；另外一部分來源就是網站開展的線下活動，促銷或推廣，衡量它們開展的效果或投入產出，以便於之後更好地開展類似的線下推廣。
外部數據
網站分析除了可以從網站內部獲取數據以外，通過互聯網這個開放的環境，從網站外部捕獲一些數據可以讓分析的結果更加全面。
互聯網環境數據
即使你的網站只是一個很小的網站，但如果想讓你的網站變得更好，或者不至於落後於互聯網的前進腳步，那麼建議你關注一下互聯網的發展趨勢。可以上Alexa查一下互聯網中頂級網站的訪問量趨勢；看看comScore發布的數據或者199IT–中國互聯網數據中心網站上的各種數據分析和研究資料；如果經營電子商務網站，淘寶數據中心也許會讓你感興趣。
競爭對手數據
時刻關注競爭對手的情況可以讓你的網站不至於在競爭中落伍。除了在Alexa及一些其他的網站數據查詢平台以外，直接從競爭對手網站上獲取數據也是另外一條有效的途徑，一般網站會出於某些原因（信息透明、數據展示等）將自己的部分統計信息展現在網站上，看看那些數據對於掌握你的競爭對手的情況是否有幫助。
合作夥伴數據
如果你有合作的網站或者你經營的是一個電子商務網站，也許你會有相關的產品提供商、物流供應商等合作夥伴，看看他們能為你提供些什麼數據。
用戶數據
嘗試跟蹤用戶的腳步去看看他們是怎麼評價你的網站的。如果你的網站已經小有名氣，那麼嘗試在搜索引擎看看用戶是怎麼評價你的網站，或者通過Twitter、新浪微博等看看用戶正在上面發表什麼關於你的網站的言論。
當然通過用戶調研獲取數據是另外一個不錯的途徑，通過網站上的調查問卷或者線下的用戶回訪，電話、IM調查，可用性實驗測試等方式可以獲取一些用戶對網站的直觀感受和真實評價，這些數據往往是十分有價值的，也是普通的網站分析工具所獲取不到的。
在分析網站的外部數據的時候，需要注意的是不要過於相信數據，外部數據相比內部數據不確定性會比較高。網站內部數據即使也不準確，但我們至少能知道數據的誤差大概會有多大，是什麼原因造成了數據存在誤差。而外部數據一般都是有其他網站或機構公布的，每個公司，無論是數據平台、咨詢公司還是合作夥伴都可能會為了某些利益而使其公布的數據更加可信或更具一定的偏向性，所以我們在分析外部數據是需要更加嚴格的驗證和深入的分析。而對於用戶調研中獲取的數據，我們一般會通過統計學的方法檢驗數據是否可以被接受，或者是否滿足一定的置信區間，這是進行數據分析前必須完成的一步。

⑥ 如何獲取網站後台數據

網站環境不同，不同程序有不同的資料庫配置位置以discuz為例，其他的隨機應變：
1.Discuz論壇的資料庫在程序中有設置文件對應查詢賬號密碼，目錄位置：
/config/config_global.php
/uc_server/data/config.inc.php
/config/config_ucenter.php
文件都含有Discuz論壇資料庫的登錄賬號密碼信息，可以參考查詢資料庫信息。

網站本身的資料庫是和程序分開的，大部分主機都是儲存在兩個空間。小型虛擬主機，沒有許可權查看資料庫文件，但是會提供在線管理的工具，一般在空間後台有提供鏈接。

雲主機，快雲VPS，雲伺服器，以及獨立主機，都有遠程伺服器管理許可權的，直接登錄遠程，就可以查看資料庫位置。

目前的情況看，快雲VPS都自帶雲資料庫，也有管理平台，可以後台直接打開，登錄管理資料庫。

⑦ 怎麼樣可以抓取到一個網站的數據

有很多種方法啊，例如自己編寫一段python爬蟲語言，不過這個方法就需要你會編寫代碼了，或者你也可以使用網上的那些採集器，這些採集器都可以採集網站的數據。不過在選擇採集器的時候你也要甄別一下，有的採集器不支持可視化採集，對於沒什麼計算機基礎的人來說，沒有可視化採集的採集器就沒什麼意義了，所以你可以試試前嗅的採集器，這個是可以支持可視化採集的。

⑧ 如何簡單獲取目標網站的資料庫

關於"%5c"暴庫大法：
這種方法被認為是暴庫絕招，很是流行了一陣（隨著知道的人多了，防備也加強了，沒以前那麼有效了）。這種方法，簡單點說就是，打開網頁時，把網址址中的"/"換成"%5c"，然後提交，就可以暴出資料庫的路徑。
實際上，並不是所有網址都有效，需要"asp?id="這樣的網頁地址（表示有調用資料庫的行為），如果你確認這個網頁有調用資料庫的，後面不是這樣的也可以，比如chklogin.asp等也可以。（當然，也還有其它條件，後面再談。）

⑨ 怎樣提取某個網頁的數據

用WebRequest方法獲取網站的數據：
private string GetStringByUrl(string strUrl)
{
WebRequest wrt = WebRequest.Create(strUrl);
WebResponse wrse = wrt.GetResponse();
Stream strM = wrse.GetResponseStream();
StreamReader SR = new StreamReader(strM, Encoding.GetEncoding("gb2312"));
string strallstrm = SR.ReadToEnd();
return strallstrm;
}

然後自己寫方法處理裡面的數據來獲取你想要的值

⑩ 如何獲取網站後台數據

只要不是特別爛的個人搭建的網站，很難獲得後台數據的。

一般思路：

1. 嘗試開放埠對應的應用服務的弱口令

2. sql注入後獲得許可權

3. 遠程ssh過去

4. 獲得資料庫

5. 清理痕跡

僅僅是思路，沒有先後順序，不是為了黑什麼，但是脆弱的網站一般這樣下來就可以搞下了，所以防禦也可以按這個思路去加強。