PHP或者python進(jìn)行數(shù)據(jù)采集和分析，有什么比較成熟的框架

Python：

創(chuàng)新互聯(lián)公司服務(wù)項(xiàng)目包括南溪網(wǎng)站建設(shè)、南溪網(wǎng)站制作、南溪網(wǎng)頁制作以及南溪網(wǎng)絡(luò)營(yíng)銷策劃等。多年來，我們專注于互聯(lián)網(wǎng)行業(yè)，利用自身積累的技術(shù)優(yōu)勢(shì)、行業(yè)經(jīng)驗(yàn)、深度合作伙伴關(guān)系等，向廣大中小型企業(yè)、政府機(jī)構(gòu)等提供互聯(lián)網(wǎng)行業(yè)的解決方案，南溪網(wǎng)站推廣取得了明顯的社會(huì)效益與經(jīng)濟(jì)效益。目前，我們服務(wù)的客戶以成都為中心已經(jīng)輻射到南溪省份的部分城市，未來相信會(huì)繼續(xù)擴(kuò)大服務(wù)區(qū)域并繼續(xù)獲得客戶的支持與信任！

1.requests 很好用的http庫，中文文檔：Requests: 讓 HTTP 服務(wù)人類

2.BeautifulSoup 很好用很強(qiáng)大的html解析庫，中文文檔：Beautiful Soup 4.4.0 文檔

3.Scrapy 知名爬蟲框架，中文文檔：Scrapy 0.25 文檔

php數(shù)據(jù)分析

這個(gè)問題其實(shí)簡(jiǎn)單，你可以在foreach外先設(shè)置一個(gè)空數(shù)組，作用是把2016-11-29作為鍵 出現(xiàn)的次數(shù)作為value存儲(chǔ)起來， 代碼

$tmpArr = array();

foreach($ips as $key = $value)

{

$tmpArr[explode('_',$key)[0]] ++;

}

foreach($tmpArr as $key = $tmp)

{

echo $key." ".$tmp."br";

}

但是具體的數(shù)據(jù)結(jié)構(gòu)要根據(jù)你自己情況來定。

請(qǐng)教如何下載加密視頻

提供下面幾種方法下載加密視頻

=================

下載加密視頻

Google Video、Youtube.com、以及國(guó)內(nèi)的Mofile TV等各種免費(fèi)視頻發(fā)布站點(diǎn)，都采用了Flash的方式來播放共享的視頻，對(duì)于這類視頻，普通的方式是無法獲得下載地址的，看我們?nèi)绾瓮黄葡拗七M(jìn)行下載吧！

一、查看源文件法

有一些Flash播放方式的共享視頻，可以通過查看破譯源文件，直接查出視頻的下載地址，其中包括Google Video、Youtube.com等的視頻。

步驟一：查看源文件

這里以Youtube.com為例，假設(shè)用Youtube.com搜索到一個(gè)視頻，其播放地址為：“”。在IE中點(diǎn)擊菜單“查看”→“源文件”，用記事本打開這個(gè)頁面的源文件（如圖1）。

圖1

步驟二：搜索下載地址

點(diǎn)擊記事本菜單“編輯”→“查找”，輸入搜索關(guān)鍵詞“.swf?”，點(diǎn)擊“查找”，可以找到想下載的視頻的對(duì)應(yīng)連接地址，如：

“/player2.swf?video_id=7xAA71Ssidsl=133t= OEgsToPDskJ-k6LrIPF7 X9yQcZ8ld3oHnc=39168”。其中“video_id=”后面跟著的就是視頻下載地址。

小提示在下載Google Video視頻時(shí)，也可使用類似的方法，搜索關(guān)鍵詞“.swf?”。不過搜索到的直接就是加密過的視頻地址，只要進(jìn)行一下URL鏈接轉(zhuǎn)換，就可以得到真實(shí)的視頻地址了。

步驟三：獲得下載地址

真實(shí)的下載地址需要略微變動(dòng)一下，應(yīng)該在“video_id=”前面加上“?”，也就是“;l=133t =OEgsToPDskJ-k6LrIPF7X9yQc Z8ld3oHnc=39168”。

步驟四：下載播放

打開IE瀏覽器，輸入下載地址，或者直接利用迅雷之類的下載工具進(jìn)行下載（如圖2）。下載后的文件后綴名為.flv，需要使用專門的播放器Flvplayer進(jìn)行播放。運(yùn)行Flvplayer后，點(diǎn)擊“瀏覽”按鈕，選擇剛才下載的.flv文件，即可觀看視頻了（如圖3）。

圖2

圖3

二、緩存尋寶法

所謂緩存尋寶，其實(shí)也就是在緩存中搜索本地的視頻進(jìn)行保存，這里我們以下載國(guó)內(nèi)最大的視頻共享站點(diǎn)Mofile TV視頻為例。

步驟一：揪出緩存視頻

打開Mofile TV視頻網(wǎng)頁觀看某個(gè)視頻，這里為“”。然后打開IE臨時(shí)文件夾“C:\Documents and Settings\用戶名\Local Settings\Temp”，點(diǎn)擊菜單“查看”→“詳細(xì)信息”，再點(diǎn)擊“修改日期”欄，按時(shí)間進(jìn)行排列顯示?？梢钥吹皆诖蜷_視頻網(wǎng)頁的時(shí)間，臨時(shí)文件夾中有類似文件名為“fla7.tmp”的文件產(chǎn)生，該文件就是視頻緩存文件了。

步驟二：保存緩存視頻

直接復(fù)制時(shí)會(huì)彈出提示“文件正在使用中，無法復(fù)制”。我們可以用ICESword完成復(fù)制，點(diǎn)擊左側(cè)邊欄中的“文件”，瀏覽IE臨時(shí)文件夾。右鍵點(diǎn)擊臨時(shí)文件夾中的“fla7.tmp”文件，選擇彈出命令“復(fù)制”，在彈出的對(duì)話框中選擇保存路徑，并指定保存文件名為.flv后綴，即可完成視頻的保存了（如圖4）。

圖4

除了上面介紹的方法外，還有一些方法也能有效的尋找出視頻地址進(jìn)行下載，例如Mofile TV視頻可以通過嗅探的方法，分析收發(fā)數(shù)據(jù)得到下載地址，具體的方法大家可以自己摸索，相信以后沒有什么下載東西能難到你了！

==============================================

對(duì)于網(wǎng)管來說，解決一些計(jì)算機(jī)故障是基本的技能，但是如果你能掌握一些其他“特殊”技能，想必網(wǎng)吧老板會(huì)對(duì)你另眼相看。比如，你從網(wǎng)上錄制一些加密的影視文件，這就能豐富網(wǎng)吧的影視，吸引更多的網(wǎng)友。如此長(zhǎng)久，老板說不定就給你加薪了喲！

對(duì)于網(wǎng)上加密視頻的下載，報(bào)刊雜志上介紹的技巧很多。其實(shí)我們還可以繞過下載，采用錄制法把視頻“下載”到本地硬盤。能夠錄制屏幕的軟件很多，筆者推薦使用Camtasia Studio，它是大名鼎鼎的抓圖軟件SnagIt的同門兄弟，它不僅可以錄制屏幕上的各種動(dòng)作、聲音，將其保存為體積較小的視頻文件，而且錄制成的文件清晰度高，顏色也不會(huì)因?yàn)閴嚎s而變質(zhì)。

運(yùn)行Camtasia Studio，在出現(xiàn)的“歡迎”窗口中選擇“通過錄制屏幕開始一個(gè)新方案”，接著系統(tǒng)會(huì)啟動(dòng)Camtasia Recorder組件，并打開“新建錄制向?qū)А贝翱冢m當(dāng)選擇錄制的屏幕區(qū)域，并勾選“錄制音頻”；在“選擇音頻設(shè)置”窗口中，“音頻輸入源”一定要設(shè)置成“立體聲混音器”，如圖所示，這樣Camtasia Studio才能將聲卡發(fā)出的聲音全部錄制下來；全部取消對(duì)“性能選項(xiàng)”和“錄制之后選項(xiàng)”中各項(xiàng)的選擇，單擊“完成”結(jié)束錄制向?qū)А?/p>

下載加密的視頻

回到主界面，單擊“工具→選項(xiàng)”，在“AVI”窗口中，通過“視頻設(shè)置”和“音頻設(shè)置”按鈕，分別選擇好視頻壓縮編碼和音頻編碼以及音頻格式。

打開加密的網(wǎng)絡(luò)視頻并以全屏方式播放，切換到Camtasia Recorder窗口中，執(zhí)行菜單“捕獲→錄制”即可開始錄制正在全屏播放的視頻。選擇“捕獲→停止”，結(jié)束錄制，在Camtasia Recorder對(duì)所錄制的視頻渲染之后，即會(huì)彈出保存窗口，從而把加密的網(wǎng)絡(luò)視頻“下載”回來。

===============

用訊雷的監(jiān)視功能可以下載

方法如下:

打開訊雷(廢話)-工具-配置-監(jiān)視

然后把鉤全選上

鼠標(biāo)經(jīng)過網(wǎng)頁的視頻上用出現(xiàn)"訊雷"然后單擊就可以下了.

=========================

Python 能否替代JavaScript？

可以直接學(xué)python

html和css是前端語言，python可以用來寫后端

不過要是想用python制作網(wǎng)頁最好還是學(xué)一下python的web框架，比如django