-
可視化采集軟件火車瀏覽器在編輯腳本的過程中需要對邏輯進行一系列設定，比如條件判斷、循環(huán)、跳轉、引用等，這里就對邏輯的具體操作簡單講解下，介紹自己的經驗，希望幫助朋友們解決使用中遇到的問題。條件判斷有四種形式：1.條件判斷：1）當前頁面源碼2）xpathhttp://bbs.locoyposter.com/post-21-1-1.html在...
-
迢迢新秋夕，亭亭月將圓。又逢一年金秋季，又是一度佳節(jié)時。樂維在此向廣大用戶朋友及家人致以衷心的節(jié)日問候！ 另外樂維根據《國務院辦公廳關于2016年部分節(jié)假日安排的通知》對中秋節(jié)及國慶節(jié)做如下放假安排：一、中秋放假放假：9月15日至9月17日，9...
-
我們在使用火車采集器進行數據抓取的時候，會需要將采集內容包含某個字段的所有內容都替換為某個固定的內容。使用場景如：我們從某網站上采集城市名稱，然后城市名稱示例為:浙江省杭州市，但我們需要將這個內容替換為杭州，這時就可以使用自動分類功能。下面以百度為例介紹下用法，首先在火車采集器V9建立規(guī)則，內容采集規(guī)則的標簽編輯如下： 如上圖，...
-
2016年8月5日，合肥樂維信息技術有限公司開展了一場內部員工的技術分享交流會，技術大牛們在會上激情探討著近期研習的高端技能，充分帶動了樂維技術部門的共享、協作與進步。在樂維技術部總監(jiān)的主持下，分享有序開展本次分享會的主題來自十三位分享人，貫穿數據處理算法、前端技巧、插件、UI設計、數據庫操作、海量采集、產品設計...
-
企業(yè)間的競爭情報是企業(yè)優(yōu)化所需的一項重要數據，準確而及時的企業(yè)競爭情報往往能為企業(yè)帶來許多優(yōu)勢。信息化競爭時代，企業(yè)競爭情報也顯得愈發(fā)的重要。但信息時代在帶來了大量數據的同時，也給信息處理帶來了很大的難題——如何從浩如煙海的網絡信息中找尋所需的競爭信息呢？ 傳統(tǒng)人工的檢索、整理方法已不可取，海量的數據面前這些手動獲取的小數據微不足道，毫無...
-
當下的媒體現況，在一個焦點事件發(fā)生后或某一持續(xù)性的話題中，要想形成一個媒體專題本來需要很多的人工操作，比如信息收集分揀，及時更新等，但高效的網頁抓取工具將給我們創(chuàng)造一個大數據智媒體。通過網頁抓取工具火車采集器能夠自動收集出焦點事件在網絡中對應的輿情。比如一個連續(xù)發(fā)生多日的事件，在每一個重要的節(jié)點時間里都要對數據進行抓取更新，那么只需要在火...
-
電子商務在交易的過程中，除了可以產生利潤，產生的大數據也是一筆財富。無論是買家購買行為、興趣及支付數據，還是賣家的經營、財務數據，都有助于企業(yè)發(fā)掘出更大的商業(yè)價值。大數據是電商新財富今年6月底發(fā)布的《中國電子商務報告(2015)》顯示，2015年，中國電子商務交易額達到20.8萬億元，同比增長約27%。大規(guī)模的交易額背后，產生了龐大的數據...
-
看到有朋友給我們留言說，老板看我電腦玩的溜，就要求我半天學會火車采集器，不懂技術怎么入手？先別懵圈，畢竟叫你學采集器可比看你電腦玩的溜就讓你負責維修電腦強多啦。先說說你的老板為啥叫你學抓數據。大致就是以下三種可能：第一、對工作效率的提升需求促使人工操作轉向工具智能，你的老板開始嘗試更高效的渠道了。第二、沒有數據支撐的業(yè)務似乎很難有新的突破...
-
大數據行業(yè)的蓬勃發(fā)展，引發(fā)了各行各業(yè)對大數據崗位人才的強烈需求，如果你也想嘗試高端的大數據崗位，那一定要具備以下技能，才能得心應手地完成工作指標。 一、基礎開發(fā)大數據的基礎開發(fā)主要有數據抓取、數據處理和歸類存儲，對于海量的數據抓取而言，需要考慮的是抓取的實時性、準確性以及完整性，而對于數據處理和存儲則主要是及時更新，排重過濾等。...
-
在信息的快速傳播下，我們可以在網絡、書籍等各類媒體中看到大量大數據的應用案例，這些案例無不向人們展示著大數據應用場景的各種美好，但是，對于大數據，人們最關心的還是如何才能獲取，這是價值挖掘與創(chuàng)造的根本所在。在大數據應用場景下，關于數據獲取的途徑大致有三類，列舉如下：在生產經營中獲取與自身業(yè)務相關的生產數據、銷售數據、運行數據，試驗數據等都...
