GooSeeker集搜客網絡爬蟲，簡單高效的網頁采集器

大數據管理工程師 2人

職位描述

• 本公司運營一個龐大的網站信息采集網絡和搜索引擎，其后臺是一個大型數據庫，關系數據庫采用MySQL，信息索引和搜索采用Lucene，根據客戶的不同業務要求，數據分庫和分區管理，然后從這些數據庫中將客戶需要的數據查詢出來，并且根據客戶的業務目標進行統計分析，本職位的主要職責是規劃客戶數據存儲、檢索數據庫并對為客戶制作分析報告。

崗位職責

1. 與網絡和系統管理人員協商，為客戶規劃和建立數據庫
2. 管理和監視GooSeeker采集工具和入庫軟件的運行，確?？蛻粜枰臄祿恼_采集和入庫
3. 編寫數據入庫規則、數據清洗規則、數據集成規則程序
4. 應客戶要求檢索數據庫，存成指定格式，對數據進行分析

任職資格

1. 本科以上學歷，計算機或電子相關專業
2. 熟悉MySQL關系數據庫，熟練使用SQL語言，掌握數據庫管理知識
3. 熟練使用Excel，能夠用Excel進行統計分析
4. 擁有良好的工作習慣，自主學習能力強，勤學好問
5. 敢于探索計算機和網絡相關的新領域和新技術
6. 善于交流和表達，具有良好的團隊合作精神和積極向上的職業發展態度

大數據分析工程師 2人

職位描述

• 本公司運營一個龐大的網站信息采集網絡和搜索引擎，其后臺是一個大型數據庫，數據庫采用MySQL，數據管理工程師根據客戶的不同業務要求從后臺數據庫中將客戶需要的數據查詢出來，統計給本崗位即數據分析工程師根據客戶的業務目標進行統計分析，本職位的主要職責是分析采集到的數據、并針對客戶需求進行數據模型的建設和梳理，為客戶制作分析報告等，并為售前推廣的模型相關材料提供支撐。

崗位職責

1. 對通過我司網絡爬蟲等工具采集下來的原始網絡數據進行初步的整理分析，提升源數據文件的可讀性
2. 使用統計工具如SPSS、excel等對整理后的源數據進行分析和建模，給出分析結論或結果
3. 整理數據分析的成果，并制作分析報告
4. 根據梳理的模型整理文檔資料，支持售前推廣等的材料編寫工作

任職資格

1. 本科以上學歷，統計、數學或相關專業
2. 至少2年以上市場調研、分析的相關工作經驗
3. 具有統計建模的基本知識，具有統計軟件如SPSS的實際建模經驗者優先
4. 熟練使用office辦公軟件，能夠用Excel進行高級數據統計&分析、并根據數據分析結果制作PPT報告
5. 擁有良好的工作習慣，自主學習能力強，勤學好問
6. 善于交流和表達，具有良好的團隊合作精神和積極向上的職業發展態度

前端開發工程師 2人

職位描述

• 本公司運營一個龐大的網站信息采集網絡和搜索引擎，其后臺是一個大型數據庫，數據庫采用MySQL。本職位前端開發工程師的主要職責是：根據客戶和內部數據分析團隊的不同業務要求，開發基于web圖形化界面的數據展示平臺，供客戶及內部其他有需要的團隊直觀的評估大數據的趨勢性結論，輔助客戶通過大數據的分析進行業務決策。

崗位職責

1. 按照數據分析團隊提供的原始數據和需求，用前端系統開發工具開發web界面的數據展示平臺，用圖形化的控件在web中展現大數據的趨勢等，提升源數據的價值
2. 針對不同數據源的特點，選擇和評估合適特定項目的前端編程框架，并給公司領導提供決策建議
3. 按照不同項目的要求，配合數據分析團隊的需求和后端web服務器開發部門工程師的前端對應需要，支撐項目按期高質量的交付給客戶。
4. 按上級領導對前端提出的特定需求，及時高質量完成內部工作交付。

任職資格

1. 本科以上學歷，計算機或相關專業
2. 具有3年以上Java編程和前端開發的相關工作經驗，熟悉Spring等基本服務器編程框架，掌握網頁編寫標準和技術，熟練閱讀和編寫HTML文檔，了解CSS、DOM、XML等技術
3. 具有較豐富的JS編程經驗，特別是具有bootstrap、echart、hichart等JS編程框架經驗者優先
4. 能夠熟練閱讀計算機技術相關的英文文檔
5. 具有積極向上的職業發展態度，擁有良好的工作習慣，自主學習能力強，勤學好問
6. 敢于探索計算機和網絡相關的新領域實踐新技術

Web服務器開發高級工程師 2人

職位描述

• 本公司的網站信息采集、搜索引擎、商業情報挖掘等系統都是采用Java編寫而成，部署在Tomcat應用服務器上。本職位的主要工作就是用Java開發更多服務器程序，改進現有的服務器程序。

崗位職責

1. 根據系統架構師的系統設計方案對服務器軟件進行詳細設計
2. 選擇和確定合適的技術或第三方工具，實現系統架構師制定的方案
3. 分解開發任務，制定開發計劃，作為leader，管理開發過程，并承擔培養初級程序員的職責
4. 承擔核心模塊的編程任務
5. 給系統架構師提出建設性意見，協助設計系統架構

任職資格

1. 本科以上學歷
2. 具有3年以上Java編程經驗
3. 掌握Java編程各種技能，包括但不限于數據庫存取、Java Bean、全文搜索、Java持久化、Java圖像處理、Java HTTP通信、JSP、XML等。
4. 掌握Spring Framework， Spring Security， Lucene，Hibernate等第三方程序框架和類庫的使用方法
5. 掌握MongoDB數據庫的應用方法，具有MongoDB實際應用的經驗和案例優先
6. 積極嘗試和尋找其它更合適的第三方功能組件，具有很強的新知識和技術的搜尋和學習能力
7. 熟悉軟件開發管理過程，掌握某個軟件開發管理過程標準并且有實踐經驗者優先
8. 熟練閱讀計算機技術相關的英文文檔
9. 具有積極向上的職業發展態度，擁有良好的工作習慣，自主學習能力強，勤學好問
10. 敢于探索計算機和網絡相關的新領域實踐新技術

GooSeeker爬蟲服務器運行維護工程師 1人

職位描述

• 本公司運營一個龐大的網站信息采集網絡和搜索引擎，執行采集任務的爬蟲軟件是本公司自主研發的GooSeeker工具包，包括服務器和客戶端軟件，客戶端軟件分別稱為MS謀數臺和DS打數機。這些軟件組成一個網絡，本職位的主要職責就是確保該網絡正常運行。

崗位職責

1. 管理GooSeeker服務器，確保服務器操作系統、數據庫、網絡、GooSeeker服務器程序正常運行
2. 使用MS謀數臺工具為客戶定義網頁抓取規則
3. 監視機房中的DS打數機采集器，確保其正常運行
4. 應客戶要求，導入導出數據

任職資格

1. 本科以上學歷，計算機或電子相關專業
2. 熟悉互聯網技術，了解網站建設方法和過程，對SEO有一定認識
3. 掌握網頁編寫標準和技術，熟練閱讀和編寫HTML文檔，了解CSS、DOM、XML、XPATH和XSLT等技術者優先
4. 掌握Windows服務器，Linux服務器的管理方法，掌握TCP/IP，HTTP等網絡管理方法
5. 擁有良好的工作習慣，自主學習能力強，勤學好問
6. 敢于探索計算機和網絡相關的新領域和新技術
7. 具有良好的團隊合作精神和積極向上的職業發展態度