久久精品国产一区二区电影,久久精品国产亚洲av瑜伽,精品无人区一码卡二卡三,久草热8精品视频在线观看 ,久久99精品久久久久麻豆

項目經歷（案例一）

項目時間：2015-01到至今

項目名稱：眾泰基于大數(shù)據(jù)的發(fā)展分析 | 項目工具：linux、hadoop-2.6.0-cdh5.5.2、sqoop-1.4.6-cdh5.5.2、zookeeper-3.4.5-cdh5.5.2、hbase-1.0.0-cdh5.5.2、hive-1.1.0-cdh5.5.2、kafka、JDK 1.7.0、spark-1.5.0-cdh5.5.2、mysql、oracle等

項目描述：

項目介紹

面對汽車行業(yè)數(shù)字化浪潮發(fā)掘企業(yè)數(shù)據(jù)價值，推動業(yè)務發(fā)展和創(chuàng)新，采用先進的云計算和大數(shù)據(jù)分析等技術搭建的數(shù)據(jù)分析應用生態(tài)體系。通過企業(yè)內部的數(shù)據(jù)系統(tǒng)獲取研發(fā)、生產、營銷銷售、售后等各種信息，結合互聯(lián)網、車聯(lián)網、手機等用戶端口獲取用戶的用車習慣、需求，以及對產品的抱怨等等。這些大數(shù)據(jù)經過大數(shù)據(jù)分析以后得出一些結論，為車型的研發(fā)、改進為營銷策略的制定；為廣告的精準投放；為生產、庫存的調整；為銷售、售后的跟進；提供數(shù)據(jù)、智力支持。 統(tǒng)計用戶的審美喜好、用車習慣，給新車的設計師提供參考。這樣出來的新車，勢必擁有暢銷的基礎。 在廣告投放階段，云鏡能精準地找到潛在客戶，甚至廣告的形式及內容都可以根據(jù)用戶的喜好進行定制。這毫無疑問會提高廣告效果。對用戶的抱怨進行統(tǒng)計分析，可以及時發(fā)現(xiàn)并處理用戶抱怨，提高用戶滿意度，同時為車型改進提供參考。

監(jiān)測到某一車型多次出現(xiàn)同一故障，系統(tǒng)可以通過車載終端、手機對相同車型的車主進行提醒。讓車主到4S店進行預防性檢查，同時可以進行進店預約，節(jié)約車主時間。

項目描述：

1、數(shù)據(jù)來源： 數(shù)據(jù)傳統(tǒng)來源已經有了相對成熟生產系統(tǒng)體系，包括銷售領域的分銷商管理系統(tǒng)(DMS)，經銷商使用的CRM、客服中心(Call center)、生產管理系統(tǒng)，質量管理系統(tǒng)(QIS)等等，因此可以滿足日常主機廠自身日常運營分析、產品分析以及對渠道運營分析。

1)車聯(lián)網系統(tǒng)：目前越來越多的主機廠考慮部署或者已經部署車聯(lián)網系統(tǒng)，通過車聯(lián)網系統(tǒng)有效補充用戶日常數(shù)據(jù)缺失，以ADAS系統(tǒng)為例，可以捕獲如下數(shù)據(jù)：用戶駕駛行為數(shù)據(jù)：用戶每次駕駛里程，轉向習慣，行駛速度、是否有疲勞駕駛等，可以有效幫助客戶畫像數(shù)據(jù)構建產品參數(shù)實時獲?。翰煌悴考年P鍵運營指標，如轉速、溫度、電子指標等，從而為精細化產品質量預測和分析提供基礎

2)網絡輿情信息：網絡已經是用戶信息傳播的主要渠道，相比主機廠傳統(tǒng)方式，網絡信息會更早、更全面反映用戶對主機廠的相關信息，通過部署自有網絡爬蟲系統(tǒng)或者購買第三方的SAAS服務，可以針對重點門戶、知名行業(yè)網站、論壇、電商平臺等通過爬蟲系統(tǒng)可以捕獲網絡新聞、論壇帖子、用戶評論等網絡信息基于大數(shù)據(jù)技術處理，通過網絡信息進行市場營銷、品牌影響力、用戶習慣、產品質量等分析，以品牌為例，可以完成品牌日常熱度、口碑傾向等分析。

3)第三方外部數(shù)據(jù)：行業(yè)性數(shù)據(jù)：通過乘聯(lián)會等行業(yè)組織的數(shù)據(jù)引入，可以有效解決市場趨勢分析的數(shù)據(jù)引入;第三方用戶標簽數(shù)據(jù)：和第三方數(shù)據(jù)合作中，得到用戶級的數(shù)據(jù)交換，考慮到第三方數(shù)據(jù)匹配成功率不足的問題，這就需要構建統(tǒng)一的用戶標簽體系和用戶多ID體系;此外更為可行的做法是充分利用第三方的做好用戶畫像分析數(shù)據(jù)，優(yōu)先完善用戶群統(tǒng)計數(shù)據(jù);

2、數(shù)據(jù)導入和預處理：使用sqoop抽取oracle數(shù)據(jù)庫中的數(shù)據(jù)，因為數(shù)據(jù)采集端數(shù)據(jù)來自多個數(shù)據(jù)庫，因此數(shù)據(jù)格式存在差異，需要抽取到hadoop平臺上，在導入的過程中依據(jù)數(shù)據(jù)特征進行一些簡單的清洗、篩選。

3、數(shù)據(jù)分析和統(tǒng)計：對已經導入的海量數(shù)據(jù)依據(jù)其本身特征進行分析并為之分類匯總，以滿足大多數(shù)常見的分析需求。

4、數(shù)據(jù)挖掘：針對前面已經數(shù)據(jù)分類匯總，利用數(shù)據(jù)挖掘算法對這些匯總數(shù)據(jù)進行深一步挖掘。數(shù)據(jù)挖掘算法都比較復雜，沒有預先設置的公式，這也是考驗一個公司實力、人工智能的一個環(huán)節(jié)，只有相對準確合適的算法才能從大數(shù)據(jù)中得到有價值的數(shù)據(jù)分析結果。

項目架構：

1、相關負責組：數(shù)據(jù)收集組、數(shù)據(jù)處理組、分析組、建模算法組、數(shù)據(jù)展示組。

2、數(shù)據(jù)收集有多方面數(shù)據(jù)，有數(shù)據(jù)收集組通過爬蟲在相關對重點門戶、知名行業(yè)網站、論壇、電商平臺等通過爬蟲系統(tǒng)可以捕獲網絡新聞、論壇帖子、用戶評論等網絡信息。

3、數(shù)據(jù)處理組負責將數(shù)據(jù)庫抽取出來的數(shù)據(jù)，數(shù)據(jù)抽取組的數(shù)據(jù)進行相關的清洗、篩選，并將數(shù)據(jù)進行海量小數(shù)據(jù)合并。

4、分析組負責大量離線數(shù)據(jù)的分析，匯總分析出各種型號車輛的各項參數(shù)，以及根據(jù)售后維修的數(shù)據(jù)分析出出現(xiàn)問題最多的前10名的車型及其維修的部件的型號，并且匯總根據(jù)售后反饋回來的信息， 再次綜合出已出現(xiàn)問題的車型及其部件編號。還有網上爬蟲來自網絡新聞、論壇帖子、用戶評論等網絡信息，分析出客戶期望以及車輛問題。其中還包括用戶的行為分析，通過車輛的定位來確定客戶的喜好消費，綜合上方收集來的用戶駕駛習慣來為用戶定制專有的用戶畫像。還有分析各地區(qū)人們的不同而分別投放不同的廣告。

我的職責

1、在hadoop生態(tài)圈上利用sqoop工具進行oracle數(shù)據(jù)庫的增量抽取到HDFS

2、在hive中對數(shù)據(jù)進行分析、處理、創(chuàng)建、修改客戶專屬畫像和汽車專屬畫像

3、按業(yè)務要求對hive進行優(yōu)化

4、按業(yè)務要求HQL的編寫及調優(yōu)

項目經歷（案例二）

項目時間：2015-01到至今

項目名稱：醫(yī)學專業(yè)字庫的創(chuàng)建

項目描述：

項目介紹

該項目為公司內部完善產品的設計項目。該字庫的創(chuàng)建主要解決系統(tǒng)中醫(yī)院描述性數(shù)據(jù)不規(guī)范問題。根據(jù)字庫，將不規(guī)范的數(shù)據(jù)標準化，為數(shù)據(jù)分析精準度提供有力支持。由于醫(yī)院數(shù)據(jù)錄入的不規(guī)范，且數(shù)據(jù)量過大，不易于系統(tǒng)分析，并使得系統(tǒng)分析得出的結果精準度有所下降，因此，該項目的目標是，標準化醫(yī)院描述性數(shù)據(jù)，提高系統(tǒng)分析的精準度和可靠性。

我的職責

負責前期字庫數(shù)據(jù)的ETL，以及在數(shù)據(jù)庫中的構建。字庫的構建解決了一直以來公司在處理醫(yī)院描述性數(shù)據(jù)時的規(guī)范化問題，使得公司研發(fā)系統(tǒng)更加完善。

項目經歷（案例三）

項目時間：2016-03到至今

項目名稱：登云美業(yè)大數(shù)據(jù)平臺 | 項目工具：Centos6.5、cloudera manage5.7、CDH5.7（hadoop2、sqoop、flume、kafka、zookeeper、hbase、hive、spark）、MySQL等

項目描述：

項目介紹

在大數(shù)據(jù)時代，我們需要運用大數(shù)據(jù)的科技力量來推動企業(yè)乃至社會的發(fā)展，可以說未來幾年將是大數(shù)據(jù)風起云涌，競爭激烈的時代，機遇與挑戰(zhàn)并存！數(shù)據(jù)時代的數(shù)據(jù)意義非凡！

數(shù)據(jù)來源：1、歷史數(shù)據(jù)：海量的歷史數(shù)據(jù)，從98年的線下數(shù)據(jù)到現(xiàn)在時刻產生的數(shù)據(jù)

2、APP產生的日志數(shù)據(jù)：主要來自APP（每天每耶、妃子校）日志，用戶的行為數(shù)據(jù)

3、第三方采購數(shù)據(jù)：與同類型公司交換或者購買一些相關數(shù)據(jù)，以便于更加詳細的分析用戶操作的行為

項目階段：第一階段：大數(shù)據(jù)采集，清洗，分析框架搭建

第二階段：數(shù)據(jù)胡數(shù)據(jù)流入，產品數(shù)據(jù)統(tǒng)計分析

第三階段：外部數(shù)據(jù)打通，分析模型建立，用戶畫像，推動引擎，動態(tài)榜單

我的職責

1、負責平臺搭建方案和具體步驟的文檔編寫

2、海量歷史數(shù)據(jù)分批的導入

3、現(xiàn)產生的日志文件清洗、分析

4、現(xiàn)有日志與歷史數(shù)據(jù)結合做出詳細的用戶畫像

5、按要求對hql的編寫

項目經歷（案例四）

項目時間：2015-08到至今

項目名稱：新華保險業(yè)務系統(tǒng) | 項目工具：oracle 11g

項目描述：

項目介紹

新核心業(yè)務系統(tǒng)通過對前后臺運營業(yè)務處理支持，實現(xiàn)保單的全生命周期相關業(yè)務處理，實現(xiàn)外部差異化服務、內部集約化、運營精益化有效的基礎支撐平臺。

為實現(xiàn)個險理賠處理流程系統(tǒng)化、智能化、集中精益化，支持公司業(yè)務發(fā)展，實現(xiàn)個險理賠閉環(huán)管理，提升作業(yè)效率，提升客戶體驗、提高客戶粘度，提出個險理賠新核心系統(tǒng)業(yè)務需求。

新契約是保險公司整個運營體系中非常重要的一項業(yè)務職能，是一張有效的保單建立就是從新契約開始，是保險公司和客戶建立合同的重要步驟。新契約主要分為四大部分：承保處理、承保管理、承保查詢、承保報表。

而保全是保險合同在保險期間內，為了維持合同效力，保險公司根據(jù)合同約定及投保人、被保險人或者受益人的要求而提供的一系列服務。即圍繞合同內容變更、年金或者滿期金給付等服務項目而開展的工作。

我的職責

庫表及數(shù)據(jù)模型的維護；異常數(shù)據(jù)的查詢與處理;數(shù)據(jù)遷移腳本編寫及優(yōu)化