1、生猪大数据项目基本设计说明书XX科技股份有限公司制目录一、生猪大数据项目31. 总体架构设计32. 网络拓扑43. 数据处理流程5二、数据生产展示5三、数据采集展示6四、数据分析展示8五、数据可视化展示81. 权限管理：82. 生猪大数据分析：9六、项目安排12、生猪大数据项目总体架构设计Ub1.zu敢界可视化叨BrtW1.rmmm数第存储以*%mu分布式攵件存GHWS图1系统架狗图2.网络拓扑02网络拓扑图3.数据处理流程图3数Jg处理流程图二、数据生产展示.f31.，九3,*I1.0.UOI1.立,17?.IUW.W.IUM.M,、.吊13.JW,1.MX1.1.1.，.，M,MMtt1.
2、1.ft.tS.M.K.MM(*r.U1.1.ia7)nnM.A*a.r*.1.Va.,FM.MX1.-M.Ma0.M1.-7JN1.9.n.W.J.01.3.MJOOI1.4.M40.M.IUWM.15.M291-1*.*.nW1.U4*.XM-41.-1.4.M.NN1.).MM.Me-P.*V.M991.-1.Xa.4n.211.e0.1t4JH.7VXM5.XM.1m.ra.vM*.11MM.ssMM.Av,*.7.V4.MMII*.FS,ni.MM*M.IJMCnQQ2,x“Q,明Q.*.KK1.*KKTiMMr.M*n.M.M.Mi1.II.M9,MM1.J.V.M.aM77.MM
3、XM41.-.1tt.1.W,MMeM.V,1.*M3.U*r.12MM.1.5iniM4.1.九H.,71IXXY21.h”.XX1.RMMW.X4M.M*W.M2O1.-M.M.M2001.T.M.Mirr.W.tnj7.1.5.21.*M.f*.7QaU.nV.MN-1.V.?1.MMi1.2.1.1.1.1.7)4!M4.na*.Mai.1.WWB.4Va.MM4.7).f1.CB.MM-4.7)K14.II18R.X,.8.2UOQ1S.*1.MN01.6.8.MMX.B1.2.rV4M.X1.1.乙太.”.RM01.19.4f.ni*).W.MwUMf.UMM.1.1.B7)in
4、M4.ft*.*aA.Mff1.*29*n.1wrW.y99W.VV*1.-1.1.*!.M*1.*r.u.OTrr.W.IWIWM.MM9tM.Wa.rWM.1.MKZ.tu,aXKK47%.1,K.KKTQ.r.1.M?iXi44.*，.W.X.M.MM1.14.WV.MM01.1.V.1.MZM.s2Zrcm.%IQI1.nM4.1W.，,九九f1.tXX1.R.a.XmMMW.XMe.mrB.2U1.t.”.RWO1.R.”.5M.saB.8.1“，.nQ1.X.N.m.Jn.XX91.R.”.，S.X.01.1.1.1.3.”.*MVn，.1.2，1.im】X44.rU9*.fC.1
5、1、.R479.acm.RX42，i.rr7j./9.Mnei4.*.me*e.ia.“.K-tta.:x.if/14.sc八，.，.句色.为.KKTK./H.RK，八Mist1.Sr1.e.M.en.a.M1.W.V.4MH.a.WWe.t5.*A*1.1.*,e*.nMI,IMM.M*4t4.fM.M.M-1.1.ffM.BM7.UI.Mtek,MMM.,i*t1.1.4.R1.*kW9.Mtei.,.V三1.1.M4-？1.,t.W*4iMMW.HiM1.f.1*.U.1.i1.M.M.IM.M.n.X*1.-n.M.W001-M.1.MJOO1.-M.tV.77.I1.1.WW.11
6、MM.M.D.X01.-2.raa2.TMM.MX-41.17,.I.XX4IIO.V.ni46.W.*w1.fwr.Um.1.1.7)in1M4.V1.MMt.*R.*B.MM4-7S.*aa.XM-iMM1.5*.rr7.X?W.M2O114.ta.MMOt1.Xa.W.7A21.e.1.T1.MW.n,J20-1.-1.1.WI.n1.2.n.MX41.4.N.4.XX41.1.4.Xa.1.M.14.VMtr.12MM.IR71I!PU.CtW4.FM.f1.a三.m.4ft.VM22tKCS，.，KW.tf.MJ*91.-.M.n*f.rSV.9VM-4114.W1.1.1.MM4t
7、1.%X.1.mi.n.vw*.1.MM.I.MMU.I.M.三A.M-.t.M.Ma-e-n,fV.MMtt1.e.V.4.M1.t.M.IM*J.k5.Utt1.-i,*,MMI.N4M,MM-4i4.1.t.J.M.MM-e.ViM7.MM.I,1.*?1.n44.mV三.MteU.*,.van.FW.MM-*-4-1.N15W.T11.M.)M.M.MX1.27.1V.MX01.1.V.4n.MD.0.XW.27*41m.Muw.*.moi-n.xei-v.iv.444.Mrr,w.iMwM.i5.-B.ff.nm.r4M.x.4i22.XM.w.XM0iz.Navn，E.MUx，.i
8、zmn44.oj僧.-2.f.aei1.).a.J.IH7e.MM4.i9.m1.M.IV.ma7.rV*1.MM41.13.Xa.4M,MM91.19.ia.M5f.r.*f.u.m*niM.feW4.*.R.?v-z.a*.w*-2图1获取数据并去掉班感词通过函数生成电子支付数据，需配置生成文件名和生成路径。三、数据采集展示artc.r*rtr|a*nc*.p1.*2mc.*W1.BwQMMpBr1.t*wr.t*c1.*EZ.H1.tQ.prgMESff.”*F*QMMQ.S19999X“”Mftefr.M.*f1.*11m1.UfrM.kiM1.t.cadZrQUv1Nuni.kfr*
9、a1.tM.W4r.r1.01.ftMtM4M1.Ur*rot.rvic.*三.1.1.Mt.terro.tUuH.rv.JitterOgM1.kar*r9%.tU1.H.rwvvt*w.fctpr1.1ftCAMrIw*11yVk1.ft三Ty43“,Ec1312?t*1.1.*Wt.MH*1.MM1.M.pftrt1.fUM*Afd*1.*0Mr.a1.x1.t*BWiftM1.hZr.toci8Tt1.Mt.kytr.p*Mx1.*1.1.M1.hytr.tyMSdK481.TtS1.*H*r,3.H*,FMM，QMnM1.(t*.191ttKIR1.tr*ttr.1.*11.cU1.
10、trt*t4r.(MMMVd1.1.41.tr*t*t4r.tfMSttaMt*MMv1.rM1.Urc1.acf.apcb.kafka.tIm.*t*Arrefr1.1.Ifr1.A：“W0uti1.r3*wr:KabF:.1.2M*U-2.2.“tWO*M1.1.”】*，：KnMittN:1:M110AEQM.HQbEQ*MP,Mc*1.fe*4(t9f9*Q|VU1*0ifteMQef.MMOKHTC,T1.(tt9.1.*.MM1图5f1.u三c采集M*ne1.)fi,：，.,.invatcM.M-B*w*ItHWiir:1.M，、；，rwrMfo,ctr1.，八Iw1krv-4*f1
11、M4*k|I3b).WV*tfkMt(4pW*W*WV.KvkEC*fFM,.W()(WF?HQ,m.M.m.BVa11.M*,Mi*M-.*,U.，M.n.M*U.M4i7?.V.I*.KK(UN,”.kKI.I.MMter,1.JrA.1.nIM4.MVW.M.J.,*a1.SG.MM4.W,MM-I-MN1.9,r11.e.1.M.M.MM1.-2?.1*.MM-OItft.V,4M.MMI.M.In.M.H.XQ1.-1.t444.MM41.4.Htt.9.M.MM41.ai.M.T.Aiej.Wm.XX1.-U.4M.NX41.1.tEH.MM-JD.Ma.7W-22Mt4.1.
12、mW.M.9.mV91M.1.*.M991.e.a.1.1.tt9W.MWWW.H.7VW1.-TS.e*.ft01.7.r4.MMI.MMe19.；M*9.*MA*f,WMV.)t1.nMM,C1.W4,MM*.,4,irMr.HaMM.e.V4.M*t.V*1.1.a,MM4yi.*aa,M1.MNi*.*M.MMttiP.v,MMi1.45.77J1.AX1.1.4,*/.J1.XXI13.mt.n.MtfW.m11.M.VM.M.M20-011.1.M*.MJOOIJ.W.MM*01.24.WV.).9i.MtMr.ura.mniM4.na*.a.2.*w.ca.Mo47.rw.xNn
13、w.m/!s.xa.s.i7).ee.iMMw.7roe-x.w.m2.vn.MX-u.xa.4m.xji19.x*.VA.I.XN.MM1*72.af1.nMQt”.E0W.m9.V.M*1.n.e*.S3*a-H.1a.4fr.W.UM4.t.3Q!15.IV.MI9.r5MY.MM4II9.WM.J，.KK1.”.U,rr.W.Mto.UMVk1.IaIKZMIiMU.14U.ae1.，上,a1.M4.)MB.I3”.J,.Mfe1.3.1,.MW.12.AX4B”,*.I.八.XXI*.*.1.*1.01.M.1.刀XD,.MX4.“1.M.MM1.力.,MM01&.”.4”.7m.8
14、1“.3.g.MM1.X.it7M.N71.eXYtU.fT./.MX01.U.X1.49.1.1.W.M1,9.M291M.1*.M2001M.1.V7.1.1.1.90.e.P*WI.MX1.19.a.ne.wK9Mf.um.7)nP44.ftir4.%Mt.4.*R.*aa.MnA-73.*a.Mn.nMUM.MJM99.nf.ERI力.”*.KA9e”.”.4“，a，B.13U4t1.2.ffM.W.MMt*1.9.SM.MM.V.MMWf.U,N,IKIHO44.V*V.vtM*.W4A.M.MI1.11IO.*.aM1.1.4A,.t.IiI,M,*tiW.f*,M1.M-1.I
15、S.ttt.IK6kafka条锌待消费数制aig.uttJV1.CrM11tEn5gjw11*三,MefrUr1.B*QQ*yr*(t*ftgM三H*9J(m1.IZH.vKmII*h1IMImWtMMfM(MfemItMtM：9Mrmt*，、*C*ac1.4mtMnf*1ycMsm*t1.nUf1ym.tc.1.mtfirvJr*Q,vp1.cg:!Mrv4tFye_*Q(BEQyCog;mtQUQyMweBtBM5，t*tkrtpe*1.M1.B4二MQ，gMJIIU1.夕IXg*MI.MrtW4th1%)：MrtWm,MaMpr.1.*11MncC4!*c1.1.49*11w*fMtMr
16、tr4Ut1.Q!MM*1.1.tfft1.c1.9w1.*1.1MMwcoMI,wM,ajw1.M-w11)Uq*.*三*-4kU*1.k1.9)t9kUfUua.*_)_xm3Q51.1.U*UVf，“”I1.AterMH.*MM(m-MMtarU1.(*.*，.x，M*2(*,*Nar*Va*vr*1VNM*4Q.、y*ifvtM*vMf*tvc;t*mt1.drtfr1.fT.,*M*IM*Hk*MtH(MM;IMUMtkr*,UU-PI9U.1.t11*tPiQa,*MkM(Mrt(三M1.tytq*Mrt(a三ttya,r*mcaftM1.*WIjMvtParU.*mb*cMrtR
17、1.tc!Hc1.a.am*p*MrfW4tfwrtQ;ta*-11aMCr*.*n*rm1.e1.CovvrMM4.bw1.M1.*nM.*K1nT.IrtUrTWtP1.gUfX*tmtP1.eCt1.uvw1.1.Qar11.WE199.2bM八KWtMCtetF1.M.aMKK.7, *三tCEI7*)mMM1.Wa1.WMtiff*f,e1.MMt2 1.三*tum%1.tmtyIWKIMM.v1m4ftkMt.t1.aMtM*MM114CA.1.田M.3 QitwwfI：*1*.tiw三rMmzw114c*.Mm.n oUw*”：S，QWt1.wrMHW11m*八W161E1MW.
18、v41.w1.w*1mmM4.t1.r1.M)4fZM1./.*m4KM6”,1W,iMM1.MI)U*w*1.4fv.QMrtRaXfZMIM.1.MuHkaMB八*aAms,mn”M1.4JWMJ4JMMWIJ4M1.4m*I114JIIWITJ4JViimnxrHJMiomirrog1.4J图7HBASE存储敬据11.vafIitra*ctMT,fp,tM4tM9MK1.ZWI*JJ),e1.*tfT*Mf7KAM1.U41.tww”;必.ta7M1.(4KU).v1.J.MM14VW1H4t三wf1.rS0tt.t1.aMfMHmMiaFT3.*wXX*41.14M1.n1.(Q4CS
19、t”：，tw%t三rnjttwrn,d3MC1f八bk3nmwrshamxM9r.Qj1.dBr”,31.f1.E.eHM八rUtf1.E5,st*nanvn*1.*w1.!t3ImIa6.*K*JM1.-29ww1.!H1EUg.*KMY7,.1.rfr*ff.QIfQT11E14R.EvH1.MK6mSGC*A*MiA*m1.w*Mj3”.tUvUmeEkSE.1*gt3HSA1MBraI1.Q中八tIA14IV1.uMfUM4Km.1mVM.MM1.Mt1.aMfM*41.M1.*n.2mMMGXiMM1.41UW1.fQ*“：，t-tTM1.C443”t5.m1wm1MIWWIW547
20、M1.4m.e1.444M1.miVM*41.(ar*f1zU*MUWMt4.t37力IWnI6E.im1.3Mt*nmfmeUwMgMnmQiQxmi6E.uyU43U八xaM1.KmiV75*9”.Bs,mm1.tfvwf1ra*y.+7r161EXE.v1.1M,，1MteiMiwu.41.uMf1.M1At.ttf，v2”EUIFMKYtZ4“EMWUMtMn“tiMMt*HZMM*S,2B八5八tft*f八*ftM1.4W)I,*1.MMa1.c*fK14XVM1.uwfUpM*MM.t1.aMt4a*UWMM.v1*mUMMQMB7a1.X5Sr4M1.)ni)M4IWWW4o1.
21、cCUw.tMt*，(9*2、/IaE.2nMinww*ce*,tW1.wHW1.ZMtem.1wMM-41.10M1.1.WMStgrw”：pr”,.QiI-1，“IeE.r1.w%rf4BVrtrfAtKXaM91.i*w11r*tUy.I1.三1*H1.ZMiarV).2r1.tw*11e*.，ifQ4a(1.SaEMf2BtEZt醇EvWX2t31M八E61.-,3t.tw*1.1.mVtM4S.6t4MZA1*ZU1.uwMhr八WI*M,M4Mt4QWWA1.*wBfhrA.t1.at1.,BKng213八aMMIa1.八iWSbM八EM14UWIOAa1.umf1.itrMMCt
22、1.4ut,*M4ta*MVW(1.*T*.UMMMtt1.1.1.AWWAo1.三wt1.ztfMMtkvtfkM1.1M4tf1.9S1.4XMQ”.UmNMS1.*UWWC1.三*fI:Mtap1.61.4Q2M1.1.1.iiwnw(1.t三M1.:QrcQT付.t1.M*t91.Wmm.UMnxAn*MMf7KAmnvrot*f1.ra0t.Qitef-I&1=EMSe1.SvtmnwA41.m.*MXX41.Zrs*mvn4mwi入IEmmk(Vw*11rwfttty9.Q1.an1.9*,”?*)IeSvM*MnxIJem9I尔*tM9eoowmem099jemorMwnsreJ
23、2WUVf1.WmMiMR*41J1I八4X6,m1om*MfW*mww!OWV144M)K*IHkinMMDIMnMMfI,7777TMtMH“，切115MMjO1.IM1.MM1.i1.MJM三IMAMW7”黑黑黑黑黑黑篮黑黑然黑然黑黑黑5:AM曹曹U:上七33鲁M二9Mysq1.分析蚊据使用MaPRedUCe将HBASE中的数据，经过清洗、分析之后存储到MySQ1.数据库中。五、数据可视化展示1.权限管理：资源管理：对系统菜单进行管理，可资源进行添加、修改等操作。图10资源管理界面豉图角色管理：是系统角色信息管理地方，在此可对系统的角色进行添加、弱除、修改等操作，以及可以修改角色的查看
24、权限。图11角色管理界面战国用户管理：对系统用户进行管理。图12用户管理界面残留2.生猪大数据分析：出栏均重分析出栏均重分析功能包括：使用图形化展示各类猪出栏时体重对比情况。图13出栏均重分析图交易户数分析交易户数分析功能包括：使用图形化展示各类猪交易数对比情况。图14交易户蚊分析图交易价格分析交易价格分析功能包括：使用图形化展示各类猪开盘收盘价格变化情况。巾岫岫卜峭岫Wtt1.图15交易价格分析图交易金额分析交易金额分析功能包括：使用图形化展示各类猪交易金额变化情况。图16交易金版分析图交易数量分析交易数量分析功能包括：使用图形化展示交易情况。图17交易蚊量分析图生猪出口分析生猪出口分析功能包括：使用图形化展示生猪出口情况。图18生猪出口分析图生猪进口分析生猪进口分析功能包括：使用图形化展示生猪进口情况。图19生猪进口分析图六、项目安排需求分析初步调研根据商业需求确定网站平台需求功能第一周详细需求分折根据初步调研完成具体需求文档第2-4周项目开发项目研发根据需求文档进行项目的设计以第4-14周阶段步时闾备注表1项目时间安排表内容及开发工作测试项目洌试根据测试文裆进行项目测试第15-17周安装部碧部署部署项目上线第18周试运行试运行财项目进行试运行第18周项目上或项目上线项目完成并上鼓第19周
