用數(shù)據(jù)流處理復雜數(shù)據(jù)
什么是數(shù)據(jù)流?可以把數(shù)據(jù)流想象成一個生產(chǎn)流水線,可以從流水線的一頭輸入表單數(shù)據(jù),經(jīng)過流水線各個環(huán)節(jié)的處理,從流水線的另一端輸出經(jīng)過處理后的數(shù)據(jù)。
入口
分析->數(shù)據(jù)流
基本操作
界面布局
點擊“創(chuàng)建數(shù)據(jù)流”后進入數(shù)據(jù)流設計頁面。設計界面分為:節(jié)點選擇區(qū)、數(shù)據(jù)流設置區(qū)和節(jié)點設置區(qū)。
操作方式
- 節(jié)點選擇區(qū):可拖拽節(jié)點添加到數(shù)據(jù)流設置區(qū) 。
- 數(shù)據(jù)流設置區(qū):設置數(shù)據(jù)流的流轉(zhuǎn);選中一個節(jié)點名,則頁面底部將顯示節(jié)點設置區(qū),可對節(jié)點進行設置。
- 節(jié)點設置區(qū):對節(jié)點進行詳細配置,使得數(shù)據(jù)流按照既定規(guī)則處理加工數(shù)據(jù)。
節(jié)點介紹
- 添加節(jié)點
輸入節(jié)點指選擇要處理的數(shù)據(jù),即數(shù)據(jù)源,可選擇單一表單作為數(shù)據(jù)源,也可選擇多個表單。 點擊“+數(shù)據(jù)源”則系統(tǒng)會自動添加一個輸入節(jié)點及輸出節(jié)點。點擊輸入節(jié)點即可選擇數(shù)據(jù)表單及表單字段,如下圖
- 節(jié)點連線
節(jié)點之間用連接線相連即可。
- 節(jié)點對齊
提供水平等距、垂直等距、水平對齊、垂直對齊四種對齊方式.全選要對齊的節(jié)點后,點擊任意一種對齊方式即可。
- 數(shù)據(jù)預覽
點擊輸出節(jié)點后會顯示數(shù)據(jù)流的整合數(shù)據(jù)預覽。
或點擊數(shù)據(jù)流卡片進入數(shù)據(jù)詳情頁面查看。
輸入
相當于流水線的輸入。一個數(shù)據(jù)流可以有多個輸入,輸入均為表單數(shù)據(jù)。選擇表單后,還可以選擇輸入的字段。子表數(shù)據(jù)也可以作為輸入字段。當同時選擇主表字段和子表字段作為輸入字段時,數(shù)據(jù)將會將主子表展開作為普通的二維表輸入
輸出
相當于流水線的輸出。一個數(shù)據(jù)流只能有一個輸出。輸出的數(shù)據(jù)可以理解為一個新的表單,但只能查看,不能修改。可以作為報表、儀表盤、表單填寫關(guān)聯(lián)的數(shù)據(jù)源。
數(shù)據(jù)處理
相當于流水線上的各處理環(huán)節(jié)。支持橫向連接、追加合并、分組匯總、數(shù)據(jù)篩選和字段設置等幾種數(shù)據(jù)處理方式。
橫向連接
將兩個表的數(shù)據(jù)左右拼接在一起。超過2個表時可通過多次拼接實現(xiàn)。即A1、A2拼接成A,B1、B2拼接成B,A和B再拼接成C。如果你對SQL有一定了解,可以用如下SQL進行類比:
| 連接方式 | 類似的SQL |
|---|---|
| 橫向連接(左連接) | SELECT a.fieldA,b.fieldB FROM tableA a LEFT JOIN tableB b ON a.id=b.id |
| 橫向連接(內(nèi)連接) | SELECT a.fieldA,b.fieldB FROM tableA a INNER JOIN tableB b ON a.id=b.id| |
追加合并
將兩個表的數(shù)據(jù)上下拼接在一起,最多支持5個表的拼接,超過5個表時可以通過多次拼接實現(xiàn)。如果你對SQL有一定了解,可以用如下SQL進行類比:
| 連接方式 | 類似的SQL |
|---|---|
| 追加合并 | SELECT a.fieldA,a.fieldB FROM tableA a union SELECT b.fieldC,b.fieldD FROM tableA b |
分組匯總
對輸入二維表的數(shù)據(jù)進行分組匯總。如果你對SQL有一定了解,可以用如下SQL進行類比:
| 處理方式 | 類似的SQL | 說明 |
|---|---|---|
| 分組匯總 | SELECT fieldA,SUM(fieldB) FROM tableA GROUP by fieldA | 分組字段fieldA,匯總字段fieldB,匯總方式為求和 |
過濾篩選
對輸入二維表的數(shù)據(jù)進行數(shù)據(jù)篩選。支持多條件篩選,用并且(and)、或者(or)進行連接.
字段設置
對字段進行一些基本的設置,如截取、轉(zhuǎn)化、重命名等。支持利用函數(shù)和公式對字段進行設置。
輸出表使用
通過數(shù)據(jù)流處理后輸出的表單,可以在表單中進行調(diào)用。目前支持:
1、作為填寫關(guān)聯(lián)數(shù)據(jù)源
和正常的填寫關(guān)聯(lián)設置類似。點擊設置后,選擇數(shù)據(jù)源時,選擇數(shù)據(jù)流名稱即可。
2、作為報表數(shù)據(jù)源
將數(shù)據(jù)流輸出表作為報表的數(shù)據(jù)源,進行統(tǒng)計分析。
3、作為應用儀表盤數(shù)據(jù)源
數(shù)據(jù)流輸出表同樣可以在應用儀表盤內(nèi)進行展示、統(tǒng)計分析。
1、數(shù)據(jù)流設計好后需要啟用才能正式生效,啟用時,會對數(shù)據(jù)源中的所有數(shù)據(jù)進行初始化處理。如果原表單中的數(shù)據(jù)量較大,啟用可能需要較長的時間。
2、啟用后的數(shù)據(jù)流如果要修改,需要先停用。
3、如果數(shù)據(jù)源中的表單數(shù)據(jù)發(fā)生變化,數(shù)據(jù)流的數(shù)據(jù)也會相應改變
4、目前不支持在數(shù)據(jù)流中選擇的字段:收費項目、商品字段、預約字段、多選框字段、上傳文件字段。