摘要：摘要阿里云表格存儲(chǔ)于近期功能再升級(jí)，升級(jí)后的表格存儲(chǔ)支持對(duì)采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)，其新增支持，以及最新發(fā)布的能夠幫助用戶輕松構(gòu)建千萬級(jí)和流系統(tǒng)。功能一支持對(duì)采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)阿里云表格存儲(chǔ)支持對(duì)采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)。

摘要： 阿里云表格存儲(chǔ)于近期功能再升級(jí)，升級(jí)后的表格存儲(chǔ)支持對(duì)DataHub采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)，其Python SDK新增支持Python 3.x，以及最新發(fā)布的TimelineLib能夠幫助用戶輕松構(gòu)建千萬級(jí)IM和Feed流系統(tǒng)。

點(diǎn)此查看原文：http://click.aliyun.com/m/43196/

阿里云表格存儲(chǔ)于近期功能再升級(jí)，升級(jí)后的表格存儲(chǔ)支持對(duì)DataHub采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)，其Python SDK新增支持Python 3.x，以及最新發(fā)布的TimelineLib能夠幫助用戶輕松構(gòu)建千萬級(jí)IM和Feed流系統(tǒng)。

功能一：支持對(duì)DataHub采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)

阿里云表格存儲(chǔ)支持對(duì)DataHub采集的數(shù)據(jù)進(jìn)行持久化存儲(chǔ)。用戶可以通過DataHub服務(wù)對(duì)各種移動(dòng)設(shè)備、應(yīng)用軟件、網(wǎng)站服務(wù)、傳感器等產(chǎn)生的大量流式數(shù)據(jù)進(jìn)行持續(xù)不斷的采集，并實(shí)時(shí)寫入到表格存儲(chǔ)中進(jìn)行持久化存儲(chǔ)，基于表格存儲(chǔ)提供低成本、彈性與高性能的數(shù)據(jù)在線服務(wù)。

據(jù)了解，該新功能適合使用DataHub進(jìn)行數(shù)據(jù)采集并對(duì)數(shù)據(jù)有持久化存儲(chǔ)與在線服務(wù)需求的用戶。

持久化存儲(chǔ)功能的實(shí)現(xiàn)依賴DataHub DataConnector功能將DataHub服務(wù)中的流式數(shù)據(jù)同步到其他云產(chǎn)品中，目前支持將Topic中的數(shù)據(jù)實(shí)時(shí)/準(zhǔn)實(shí)時(shí)同步到MaxCompute(ODPS)、OSS、Elasticsearch、RDS Mysql、ADS、TableStore中。用戶只需要向DataHub中寫入一次數(shù)據(jù)，并在DataHub服務(wù)中配置好同步功能，便可以在各個(gè)云產(chǎn)品中使用這份數(shù)據(jù)。數(shù)據(jù)同步支持at least once語義，在網(wǎng)絡(luò)服務(wù)異常等小概率場景下可能會(huì)導(dǎo)致目的端的數(shù)據(jù)產(chǎn)生重復(fù)。

前置條件

創(chuàng)建TableStore DataConnector主要需要如下前置條件：

· TableStore相關(guān)信息，包括TableStore服務(wù)的Endpoint、TableStore實(shí)例及其對(duì)應(yīng)的Table；

· DataHub Topic的Owner/Creator賬號(hào), 才有相應(yīng)的權(quán)限操作DataConnector，包括創(chuàng)建，刪除等；

· TableStore表的主鍵列必須在DataHub Topic下有字段一一對(duì)應(yīng)（定義順序可以不一致）；

· 授權(quán)服務(wù)角色AliyunDataHubDefaultRole，使得DataHub可以訪問用戶的TableStore資源。

操作流程

進(jìn)入Topic的詳情頁面：

選擇同步TableStore并填寫相關(guān)配置：

在DataConnector頁面查看數(shù)據(jù)歸檔狀態(tài)：

配置說明

注意事項(xiàng)

· TableStore表的主鍵列必須在對(duì)應(yīng)的DataHub Topic下存在同名的字段，由于DataHub大小寫不敏感，所以TableStore的主鍵名如果存在大寫字母，那么在DataHub Topic有對(duì)應(yīng)小寫字段；

· 同步TableStore表的DataConnector任務(wù)僅支持TUPLE類型Topic；

· TableStore服務(wù)端自身的限制最大每次批量寫入的行數(shù)為200，具體TableStore的相關(guān)限制請(qǐng)參考https://help.aliyun.com/docum...。

功能二：表格存儲(chǔ)Python SDK支持Python 3.x

TableStore Python SDK 從現(xiàn)在開始可以支持Python 3了，Python的3.0版本，相對(duì)于Python的早期版本，這是一個(gè)較大的升級(jí)。為了不帶入過多的累贅，Python 3.0在設(shè)計(jì)的時(shí)候沒有考慮向下兼容，所以Python2和Python3有較大的不兼容。目前已經(jīng)有大量的項(xiàng)目和系統(tǒng)開始使用Python 3，Python官方對(duì)于Python 2的支持也將在未來3年內(nèi)放棄支持。

為了更好的滿足Python 3用戶的需求，TableStore的新版本SDK對(duì)Python3做了適配性，同一個(gè)版本可以支持Python2.6，Python2.7，Python3.3，Python3.4，Python3.5和Python3.6。用戶在安裝的時(shí)候，不管是通過setup.py還是pip方式，安裝腳本會(huì)自動(dòng)根據(jù)當(dāng)前使用的Python的版本選擇不同的安裝內(nèi)容，保證安裝好的TableStore Python SDK可以完美適配Python版本。

該項(xiàng)新功能適用于使用表格存儲(chǔ)Python SDK的全網(wǎng)用戶。

功能三：TimelineLib

TableStore發(fā)布TimelineLib，現(xiàn)在用戶可以通過TimelineLib輕松構(gòu)建千萬級(jí)IM和Feed流系統(tǒng)。 TimelineLib基于表格存儲(chǔ)，實(shí)現(xiàn)了Timeline概念模型，并將該模型轉(zhuǎn)換成為對(duì)存儲(chǔ)系統(tǒng)、同步系統(tǒng)的讀寫接口，并封裝了對(duì)底層存儲(chǔ)系統(tǒng)的交互邏輯。

用戶基于TimelineLib即可輕松實(shí)現(xiàn)一個(gè)基于表格存儲(chǔ)的IM或者Feed流系統(tǒng)，并能夠充分的將表格存儲(chǔ)的高并發(fā)、低延時(shí)特性利用起來。此功能特別適合需要IM、Feed流系統(tǒng)的游戲、社交類客戶。