AutoFitTableAppender

AutoFitTableAppender (AFTA) 适用于存储与 C++ API 端的表结构和存储及 DolphinDB Server 端的表结构不完全一致的情况,在上传数据时,AFTA 会尝试先将表结构转换为与 DolphinDB Server 中表结构一致,再通过 tableInsert 接口将数据上传。这是一种单线程同步的写入方式。

构造方法

AutoFitTableAppender(string dbUrl, string tableName, DBConnection& conn);

参数:

  • dbUrl: 分布式数据库地址,插入内存表时此处填空字符串即可
  • tableName: 表名。
  • DBConnection: 一个已经连接成功的DBConnection

数据插入方法

int append(TableSP table);

参数 table 表示由待插入数据组成的表:

返回值:插入数据的条数。

函数说明:该方法会阻塞直至数据插入完成。

环境准备

执行下面的脚本创建一个分布式表:

dbPath = "dfs://SAMPLE_TRDDB";
tableName = `demoTable
if(existsDatabase(dbPath)){
	dropDatabase(dbPath)
}
db = database(dbPath, VALUE, 2010.01.01..2010.01.30)
pt=db.createPartitionedTable(table(1000000:0, `name`date`price, [STRING,DATE,DOUBLE]), tableName, `date)

C++ 代码实现

TableSP createDemoTable(){
    vector<string> colNames = {"name", "date","price"};
    vector<DATA_TYPE> colTypes = {DT_STRING, DT_DATE, DT_DOUBLE};
    int colNum = 3, rowNum = 10, indexCapacity = 10;
    ConstantSP table = Util::createTable(colNames, colTypes, rowNum, indexCapacity);
    vector<VectorSP> columnVecs;
    for(int i = 0; i < colNum; ++i)
        columnVecs.push_back(table->getColumn(i));

    for(int i = 0; i < rowNum; ++i){
        columnVecs[0]->set(i, Util::createString("name_"+std::to_string(i)));
        columnVecs[1]->set(i, Util::createDate(2010, 1, i+1));
        columnVecs[2]->set(i, Util::createDouble((rand()%100)/3.0));
    }
    return table;
}

int main(int argc, const char **argv)
{
    DBConnection conn;
    conn.connect("127.0.0.1", 8848, "admin", "123456");
    AutoFitTableAppender appender("dfs://SAMPLE_TRDDB", "demoTable", conn);
    TableSP table = createDemoTable();
    appender.append(table);
    ConstantSP result = conn.run("select * from loadTable('dfs://SAMPLE_TRDDB', `demoTable)");
    std::cout <<  result->getString() << std::cout;
}