2017-03-30 spark 那些年不懂的spark(2) partitionBy && s31df.write.partitionBy('date', 'index1', 'index2', 'index3').parquet('some/path/') 阅读全文
2017-03-19 spark 那些年不懂的spark 感悟spark是一个好东西。流式处理数据,扩容方便,较大程度上的利用机器,学习还是很有必要的。这几个星期的使用,也踩了不少坑。世界上的很多东西,不是难,而是不知道。 阅读全文
2016-08-21 elasticsearch elasticsearch系列笔记(六) 索引 创建索引12345678PUT /my_index{ "settings" {} "mappings": { "type_one":{}, "type_two":{}, }} 阅读全文
2016-08-12 elasticsearch elasticsearch系列笔记(五) 结构化查询 结构化查询Query DSL1234567891011GET /_search { "query": { QUERY_NAME: { FIELD_NAME: { ARGUMENT: VALUE, ARGUMENT: VALUE, } } } } 阅读全文
2016-08-09 elasticsearch elasticsearch系列笔记(四) 搜索 路由文档到分片1shard = hash(routing) % number_of_primary_shards 阅读全文