最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Springboot使用influxDB時(shí)序數(shù)據(jù)庫的實(shí)現(xiàn)

 更新時(shí)間:2021年08月04日 09:44:04   作者:從此寂靜無聲  
項(xiàng)目中需要存放大量設(shè)備日志,且需要對其進(jìn)行簡單的數(shù)據(jù)分析,信息提取工作,所以本文就介紹一下Springboot使用influxDB時(shí)序數(shù)據(jù)庫,感興趣的可以了解一下

項(xiàng)目中需要存放大量設(shè)備日志,且需要對其進(jìn)行簡單的數(shù)據(jù)分析,信息提取工作.

結(jié)合眾多考量因素,項(xiàng)目決定使用時(shí)序數(shù)據(jù)庫中的領(lǐng)頭羊InfluxDB.

引入依賴

項(xiàng)目中使用influxdb-java,在pom文件中添加如下依賴(github地址:https://github.com/influxdata/influxdb-java):

    <dependency>
        <groupId>org.influxdb</groupId>
        <artifactId>influxdb-java</artifactId>
        <version>2.15</version>
    </dependency>

application.yaml文件配置如下所示(請按照實(shí)際情況填寫):

spring:
  influx:
    url: *
    password: admin
    user: 123
    database: log_management

配置

(1) 創(chuàng)建配置類

@Configuration
public class InfluxDbConfig {

    @Value("${spring.influx.url:''}")
    private String influxDBUrl;

    @Value("${spring.influx.user:''}")
    private String userName;

    @Value("${spring.influx.password:''}")
    private String password;

    @Value("${spring.influx.database:''}")
    private String database;

    @Bean
    public InfluxDbUtils influxDbUtils() {
        return new InfluxDbUtils(userName, password, influxDBUrl, database, "");
    }
}
@Data
 public class InfluxDbUtils {
    private String userName;
    private String password;
    private String url;
    public String database;
    private String retentionPolicy;
    // InfluxDB實(shí)例
    private InfluxDB influxDB;

    // 數(shù)據(jù)保存策略
    public static String policyNamePix = "logRetentionPolicy_";

    public InfluxDbUtils(String userName, String password, String url, String database,
                         String retentionPolicy) {
        this.userName = userName;
        this.password = password;
        this.url = url;
        this.database = database;
        this.retentionPolicy = retentionPolicy == null || "".equals(retentionPolicy) ? "autogen" : retentionPolicy;
        this.influxDB = influxDbBuild();
    }

    /**
     * 連接數(shù)據(jù)庫 ,若不存在則創(chuàng)建
     *
     * @return influxDb實(shí)例
     */
    private InfluxDB influxDbBuild() {
        if (influxDB == null) {
            influxDB = InfluxDBFactory.connect(url, userName, password);
        }
        try {
            createDB(database);
            influxDB.setDatabase(database);
        } catch (Exception e) {
            log.error("create influx db failed, error: {}", e.getMessage());
        } finally {
            influxDB.setRetentionPolicy(retentionPolicy);
        }
        influxDB.setLogLevel(InfluxDB.LogLevel.BASIC);
        return influxDB;
    }
 }

構(gòu)建實(shí)體類

InfluxDB中,measurement對應(yīng)于傳統(tǒng)關(guān)系型數(shù)據(jù)庫中的table(database為配置文件中的log_management).
InfluxDB里存儲(chǔ)的數(shù)據(jù)稱為時(shí)間序列數(shù)據(jù),時(shí)序數(shù)據(jù)有零個(gè)或多個(gè)數(shù)據(jù)點(diǎn).
數(shù)據(jù)點(diǎn)包括time(一個(gè)時(shí)間戳),measurement(例如logInfo),零個(gè)或多個(gè)tag,其對應(yīng)于level,module,device_id),至少一個(gè)field(即日志內(nèi)容,msg=something error).
InfluxDB會(huì)根據(jù)tag數(shù)值建立時(shí)間序列(因此tag數(shù)值不能選取諸如UUID作為特征值,易導(dǎo)致時(shí)間序列過多,導(dǎo)致InfluxDB崩潰),并建立相應(yīng)索引,以便優(yōu)化諸如查詢速度.

@Builder
@Data
@Measurement(name = "logInfo")
public class LogInfo {

    // Column中的name為measurement中的列名
    // 此外,需要注意InfluxDB中時(shí)間戳均是以UTC時(shí)保存,在保存以及提取過程中需要注意時(shí)區(qū)轉(zhuǎn)換
    @Column(name = "time")
    private String time;
    // 注解中添加tag = true,表示當(dāng)前字段內(nèi)容為tag內(nèi)容
    @Column(name = "module", tag = true)
    private String module;
    @Column(name = "level", tag = true)
    private String level;
    @Column(name = "device_id", tag = true)
    private String deviceId;
    @Column(name = "msg")
    private String msg;
}

保存數(shù)據(jù)

以下代碼為單條日志保存,influxdb-java亦支持批量保存(因?yàn)榕cInfluxDB通訊均是通過http,因此建議批量保存以減少性能損耗).

    LogInfo logInfo = LogInfo.builder()
        .level(jsonObject.getString("level"))
        .module(module)
        .deviceId(deviceId)
        .msg(jsonObject.getString("msg"))
        .build();
    Point point = Point.measurementByPOJO(logInfo.getClass())
        .addFieldsFromPOJO(logInfo)
        .time(jsonObject.getLong("time"), TimeUnit.MILLISECONDS)
        .build();
    // 出于業(yè)務(wù)考量,設(shè)備可以設(shè)置不同的保存策略(策略名為固定前綴+設(shè)備ID)
    influxDB.write(influxDBUtils.database, InfluxDbUtils.policyNamePix + deviceId, point);

查詢數(shù)據(jù)

因?yàn)榇a與業(yè)務(wù)耦合比較厲害,因此此處僅截選做概要示范.

    // InfluxDB支持分頁查詢,因此可以設(shè)置分頁查詢條件
    String pageQuery = " LIMIT " + request.getPageSize() + " OFFSET " + ((request.getPageNum() - 1) * request.getPageSize());
    // 此處查詢所有內(nèi)容,如果
    String queryCmd = "SELECT * FROM "
        // 查詢指定設(shè)備下的日志信息
        // 要指定從 RetentionPolicyName(保存策略前綴+設(shè)備ID).measurement(logInfo) 中查詢指定數(shù)據(jù))
        + InfluxDbUtils.policyNamePix + request.getDeviceId() + "." + "logInfo"
        // 添加查詢條件(注意查詢條件選擇tag值,選擇field數(shù)值會(huì)嚴(yán)重拖慢查詢速度)
        + queryCondition
        // 查詢結(jié)果需要按照時(shí)間排序
        + " ORDER BY time DESC"
        // 添加分頁查詢條件
        + pageQuery;

選擇時(shí)序數(shù)據(jù)庫,不建議使用刪除以及更新操作,因此不做介紹.

可以通過創(chuàng)建或者RetentionPolicy,來添加或者更新數(shù)據(jù)的刪除時(shí)間.

到此這篇關(guān)于Springboot使用influxDB時(shí)序數(shù)據(jù)庫的實(shí)現(xiàn)的文章就介紹到這了,更多相關(guān)Springboot使用influxDB內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • 關(guān)于BufferedReader讀取文件指定字符集問題

    關(guān)于BufferedReader讀取文件指定字符集問題

    這篇文章主要介紹了關(guān)于BufferedReader讀取文件指定字符集問題,具有很好的參考價(jià)值,希望對大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2021-12-12
  • Java8 Comparator: 列表排序的深入講解

    Java8 Comparator: 列表排序的深入講解

    這篇文章主要給大家介紹了關(guān)于Java 8 Comparator: 列表排序的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用Java8具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-05-05
  • JAVA 對接騰訊云直播的實(shí)現(xiàn)

    JAVA 對接騰訊云直播的實(shí)現(xiàn)

    這篇文章主要介紹了JAVA 對接騰訊云直播的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2020-06-06
  • IDEA遠(yuǎn)程連接HBase及其Java API實(shí)戰(zhàn)詳解

    IDEA遠(yuǎn)程連接HBase及其Java API實(shí)戰(zhàn)詳解

    這篇文章主要介紹了IDEA遠(yuǎn)程連接HBase及其Java API實(shí)戰(zhàn)詳解,本文通過實(shí)例代碼給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
    2021-04-04
  • SpringBoot工程下使用OpenFeign的坑及解決

    SpringBoot工程下使用OpenFeign的坑及解決

    這篇文章主要介紹了SpringBoot工程下使用OpenFeign的坑及解決方案,具有很好的參考價(jià)值,希望對大家有所幫助。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教
    2021-07-07
  • Java實(shí)現(xiàn)在線五子棋對戰(zhàn)游戲(人機(jī)對戰(zhàn))

    Java實(shí)現(xiàn)在線五子棋對戰(zhàn)游戲(人機(jī)對戰(zhàn))

    這篇文章主要為大家詳細(xì)介紹了如何利用Java語言實(shí)現(xiàn)在線五子棋對戰(zhàn)游戲(人機(jī)對戰(zhàn)),文中的實(shí)現(xiàn)步驟講解詳細(xì),感興趣的可以嘗試一下
    2022-09-09
  • Java使用continue語句的實(shí)例詳解

    Java使用continue語句的實(shí)例詳解

    這篇文章主要介紹了Java使用continue語句的實(shí)例詳解的相關(guān)資料,希望通過本文能幫助到大家,讓大家掌握使用方法,需要的朋友可以參考下
    2017-10-10
  • MyBatis-Plus介紹及Spring Boot 3集成指南

    MyBatis-Plus介紹及Spring Boot 3集成指南

    本文介紹了MyBatis-Plus的基本特性及其與Spring Boot 3的集成步驟,通過使用MyBatis-Plus,開發(fā)者可以快速地搭建和開發(fā)數(shù)據(jù)訪問層,同時(shí)提高代碼質(zhì)量和開發(fā)效率,感興趣的朋友一起看看吧
    2024-05-05
  • hadoop?切片機(jī)制分析與應(yīng)用

    hadoop?切片機(jī)制分析與應(yīng)用

    切片這個(gè)詞對于做過python開發(fā)的同學(xué)一定不陌生,但是與hadoop中的切片有所區(qū)別,hadoop中的切片是為了優(yōu)化hadoop的job在處理過程中MapTask階段的性能達(dá)到最優(yōu)而言
    2022-02-02
  • Java中控制流程語句的深入講解

    Java中控制流程語句的深入講解

    流程控制語句顧名思義就是控制程序走向的語句,其中包括條件語句,分支語句和循環(huán)語句,這篇文章主要給大家介紹了關(guān)于Java中控制流程語句的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),需要的朋友可以參考下
    2021-10-10

最新評論

顺义区| 安岳县| 诏安县| 奉贤区| 即墨市| 郎溪县| 泗阳县| 巴东县| 临安市| 盖州市| 高雄市| 南涧| 韩城市| 景泰县| 清涧县| 广安市| 治县。| 鄂托克前旗| 惠水县| 兴业县| 宁化县| 西藏| 益阳市| 五莲县| 农安县| 陇南市| 新龙县| 吉水县| 北辰区| 明溪县| 永平县| 封丘县| 施甸县| 柏乡县| 松阳县| 邛崃市| 五大连池市| 叶城县| 新昌县| 无棣县| 连州市|