Java LoggingMetricsConsumer类代码示例

OStack程序员社区-中国程序员成长平台 › 门户 › 编程› Java›Java编程经验

原作者: [db:作者] 来自: [db:来源] 收藏邀请

本文整理汇总了Java中backtype.storm.metric.LoggingMetricsConsumer类的典型用法代码示例。如果您正苦于以下问题：Java LoggingMetricsConsumer类的具体用法？Java LoggingMetricsConsumer怎么用？Java LoggingMetricsConsumer使用的例子？那么恭喜您, 这里精选的类代码示例或许可以为您提供帮助。

LoggingMetricsConsumer类属于backtype.storm.metric包，在下文中一共展示了LoggingMetricsConsumer类的6个代码示例，这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞，您的评价将有助于我们的系统推荐出更棒的Java代码示例。

示例1: run

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
@Override
protected int run(String[] args) {
    TopologyBuilder builder = new TopologyBuilder();

    // use SQL table for storing the status of the URLS

    builder.setSpout("spout", new SQLSpout());

    builder.setBolt("partitioner", new URLPartitionerBolt())
            .shuffleGrouping("spout");

    builder.setBolt("fetch", new SimpleFetcherBolt()).fieldsGrouping(
            "partitioner", new Fields("key"));

    builder.setBolt("sitemap", new SiteMapParserBolt())
            .localOrShuffleGrouping("fetch");

    builder.setBolt("parse", new ParserBolt()).localOrShuffleGrouping(
            "sitemap");

    builder.setBolt("switch", new StatusStreamBolt())
            .localOrShuffleGrouping("parse");

    builder.setBolt("index", new CloudSearchIndexerBolt())
            .localOrShuffleGrouping("parse");

    builder.setBolt("status", new StatusUpdaterBolt())
            .localOrShuffleGrouping("fetch", Constants.StatusStreamName)
            .localOrShuffleGrouping("sitemap", Constants.StatusStreamName)
            .localOrShuffleGrouping("switch", Constants.StatusStreamName)
            .localOrShuffleGrouping("parse", Constants.StatusStreamName);

    conf.registerMetricsConsumer(LoggingMetricsConsumer.class);

    return submit("crawl", conf, builder);
}

开发者ID:DigitalPebble，项目名称:tescobank，代码行数:37，代码来源:CrawlTopology.java

示例2: configureStorm

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
protected void configureStorm(Configuration conf, Config stormConf) throws IllegalAccessException {
  stormConf.registerSerialization(LogRecord.class);
  //stormConf.registerSerialization(Entity.class);
  stormConf.registerMetricsConsumer(LoggingMetricsConsumer.class);

  for (Iterator<String> iter = conf.getKeys(); iter.hasNext(); ) {
    String key = iter.next();

    String keyString = key.toString();
    String cleanedKey = keyString.replaceAll("\\.\\.", ".");

    String schemaFieldName = cleanedKey.replaceAll("\\.", "_").toUpperCase() + "_SCHEMA";
    Field field = FieldUtils.getField(Config.class, schemaFieldName);
    Object fieldObject = field.get(null);

    if (fieldObject == Boolean.class)
      stormConf.put(cleanedKey, conf.getBoolean(keyString));
    else if (fieldObject == String.class)
      stormConf.put(cleanedKey, conf.getString(keyString));
    else if (fieldObject == ConfigValidation.DoubleValidator)
      stormConf.put(cleanedKey, conf.getDouble(keyString));
    else if (fieldObject == ConfigValidation.IntegerValidator)
      stormConf.put(cleanedKey, conf.getInt(keyString));
    else if (fieldObject == ConfigValidation.PowerOf2Validator)
      stormConf.put(cleanedKey, conf.getLong(keyString));
    else if (fieldObject == ConfigValidation.StringOrStringListValidator)
      stormConf.put(cleanedKey, Arrays.asList(conf.getStringArray(keyString)));
    else if (fieldObject == ConfigValidation.StringsValidator)
      stormConf.put(cleanedKey, Arrays.asList(conf.getStringArray(keyString)));
    else {
      logger.error("{} cannot be configured from XML. Consider configuring in navie storm configuration.");
      throw new UnsupportedOperationException(cleanedKey + " cannot be configured from XML");
    }
  }
}

开发者ID:boozallen，项目名称:cognition，代码行数:36，代码来源:ConfigurableIngestTopology.java

示例3: createConfig

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
private static Config createConfig(Boolean debug) {
  int NUM_WORKERS = 1;
  int NUM_ACKERS = NUM_WORKERS;
  int TIMEOUT = 30;

  Config config = new Config();
  config.setDebug(debug);
  config.setMessageTimeoutSecs(TIMEOUT);
  config.setNumWorkers(NUM_WORKERS);
  config.setNumAckers(NUM_ACKERS);
  config.registerMetricsConsumer(LoggingMetricsConsumer.class, 1);

  return config;
}

开发者ID:Storm-Applied，项目名称:C6-Flash-sale-recommender，代码行数:15，代码来源:RemoteTopologyRunner.java

示例4: main

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
public static void main(String[] args) {
  Config config = new Config();
  config.setDebug(true);
  config.registerMetricsConsumer(LoggingMetricsConsumer.class, 1);

  LocalCluster localCluster = new LocalCluster();
  localCluster.submitTopology("flash-sale-recommender", config, FlashSaleTopologyBuilder.build());
}

开发者ID:Storm-Applied，项目名称:C6-Flash-sale-recommender，代码行数:9，代码来源:LocalTopologyRunner.java

示例5: main

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
public static void main(String... argv) throws Exception {
    CommandLine cli = OutlierOptions.parse(new PosixParser(), argv);
    DataPointExtractorConfig extractorConfig = JSONUtil.INSTANCE.load(new FileInputStream(new File(OutlierOptions.EXTRACTOR_CONFIG.get(cli)))
                                                                     , DataPointExtractorConfig.class
                                                                     );
    com.caseystella.analytics.outlier.streaming.OutlierConfig streamingOutlierConfig = JSONUtil.INSTANCE.load(new FileInputStream(new File(OutlierOptions.STREAM_OUTLIER_CONFIG.get(cli)))
                                                                     , com.caseystella.analytics.outlier.streaming.OutlierConfig.class
                                                                     );

    PersistenceConfig persistenceConfig = JSONUtil.INSTANCE.load(new FileInputStream(new File(OutlierOptions.TIMESERIES_DB_CONFIG.get(cli)))
                                                                     , PersistenceConfig.class
                                                                     );
    int numSpouts = 1;
    int numWorkers = 10;
    if(OutlierOptions.NUM_WORKERS.has(cli)) {
        numWorkers = Integer.parseInt(OutlierOptions.NUM_WORKERS.get(cli));
    }
    if(OutlierOptions.NUM_SPOUTS.has(cli)) {
        numSpouts = Integer.parseInt(OutlierOptions.NUM_SPOUTS.get(cli));
    }
    Map clusterConf = Utils.readStormConfig();
    clusterConf.put("topology.max.spout.pending", 100);
    Config config = new Config();
    config.put("topology.max.spout.pending", 100);
    config.setNumWorkers(numWorkers);
    config.registerMetricsConsumer(LoggingMetricsConsumer.class);

    String topicName = OutlierOptions.TOPIC.get(cli);
    String topologyName = "streaming_outliers_" + topicName;
    String zkConnectString = OutlierOptions.ZK_QUORUM.get(cli);
    /*DataPointExtractorConfig extractorConfig
                                            , com.caseystella.analytics.outlier.streaming.OutlierConfig streamingOutlierConfig
                                            , com.caseystella.analytics.outlier.batch.OutlierConfig batchOutlierConfig
                                            , PersistenceConfig persistenceConfig
                                            , String kafkaTopic
                                            , String zkQuorum
                                            , int numWorkers*/
    boolean startAtBeginning = OutlierOptions.FROM_BEGINNING.has(cli);
    TopologyBuilder topology = createTopology( extractorConfig
                                             , streamingOutlierConfig
                                             , persistenceConfig
                                             , topicName
                                             , zkConnectString
                                             , OutlierOptions.ES_NODE.get(cli)
                                             , numWorkers
                                             , numSpouts
                                             , OutlierOptions.NUM_INDEXING_WORKERS.has(cli)?
                                               Integer.parseInt(OutlierOptions.NUM_INDEXING_WORKERS.get(cli)):
                                               5
                                             , OutlierOptions.INDEX.has(cli)?
                                               OutlierOptions.INDEX.get(cli):
                                               "{source}/outlier"
                                             , startAtBeginning
                                             );
    StormSubmitter.submitTopologyWithProgressBar( topologyName, clusterConf, topology.createTopology());
    //Nimbus.Client client = NimbusClient.getConfiguredClient(clusterConf).getClient();
}

开发者ID:cestella，项目名称:streaming_outliers，代码行数:58，代码来源:Topology.java

示例6: run

import backtype.storm.metric.LoggingMetricsConsumer; //导入依赖的package包/类
@Override
protected int run(String[] args) {
    TopologyBuilder builder = new TopologyBuilder();

    builder.setSpout("spout", new RandomURLSpout());

    builder.setSpout("spoutAlfresco", new AlfrescoSpout());

    builder.setBolt("process", new ProcessNodes())
            .shuffleGrouping("spoutAlfresco");

    builder.setBolt("partitioner", new URLPartitionerBolt())
            .shuffleGrouping("spout");

    builder.setBolt("fetch", new FetcherBolt()).fieldsGrouping(
            "partitioner", new Fields("key"));

    builder.setBolt("sitemap", new SiteMapParserBolt())
            .localOrShuffleGrouping("fetch");

    builder.setBolt("parse", new JSoupParserBolt()).localOrShuffleGrouping(
            "sitemap");

    builder.setBolt("switch", new StatusStreamBolt())
            .localOrShuffleGrouping("parse");

    builder.setBolt("index", new IndexerBolt()).localOrShuffleGrouping(
            "parse");


    builder.setBolt("status", new PrinterBolt())
            .localOrShuffleGrouping("fetch", Constants.StatusStreamName)
            .localOrShuffleGrouping("sitemap", Constants.StatusStreamName)
            .localOrShuffleGrouping("process", Constants.StatusStreamName)
            .localOrShuffleGrouping("switch", Constants.StatusStreamName)
            .localOrShuffleGrouping("parse", Constants.StatusStreamName);

    conf.registerMetricsConsumer(LoggingMetricsConsumer.class);

    return submit("crawl", conf, builder);
}

开发者ID:zaizi，项目名称:alfresco-apache-storm-demo，代码行数:42，代码来源:CrawlTopology.java

注：本文中的backtype.storm.metric.LoggingMetricsConsumer类示例整理自Github/MSDocs等源码及文档管理平台，相关代码片段筛选自各路编程大神贡献的开源项目，源码版权归原作者所有，传播和使用请参考对应项目的License；未经允许，请勿转载。

鲜花

握手

雷人

路过

鸡蛋

该文章已有0人参与评论

请发表评论

全部评论

专题导读

More+

10-27 六六分期app的软件客服如何联系？(六六分期

11-06 可心卡盟:win10系统火狐flash插件崩溃怎么

11-06 亲亲特价:怎么删除回收站图标

11-06 济南大学虚拟社区:鲁大师节能降温的具体办

11-06 xlueops.exe:无线网络安装向导

11-06 女斗合众国:win7系统cf与主机连接不稳定怎

11-06 0xc000022-[cf烟雾头]cf怎么调烟雾头

11-06 qizideyouhuo:应用程序无法正常启动0xc0000

11-06 ipz-185:win7系统vcf文件怎么打开

11-06 傻哥蹦迪:win10系统s4怎么打开usb调试

11-06 八神浩树gtaste:回收站清空了怎么恢复

11-06 妖尾之黑色守护:win10系统电脑没有1440x900

11-06 校园至尊魔王小说:win7系统浏览网页时字体

11-06 女斗合众国:win10系统访问共享文件夹提示请

11-06 tokyo hot n0654:恢复win7系统默认字体一招

11-06 雨酷仙境:设置win7系统转移临时文件夹腾出

11-06 阿穆纳伊之杖:win7系统开始菜单在右边还原

11-06 tunespotting:win10系统火狐flash插件总是

11-06 甘尔葛分析师：计谋网站seo关键词暴涨有什

11-06 蔡贵霖: 计谋网站seo关键词暴涨有什么秘密

11-06 博益网首页:ao3网页版进入不了解决方法

11-06 漏斗子专栏: 网站数据分析小白易懂精华篇

11-06 见证双虹怎么做:win7系统开启telnet命令的

11-06 颾狐蝶蜋:系统资源不足无法完成请求的服务

11-06 国光中学校歌:提交网站到alexa查询详细步骤

11-06 西安有情天:静态网页和动态网页的区别

11-06 红木雅尚斋:外部链接构造对网站的好处

11-06 前官礼遇：防止域名劫持–增强域安全性的10

11-06 密传二转答案: 中文分词算法有哪些

11-06 金泉家园邮编:百度快照劫持的表现及应对方

Java LoadToast类代码示例发布时间：2022-05-23

Java ConditionalOnNotWebApplication类代码示例发布时间：2022-05-23

剪的笔顺,诠释剪的笔画,认识剪的部首

1 六六分期app的软件客服如何联系？(六六分期

六六分期app的软件客服如何联系？不知道吗？加qq群【895510560】即可！标题：六六分期

阅读：18890|2023-10-27

2 可心卡盟:win10系统火狐flash插件崩溃怎么

今天小编告诉大家如何处理win10系统火狐flash插件总是崩溃的问题，可能很多用户都不知

阅读：9895|2022-11-06

3 亲亲特价:怎么删除回收站图标

今天小编告诉大家如何对win10系统删除桌面回收站图标进行设置，可能很多用户都不知道

阅读：8293|2022-11-06

4 济南大学虚拟社区:鲁大师节能降温的具体办

今天小编告诉大家如何对win10系统电脑设置节能降温的设置方法，想必大家都遇到过需要

阅读：8652|2022-11-06

5 xlueops.exe:无线网络安装向导

我们在使用xp系统的过程中,经常需要对xp系统无线网络安装向导设置进行设置，可能很多

阅读：8582|2022-11-06

6 女斗合众国:win7系统cf与主机连接不稳定怎

今天小编告诉大家如何处理win7系统玩cf老是与主机连接不稳定的问题，可能很多用户都不

阅读：9589|2022-11-06

7 0xc000022-[cf烟雾头]cf怎么调烟雾头

电脑对日常生活的重要性小编就不多说了，可是一旦碰到win7系统设置cf烟雾头的问题，很

阅读：8576|2022-11-06

8 qizideyouhuo:应用程序无法正常启动0xc0000

我们在日常使用电脑的时候，有的小伙伴们可能在打开应用的时候会遇见提示应用程序无法

阅读：7966|2022-11-06

9 ipz-185:win7系统vcf文件怎么打开

今天小编告诉大家如何对win7系统打开vcf文件进行设置，可能很多用户都不知道怎么对win

阅读：8584|2022-11-06

10 傻哥蹦迪:win10系统s4怎么打开usb调试

今天小编告诉大家如何对win10系统s4开启USB调试模式进行设置，可能很多用户都不知道怎

阅读：7505|2022-11-06

客服电话

电子邮件

Java LoggingMetricsConsumer类代码示例

示例1: run

示例2: configureStorm

示例3: createConfig

示例4: main

示例5: main

示例6: run

请发表评论

全部评论

上一篇：

下一篇：

GitbookIO/gitbook:

phcollignon/helm3: Ressources for "

juleswhite/mobile-cloud-asgn1

kyamagu/matlab-json: Use official API: h

墙壁眼睛膝盖

剪的笔顺,诠释剪的笔画,认识剪的部首

六六分期app的软件客服如何联系？(六六分期

florent37/ViewAnimator: A fluent Android

florent37/Shrine-MaterialDesign2: implem

CVE-2020-36276

SimpleSoftwareIO/simple-sms: Send and re

关于我们

产品与服务

解决方案

139-2527-9053

客服电话

电子邮件

Java LoggingMetricsConsumer类代码示例

示例1: run

示例2: configureStorm

示例3: createConfig

示例4: main

示例5: main

示例6: run

请发表评论

全部评论

上一篇：

下一篇：

GitbookIO/gitbook:

phcollignon/helm3: Ressources for &quot;

juleswhite/mobile-cloud-asgn1

kyamagu/matlab-json: Use official API: h

墙壁眼睛膝盖

剪的笔顺,诠释剪的笔画,认识剪的部首

六六分期app的软件客服如何联系？(六六分期

florent37/ViewAnimator: A fluent Android

florent37/Shrine-MaterialDesign2: implem

CVE-2020-36276

SimpleSoftwareIO/simple-sms: Send and re

关于我们

产品与服务

解决方案

139-2527-9053

phcollignon/helm3: Ressources for "