天天看点

深入Log4J源码之LoggerRepository和Configurator

loggerrepository从字面上理解,它是一个logger的容器,它会创建并缓存logger实例,从而具有相同名字的logger实例不会多次创建,以提高性能。它的这种特性有点类似spring的ioc概念。log4j支持两种配置文件:properties文件和xml文件。configurator解析配置文件,并将解析后的信息添加到loggerrepository中。logmanager最终将loggerrepository和configurator整合在一起。

loggerrepository是一个logger的容器,它负责创建、缓存logger实例,同时它也维护了logger之间的关系,因为在log4j中,所有logger都组装成以rootlogger为根的一棵树,树的层次由logger的name来决定,其中以’.’分隔。

除了做为一个logger容器,它还有一个threshold属性,用于过滤所有在threshold级别以下的日志。以及其他和logger操作相关的方法和属性。

loggerrepository的接口定义如下:

 1 public interface loggerrepository {

 2     public void addhierarchyeventlistener(hierarchyeventlistener listener);

 3     boolean isdisabled(int level);

 4     public void setthreshold(level level);

 5     public void setthreshold(string val);

 6     public void emitnoappenderwarning(category cat);

 7     public level getthreshold();

 8     public logger getlogger(string name);

 9     public logger getlogger(string name, loggerfactory factory);

10     public logger getrootlogger();

11     public abstract logger exists(string name);

12     public abstract void shutdown();

13     public enumeration getcurrentloggers();

14     public abstract void fireaddappenderevent(category logger, appender appender);

15     public abstract void resetconfiguration();

16 }

hierarchy是log4j中默认对loggerrepository的实现类,它用于表达其内部的logger是以层次结构存储的。在对loggerrepository接口的实现中,getlogger()方法是其最核心的实现,因而首先从这个方法开始。

hierarchy中用一个hashtable来存储所有logger实例,它以categorykey作为key,logger作为value,其中categorykey是对logger中name字符串的封装,之所以要引入这个类是出于性能考虑,因为它会缓存name字符串的hash code,这样在查找过程中计算hash code时就可以直接取得而不用每次都计算。

 1 class categorykey {

 2     string name;

 3     int hashcache;

 4 

 5     categorykey(string name) {

 6         this.name = name;

 7         hashcache = name.hashcode();

 8     }

 9     final public int hashcode() {

10         return hashcache;

11     }

12     final public boolean equals(object rarg) {

13         if (this == rarg)

14             return true;

15         if (rarg != null && categorykey.class == rarg.getclass())

16             return name.equals(((categorykey) rarg).name);

17         else

18             return false;

19     }

20 }

getlogger()方法中有一个重载函数提供loggerfactory接口,它用于没有在loggerrepository中找到logger实例时创建相应的logger实例,默认实现直接创建一个logger实例,用户可以通过自定义loggerfactory实现创建自己的logger实例。

1 public interface loggerfactory {

2     public logger makenewloggerinstance(string name);

3 }

4 class defaultcategoryfactory implements loggerfactory {

5     public logger makenewloggerinstance(string name) {

6         return new logger(name);

7     }

8 }

getlogger()方法首先根据传入name创建categorykey实例,而后从缓存ht字段中查找:

1.       如果找到对应的logger实例,则直接返回该实例。

2.       如果没有找到任何实例,则使用loggerfactory创建新的logger实例,并将该实例缓存到ht集合中,同时更新新创建logger实例的parent属性。更新parent属性最简单的做法是从后往前以’.’为分隔符截取字符串,使用截取后的字符串从ht集合中查找是否存在logger实例,如果存在,则新创建的logger实例的parent即为找到的实例,若在整个遍历过程中都没有找到相应的parent实例,则其parent实例为root。然而如果一个“x.y.z.w”logger起初的parent设置为root,而后出现“x.y.z”logger实例,那么就需要更新“x.y.z.w”logger的parent为“x.y.z”logger实例,此时就会遇到一个如何找到在集合中已经存在的“x.y.z”logger实例子节点的问题。当然一种简单的做法是遍历ht集合中所有实例,判断那个实例是不是“x.y.z”logger实例的子节点,是则更新其parent节点。由于每次的遍历会引起一些性能问题,因而log4j使用provisionnode事先将所有的可能相关的子节点保存起来,并将provisionnode实例添加到ht集合中,这样只要找到对应的provisionnode实例,就可以找到所有相关的子节点了。比如对“x.y.z.w”logger实例,它会产生三个provisionnode实例(当然如果相应的实例已经存在,则直接添加而无需创建,另外,如果相应节点已经是logger实例,那么将“x.y.z.w”logger实例的parent直接指向它即可):provisionnode(“x”), provisionnode(“x.y”), provisionnode(“x.y.z”),他们都存储了“x.y.z.w”logger实例作为其子节点。

 1 class provisionnode extends vector {

 2     provisionnode(logger logger) {

 3         super();

 4         this.addelement(logger);

 5     }

 6 }

 7 final private void updateparents(logger cat) {

 8     string name = cat.name;

 9     int length = name.length();

10     boolean parentfound = false;

11     // if name = "x.y.z.w", loop thourgh "x.y.z", "x.y" and "x"

12     for (int i = name.lastindexof('.', length - 1); i >= 0; i = name

13             .lastindexof('.', i - 1)) {

14         string substr = name.substring(0, i);

15         categorykey key = new categorykey(substr); 

16         object o = ht.get(key);

17         if (o == null) {

18             provisionnode pn = new provisionnode(cat);

19             ht.put(key, pn);

20         } else if (o instanceof category) {

21             parentfound = true;

22             cat.parent = (category) o;

23             break; // no need to update the ancestors of the closest

24                     // ancestor

25         } else if (o instanceof provisionnode) {

26             ((provisionnode) o).addelement(cat);

27         } else {

28             exception e = new illegalstateexception(

29                     "unexpected object type " + o.getclass() + " in ht.");

30             e.printstacktrace();

31         }

32     }

33     // if we could not find any existing parents, then link with root.

34     if (!parentfound)

35         cat.parent = root;

36 }

3.   如果找到的是provisionnode实例,首先使用factory创建新的logger实例,将该实例添加到ht集合中,然后更新找到的provisionnode内部所有logger的parent字段以及新创建logger的parent字段。更新过程中需要注意provisionnode中的logger实例已经指向了正确的parent了,所以只要更新那些provisionnode中logger实例指向的parent比新创建的logger本身层次要高的那些parent属性。比如开始插入“x.y.z”logger实例,而后插入“x.y.z.w”logger实例,此时provisionnode(“x”)认为“x.y.z”logger实例和“x.y.z.w”logger实例都是它的子节点,而后插入“x”logger实例,那么只需要更新“x.y.z”logger的父节点为“x”logger实例即可,而不用更新“x.y.z.w”logger实例的父节点。

 1 final private void updatechildren(provisionnode pn, logger logger) {

 2     final int last = pn.size();

 3     for (int i = 0; i < last; i++) {

 4         logger l = (logger) pn.elementat(i);

 5         // unless this child already points to a correct (lower) parent,

 6         // make cat.parent point to l.parent and l.parent to cat.

 7         if (!l.parent.name.startswith(logger.name)) {

 8             logger.parent = l.parent;

 9             l.parent = logger;

10         }

12 }

综合起来,getlogger()方法的实现代码如下:

 1 public logger getlogger(string name, loggerfactory factory) {

 2     categorykey key = new categorykey(name);

 3     logger logger;

 4     synchronized (ht) {

 5         object o = ht.get(key);

 6         if (o == null) {

 7             logger = factory.makenewloggerinstance(name);

 8             logger.sethierarchy(this);

 9             ht.put(key, logger);

10             updateparents(logger);

11             return logger;

12         } else if (o instanceof logger) {

13             return (logger) o;

14         } else if (o instanceof provisionnode) {

15             logger = factory.makenewloggerinstance(name);

16             logger.sethierarchy(this);

17             ht.put(key, logger);

18             updatechildren((provisionnode) o, logger);

19             updateparents(logger);

20             return logger;

21         } else {

22             // it should be impossible to arrive here

23             return null; // but let's keep the compiler happy.

24         }

25     }

26 }

其他的方法实现则比较简单,对loggerrepository来说,它也可以像其注册hierarchyeventlistener监听器,每当向一个logger添加或删除appender,该监听器就会触发。

 1 public interface hierarchyeventlistener {

 2     public void addappenderevent(category cat, appender appender);

 3     public void removeappenderevent(category cat, appender appender);

 4 }

 5 private vector listeners;

 6 public void addhierarchyeventlistener(hierarchyeventlistener listener) {

 7     if (listeners.contains(listener)) {

 8         loglog.warn("ignoring attempt to add an existent listener.");

 9     } else {

10         listeners.addelement(listener);

13 public void fireaddappenderevent(category logger, appender appender) {

14     if (listeners != null) {

15         int size = listeners.size();

16         hierarchyeventlistener listener;

17         for (int i = 0; i < size; i++) {

18             listener = (hierarchyeventlistener) listeners.elementat(i);

19             listener.addappenderevent(logger, appender);

20         }

21     }

22 }

23 void fireremoveappenderevent(category logger, appender appender) {

24     if (listeners != null) {

25         int size = listeners.size();

26         hierarchyeventlistener listener;

27         for (int i = 0; i < size; i++) {

28             listener = (hierarchyeventlistener) listeners.elementat(i);

29             listener.removeappenderevent(logger, appender);

30         }

31     }

32 }

hierarchy中保存了threshold字段,用户可以设置threshold。而对root实例,它在够着hierarchy时就被指定了。getcurrentloggers()方法将ht集合中所有的logger实例取出。shutdown()方法遍历所有logger实例以及root实例,调用所有附加其上的appender的close()方法,并将所有appender实例从logger中移除,最后触发appenderremove事件。resetconfiguration()方法将root字段初始化、调用shutdown()方法移除logger中的所有appender、初始化所有logger实例当不将其从loggerrepository中移除、清楚renderermap和throwablerender中的数据。

renderersupport接口支持用户为不同的类设置相应的objectrender实例,从而可以从被渲染的类中或许更多的信息而不是默认的调用其tostring()方法。

 1 public interface renderersupport {

 2     public renderermap getrenderermap();

 3     public void setrenderer(class renderedclass, objectrenderer renderer);

 5 hierarchy类实现了renderedsupprt接口,而且它的实现也很简单:

 6 renderermap renderermap;

 7 public hierarchy(logger root) {

 8     

深入Log4J源码之LoggerRepository和Configurator

 9     renderermap = new renderermap();

10     

深入Log4J源码之LoggerRepository和Configurator

11 }

12 public void addrenderer(class classtorender, objectrenderer or) {

13     renderermap.put(classtorender, or);

14 }

15 public renderermap getrenderermap() {

16     return renderermap;

17 }

18 public void setrenderer(class renderedclass, objectrenderer renderer) {

19     renderermap.put(renderedclass, renderer);

在renderermap类实现中,它使用hastable保存被渲染的类实例和相应的objectrender实例,在查找一个类是否存在注册的渲染类时,如果它本身没有找到,需要向上尝试其父类和接口是否有注册相应的objectrender类,如果都没有找到,则返回默认的objectrender。

 1 public objectrenderer get(class clazz) {

 2     objectrenderer r = null;

 3     for (class c = clazz; c != null; c = c.getsuperclass()) {

 4         r = (objectrenderer) map.get(c);

 5         if (r != null) {

 6             return r;

 7         }

 8         r = searchinterfaces(c);

 9         if (r != null)

10             return r;

12     return defaultrenderer;

13 }

14 objectrenderer searchinterfaces(class c) {

15     objectrenderer r = (objectrenderer) map.get(c);

16     if (r != null) {

17         return r;

18     } else {

19         class[] ia = c.getinterfaces();

20         for (int i = 0; i < ia.length; i++) {

21             r = searchinterfaces(ia[i]);

22             if (r != null)

23                 return r;

26     return null;

27 }

28 public objectrenderer getdefaultrenderer() {

29     return defaultrenderer;

30 }

31 public void put(class clazz, objectrenderer or) {

32     map.put(clazz, or);

33 }

throwablerenderersupport接口用于支持设置和获取throwablerenderer,从而用户可以自定义对throwable对象的渲染。

1 public interface throwablerenderersupport {

2     throwablerenderer getthrowablerenderer();

3     void setthrowablerenderer(throwablerenderer renderer);

4 }

hierarchy类以属性的方式实现了该接口,因而每个hierarchy实例只能有一个全局的throwablerenderer,而不能像objectrender那样为不同的类定义不同的render。当时这种设计也是合理的,因为对throwable的渲染最主要的就是其栈的渲染,其他的没什么大的不同,而且对栈渲染方式保持相同的格式会比较好。

 1 private throwablerenderer throwablerenderer = null;

 2 public hierarchy(logger root) {

 3     

深入Log4J源码之LoggerRepository和Configurator

 4     defaultfactory = new defaultcategoryfactory();

 5     

深入Log4J源码之LoggerRepository和Configurator

 7 public void setthrowablerenderer(final throwablerenderer renderer) {

 8     throwablerenderer = renderer;

 9 }

10 public throwablerenderer getthrowablerenderer() {

11     return throwablerenderer;

configurator接口用于定义对配置文件的解析。在log4j中配置文件解析出来的所有信息都可以放在loggerrepository中,因而configurator接口的定义非常简单。

1 public interface configurator {

2     public static final string inherited = "inherited";

3     public static final string null = "null";

4     void doconfigure(url url, loggerrepository repository);

5 }

log4j支持两种文件形式的配置文件:properties文件和xml文件,他们风别对应propertyconfigurator类和domconfigurator类。

propertyconfigurator类解析properties文件的中的配置信息,可以设置log4j.debug为true以打开log4j内部的日志信息;另外propertyconfigurator还支持linux风格的变量,即所有${variable}形式的变量都会被系统中对应的属性或配置文件内部定义的属性替换(先查找系统中的属性,后查找配置文件内部定义的属性);但是propertyconfigurator不支持一些log4j中的高级功能,如自定义errorhandler和定义asyncappender等。

configurator中最重要的方法是doconfigure()方法,在propertyconfigurator实现中,首先将配置文件对应的url读取成properties对象:

 1 public void doconfigure(java.net.url configurl, loggerrepository hierarchy) {

 2     properties props = new properties();

深入Log4J源码之LoggerRepository和Configurator

 4         uconn = configurl.openconnection();

 5         uconn.setusecaches(false);

 6         istream = uconn.getinputstream();

 7         props.load(istream);

深入Log4J源码之LoggerRepository和Configurator

 9     doconfigure(props, hierarchy);

10 }

而后检查是否设置了log4j.debug、log4j.reset、log4j.threshold等属性,如果有则做相应的设置。这里通过optionconverter.findandsubst()方法实现属性的查找和变量信息的替换。

 1 public void doconfigure(properties properties, loggerrepository hierarchy) {

 2     repository = hierarchy;

 3     string value = properties.getproperty(loglog.debug_key);

 4     if (value == null) {

 5         value = properties.getproperty("log4j.configdebug");

 6         if (value != null)

 7             loglog.warn("[log4j.configdebug] is deprecated. use [log4j.debug] instead.");

 9     if (value != null) {

10         loglog.setinternaldebugging(optionconverter.toboolean(value, true));

12     string reset = properties.getproperty(reset_key);

13     if (reset != null && optionconverter.toboolean(reset, false)) {

14         hierarchy.resetconfiguration();

15     }

16     string thresholdstr = optionconverter.findandsubst(threshold_prefix,

17             properties);

18     if (thresholdstr != null) {

19         hierarchy.setthreshold(optionconverter.tolevel(thresholdstr,

20                 (level) level.all));

21         loglog.debug("hierarchy threshold set to ["

22                 + hierarchy.getthreshold() + "].");

23     }

24     

深入Log4J源码之LoggerRepository和Configurator

25 }

然后分三步解析配置信息:

1.       解析root logger配置

首先找到log4j.rootlogger的值,它以逗号’,’分隔,其中第一个值时root的level信息,之后是要添加到root的appender名字。对level信息,直接设置给root就行。对appender名字,继续解析。

 1 void parsecategory(properties props, logger logger, string optionkey,

 2         string loggername, string value) {

 3     loglog.debug("parsing for [" + loggername + "] with value=[" + value

 4             + "].");

 5     stringtokenizer st = new stringtokenizer(value, ",");

 6     if (!(value.startswith(",") || value.equals(""))) {

 7         if (!st.hasmoretokens())

 8             return;

 9         string levelstr = st.nexttoken();

10         loglog.debug("level token is [" + levelstr + "].");

11         if (inherited.equalsignorecase(levelstr)

12                 || null.equalsignorecase(levelstr)) {

13             if (loggername.equals(internal_root_name)) {

14                 loglog.warn("the root logger cannot be set to null.");

15             } else {

16                 logger.setlevel(null);

17             }

18         } else {

19             logger.setlevel(optionconverter.tolevel(levelstr,

20                     (level) level.debug));

21         }

22         loglog.debug("category " + loggername + " set to "

23                 + logger.getlevel());

24     }

25     logger.removeallappenders();

26     appender appender;

27     string appendername;

28     while (st.hasmoretokens()) {

29         appendername = st.nexttoken().trim();

30         if (appendername == null || appendername.equals(","))

31             continue;

32         loglog.debug("parsing appender named \"" + appendername + "\".");

33         appender = parseappender(props, appendername);

34         if (appender != null) {

35             logger.addappender(appender);

36         }

37     }

38 }

相同的appender可以添加到不同的logger中,因而propertyconfigurator对appender做了缓存,如果能从缓存中找到相应的appender类,则直接返回找到的appender。

而后解析以下键值名以及对应类的属性信息:

log4j.appender.appendername=…

log4j.appender.appendername.layout=…

log4j.appender.appendername.errorhandler=…

log4j.appender.appendername.filter.filterkey.name=…

 1 appender parseappender(properties props, string appendername) {

 2     appender appender = registryget(appendername);

 3     if ((appender != null)) {

 4         loglog.debug("appender \"" + appendername

 5                 + "\" was already parsed.");

 6         return appender;

 7     }

 8     string prefix = appender_prefix + appendername;

 9     string layoutprefix = prefix + ".layout";

10     appender = (appender) optionconverter.instantiatebykey(props, prefix,

11             org.apache.log4j.appender.class, null);

12     if (appender == null) {

13         loglog.error("could not instantiate appender named \""

14                 + appendername + "\".");

15         return null;

16     }

17     appender.setname(appendername);

18     if (appender instanceof optionhandler) {

19         if (appender.requireslayout()) {

20             layout layout = (layout) optionconverter.instantiatebykey(

21                     props, layoutprefix, layout.class, null);

22             if (layout != null) {

23                 appender.setlayout(layout);

24                 loglog.debug("parsing layout options for \"" + appendername

25                         + "\".");

26                 propertysetter.setproperties(layout, props, layoutprefix

27                         + ".");

28                 loglog.debug("end of parsing for \"" + appendername + "\".");

29             }

31         final string errorhandlerprefix = prefix + ".errorhandler";

32         string errorhandlerclass = optionconverter.findandsubst(

33                 errorhandlerprefix, props);

34         if (errorhandlerclass != null) {

35             errorhandler eh = (errorhandler) optionconverter

36                     .instantiatebykey(props, errorhandlerprefix,

37                             errorhandler.class, null);

38             if (eh != null) {

39                 appender.seterrorhandler(eh);

40                 loglog.debug("parsing errorhandler options for \""

41                         + appendername + "\".");

42                 parseerrorhandler(eh, errorhandlerprefix, props, repository);

43                 final properties edited = new properties();

44                 final string[] keys = new string[] {

45                         errorhandlerprefix + "." + root_ref,

46                         errorhandlerprefix + "." + logger_ref,

47                         errorhandlerprefix + "." + appender_ref_tag };

48                 for (iterator iter = props.entryset().iterator(); iter

49                         .hasnext();) {

50                     map.entry entry = (map.entry) iter.next();

51                     int i = 0;

52                     for (; i < keys.length; i++) {

53                         if (keys[i].equals(entry.getkey()))

54                             break;

55                     }

56                     if (i == keys.length) {

57                         edited.put(entry.getkey(), entry.getvalue());

58                     }

59                 }

60                 propertysetter.setproperties(eh, edited, errorhandlerprefix

61                         + ".");

62                 loglog.debug("end of errorhandler parsing for \""

63                         + appendername + "\".");

64             }

65         }

66         propertysetter.setproperties(appender, props, prefix + ".");

67         loglog.debug("parsed \"" + appendername + "\" options.");

68     }

69     parseappenderfilters(props, appendername, appender);

70     registryput(appender);

71     return appender;

72 }

2.       解析loggerfactory配置

查找log4j.loggerfactory的值,保存创建的loggerfactory实例,使用log4j.loggerfactory.propname的方式设置loggerfactory实例的属性。

 1 protected void configureloggerfactory(properties props) {

 2     string factoryclassname = optionconverter.findandsubst(

 3             logger_factory_key, props);

 4     if (factoryclassname != null) {

 5         loglog.debug("setting category factory to [" + factoryclassname

 6                 + "].");

 7         loggerfactory = (loggerfactory) optionconverter

 8                 .instantiatebyclassname(factoryclassname,

 9                         loggerfactory.class, loggerfactory);

10         propertysetter.setproperties(loggerfactory, props, factory_prefix

11                 + ".");

12     }

3.       解析非root logger和objectrender配置

解析log4j.logger.、log4j.renderer.、log4j.throwablerenderer.等信息。

另外,propertyconfigurator还通过propertywatchlog类支持每个一段时间检查一次,如果发现配置文件有改动,则自动重新加载配置信息。

domconfigurator使用dom解析所有log4j配置文件中的元素,并根据dom中的元素查找对应的rootlogger、logger、appender、layout等模块。另外domconfigurator也支持每隔一段时间检查文件是否有修改,若有,则重新载入新修改后的配置文件。这里domconfigurator的实现方式和propertyconfigurator的实现方式类似,不再详细介绍。

logmanager将configurator和loggerrepository整合在一起,它在初始化的时候找到log4j配置文件,并且将其解析到loggerrepository中。

 1 static {

 2     hierarchy h = new hierarchy(new rootlogger((level) level.debug));

 3     repositoryselector = new defaultrepositoryselector(h);

 4     string override = optionconverter.getsystemproperty(

 5             default_init_override_key, null);

 6     if (override == null || "false".equalsignorecase(override)) {

 7         string configurationoptionstr = optionconverter.getsystemproperty(

 8                 default_configuration_key, null);

 9         string configuratorclassname = optionconverter.getsystemproperty(

10                 configurator_class_key, null);

11         url url = null;

12         if (configurationoptionstr == null) {

13             url = loader.getresource(default_xml_configuration_file);

14             if (url == null) {

15                 url = loader.getresource(default_configuration_file);

16             }

17         } else {

18             try {

19                 url = new url(configurationoptionstr);

20             } catch (malformedurlexception ex) {

21                 url = loader.getresource(configurationoptionstr);

22             }

23         }

24         if (url != null) {

25             loglog.debug("using url [" + url

26                     + "] for automatic log4j configuration.");

27             try {

28                 optionconverter.selectandconfigure(url,

29                         configuratorclassname,

30                         logmanager.getloggerrepository());

31             } catch (noclassdeffounderror e) {

32                 loglog.warn("error during default initialization", e);

33             }

34         } else {

35             loglog.debug("could not find resource: ["

36                     + configurationoptionstr + "].");

37         }

38     } else {

39         loglog.debug("default initialization of overridden by "

40                 + default_init_override_key + "property.");

41     }

42 }