Tag - OpenBI

saiku3 OpenBI    2017-08-05 09:13:00    1210

最近发现很多朋友编译saiku3.14颇为困难,这次结合我对外公布的nexus仓库,再一次编写了此文章,即saiku3.14的编译步骤(必须结合我对外公布的nexus仓库)

修改项目根目录下的pom.xml文件

找到节点

  1. <pluginRepositories>
  2. <pluginRepository>
  3. <id>Analytical Labs Plugin Repo</id>
  4. <name>Analytical Labs Repo-releases</name>
  5. <url>http://repo.meteorite.bi/repository/alabs-release-local/</url>
  6. </pluginRepository>
  7. </pluginRepositories>

修改为

  1. <pluginRepositories>
  2. <pluginRepository>
  3. <id>central</id>
  4. <name>central</name>
  5. <url>http://nexus.liuyingguang.cn/repository/maven-public/</url>
  6. </pluginRepository>
  7. </pluginRepositories>

找到节点

  1. <repositories>
  2. <repository>
  3. <id>Analytical Labs Repo</id>
  4. <name>Analytical Labs Repo-releases</name>
  5. <url>http://repo.meteorite.bi/repository/alabs-release-local/</url>
  6. </repository>
  7. <repository>
  8. <id>Analytical Labs snapshots</id>
  9. <name>Analytical Labs Repo-releases</name>
  10. <url>htt
saiku2 OpenBI OpenSource    2017-07-19 23:40:52    826

工具:

  1. MyEclipse 10
  2. saiku2.5源码
  3. saiku-server-foodmart-2.5.zip

操作步骤:

  1. 在MyEclipse中新建一个web项目,名为saiku(必须名为saiku,因为saiku的UI会默认找saiku项目)
  2. 在saiku-server-foodmart-2.5.zip的tomcat中,找到saiku项目,并复制saiku目录下的所有文件到saiku项目的WebRoot目录中
  3. 到saiku-2.5.x\saiku-core\目录下分别找到saiku-service和saiku-web目录,并找到其中的java源代码,copy到saiku中,作为源码(建议分开两个resource文件夹存放,便于区分)
  4. 然后在saiku项目中创建source文件夹resource(命名自定),并在其目录下创建文件夹saiku-datasources和saiku-repository(前者是存储saiku的datasource的文件夹,后者则是存储生成的saiku模板的文件夹)
  5. 然后将saiku项目放到tomcat中,启动,看是否正常(如果没配置错误的话,应该正常了)
  6. 配置一个自己的测试库:
    在saiku-datasources目录下创建file并命名为testdatasource,文件内容为如下
  1. type=OLAP
  2. name=testdatasource
  3. driver=mondrian.olap4j.MondrianOlap4jDriver
  4. location=jdbc:mondrian:Jdbc=jdbc:mysql://localhost:3306/testdatasource;Catalog=res:testdatasource/testdatasource.xml;
  5. username=root
  6. password=111111

解释下上面一条的的参数

  1. type=OLAP就不多说了,先按固定的来
  2. name=testdatasource 数据源名称
  3. driver=mondrian.olap4j.MondrianOlap4jDriver 可以理解为固定的,Mondrian
saiku2 mondrian3 OpenSource OpenBI    2017-07-19 23:28:23    848
首先需要下载mondrian-3.6.5.jar的源码或者使用反编译软件看到源码,我在网上没找到这个版本(由于我用反编译工具弄的,放到文件中会报错,所以就下载了源码,反正也好找),于是我拿了mondrian-3.7.0.0-752的源码下来,用着也正常

1、从中找到文件mondrian.olap.Util,找到方法readVirtualFileAsString
修改内容为如下(重点是红色内容):
        InputStream in = readVirtualFile(catalogUrl);
        try {
            return IOUtils.toString(in,"utf-8");    //-----------------此行为红色行
        } finally {
            IOUtils.closeQuietly(in);
        }
或者按照网上说的另外一种方式,整体替换为如下内容,也可以,不过下面的编码必须写你的schema文件的编码:
        try {
            final byte[] bytes = Util. readFully(in, 1024);
            final char[] chars = new char[bytes. length];
            for ( int i = 0; i < chars. length; i++) {
                chars[i] = ( char) bytes[i];
            }
            String str = new String(bytes,"utf-8").replace("\ufeff" , "" );//加replace("\ufeff", "")是为了过滤"UTF-8无BOM格式文件"的开头
            return str;
        } finally {
            if (in != null) {
                in.close();
            }
        }

2、再找到文件    mondrian.rolap.RolapSchema.lo

mondrian3 OpenSource OpenBI    2017-07-19 23:22:56    942

1、根据文档中,比较费解,没有看太懂(并且部分文档的方法无法使用):http://mondrian.pentaho.com/documentation/cache_control.php

 

2、本来打算使用文档中的另一个方法

但是最终发现我完全从外部调用,哪里获取RolapConnection呢,于是,此方法宣告失败

public boolean clearCache() throws Exception {
    if ( olapConnection.isWrapperFor( RolapConnection.class ) ) {
      System.out.println( "Clearing cache" );
      RolapConnection rcon = olapConnection.unwrap( RolapConnection.class );
      rcon.getCacheControl( null ).flushSchemaCache();
    }
    return true;
  }

 

3、经过努力,找到别人的方法,此方法可行,原文是

java.util.Iterator<mondrian.rolap.RolapSchema> schemaIterator =  mondrian.rolap.RolapSchema.getRolapSchemas();
while(schemaIterator.hasNext()){
    mondrian.rolap.RolapSchema schema = schemaIterator.next();
    mondrian.olap.CacheControl cacheControl = schema.getInternalConnection().getCacheControl(null);
   
    for (mondrian.olap.Cube cube : schema.getCubes()) {
        cacheControl.flush(cacheControl.createMeasuresRegion(cube));
    }
}

但是对于我用的版本不对应,会报无法转换为Iterator,然后做了稍微修改,如下

List<mondrian.rola
saiku2 OpenSource OpenBI    2017-07-19 23:21:44    983
先说说出问题的原因吧,你说这个saiku也挺有趣,有些地方,注明读取的编码,有些地方不注明,而是使用系统默认的,只要用了系统默认,肯定会出问题啦,于是乎必须解决这个问题啊
saiku中,在保存saiku文件的时候,没有设置输出流编码,如下第四点,然而在读取的时候,却又是部分地方使用UTF-8编码,部分使用系统默认编码,这样就导致系统由于乱码可能出现查询不了的问题

如下的1,2,3是读取saiku文件的时候需要修改的地方,4是写入saiku文件的时候需要修改的地方

 

解决办法,需要修改4个地方的编码:


1、找到类QueryResource的createQuery方法,
修改 xml = new String( (byte[]) f.getEntity());
 xml = new String( (byte[]) f.getEntity(),"utf-8");
2、找到类QueryDeserializer的getFakeCube方法,
修改 InputSource source = new InputSource( ( new ByteArrayInputStream( xml.getBytes() ) ) );
为 InputSource source = new InputSource( ( new ByteArrayInputStream( xml.getBytes("UTF-8") ) ) );
3、找到类BasicRepositoryResource2的getResource方法
修改 InputStreamReader reader = new InputStreamReader(repoFile.getContent().getInputStream());
为 InputStreamReader reader = new InputStreamReader(repoFile.getContent().getInputStream(),"UTF-8");
4、找到类BasicRepositoryResource2的saveResource方法
    修改   OutputStreamWriter ow = new OutputStreamWriter(repoFile.getContent().getOutputStream());
    为     OutputStreamW
1/5