/*******************************************************************************
 * Copyright (c) 2008 IGA Tosiki, NTT DATA BUSINESS BRAINS Corp.
 * All rights reserved. This program and the accompanying materials
 * are made available under the terms of the Eclipse Public License v1.0
 * which accompanies this distribution, and is available at
 * http://www.eclipse.org/legal/epl-v10.html
 *
 * Contributors:
 *    IGA Tosiki (NTT DATA BUSINESS BRAINS Corp.) - initial API and implementation
 *******************************************************************************/
/*
 * blanco Framework
 * Copyright (C) 2008 NTT DATA BUSINESS BRAINS CORPORATION
 * 
 * This library is free software; you can redistribute it and/or
 * modify it under the terms of the GNU Lesser General Public
 * License as published by the Free Software Foundation; either
 * version 2.1 of the License, or (at your option) any later version.
 */
package blanco.html.normalizer.util;

import java.io.BufferedWriter;
import java.io.ByteArrayOutputStream;
import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.OutputStreamWriter;
import java.util.List;

import junit.framework.TestCase;

import org.xml.sax.SAXException;

import blanco.html.normalizer.parser.helper.BlancoHtmlEventParserContentHandler;
import blanco.html.normalizer.parser.valueobject.BlancoHtmlEvent;
import blanco.html.normalizer.parser.valueobject.BlancoHtmlEventEndDocument;
import blanco.html.normalizer.parser.valueobject.BlancoHtmlEventEndElement;
import blanco.html.normalizer.parser.valueobject.BlancoHtmlEventStartDocument;
import blanco.html.normalizer.parser.valueobject.BlancoHtmlEventStartElement;
import blanco.html.parser.BlancoHtmlParser;
import blanco.html.parser.BlancoHtmlParserFactory;
import blanco.html.parser.util.BlancoHtmlParserUtil;

public class BlancoHtmlNormalizerUtilTest extends TestCase {
    public void test001() throws Exception {
        // 基本形。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう</a>\n"
                + "</body>\n" + "</html>";
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");

        // HTMLのエンコーディングを取得。
        final String encoding = BlancoHtmlParserUtil
                .decideEncoding(inputDataBytes);

        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setEncoding(encoding);

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        if (false) {
            new File("./tmp").mkdirs();
            BlancoHtmlEventListUtil.serialize(eventList, new BufferedWriter(
                    new OutputStreamWriter(new FileOutputStream(
                            "./tmp/test001.html"), encoding)));
        }
    }

    public void test002() throws Exception {
        // ひもづかない終了タグはコメントアウトされます。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "</head>\n"
                + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう</a></font>\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう</a>\n"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        assertEquals("ひもづかない終了タグはコメントアウトされます。", expectedData,
                eventList2String(eventList));
        assertEquals("最初の startDocument イベントは -1 の深さ。", -1, eventList.get(0)
                .getDeapth());
        assertEquals("最後の endDocument イベント は -1 の深さ。", -1, eventList.get(
                eventList.size() - 1).getDeapth());
    }

    public void test003() throws Exception {
        // 閉じられなかった p タグがあるのに、引き続き p タグがあらわれた際には自動的に閉じる。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "</head>\n"
                + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう</a><p><p>\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう</a><p></p><p>"
                + "\n</p></body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        if (false)
            System.out.println(eventList2String(eventList));
        assertEquals("閉じられなかった p タグがあるのに、引き続き p タグがあらわれた際には自動的に閉じる。",
                expectedData, eventList2String(eventList));
        assertEquals("最初の startDocument イベントは -1 の深さ。", -1, eventList.get(0)
                .getDeapth());
        assertEquals("最後の endDocument イベント は -1 の深さ。", -1, eventList.get(
                eventList.size() - 1).getDeapth());
    }

    public void test004() throws Exception {
        // 閉じることができない meta タグがあらわれた場合には除去する。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\"></meta>\n"
                + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう</a>\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう</a>\n"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        assertEquals("閉じることができない meta タグがあらわれた場合には除去する。", expectedData,
                eventList2String(eventList));
        assertEquals("最初の startDocument イベントは -1 の深さ。", -1, eventList.get(0)
                .getDeapth());
        assertEquals("最後の endDocument イベント は -1 の深さ。", -1, eventList.get(
                eventList.size() - 1).getDeapth());
    }

    public void test005() throws Exception {
        // 閉じることができない meta タグが自己終了している場合。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\"/>\n"
                + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう</a>\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう</a>\n"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        assertEquals("閉じることができない meta タグが自己終了している場合。", expectedData,
                eventList2String(eventList));
        assertEquals("最初の startDocument イベントは -1 の深さ。", -1, eventList.get(0)
                .getDeapth());
        assertEquals("最後の endDocument イベント は -1 の深さ。", -1, eventList.get(
                eventList.size() - 1).getDeapth());
    }

    public void test006() throws Exception {
        // 閉じるべき a タグが閉じられていない場合。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう\n</a>"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        if (false)
            System.out.println(eventList2String(eventList));

        if (false)
            for (BlancoHtmlEvent event : eventList) {
                if (event instanceof BlancoHtmlEventStartDocument) {
                    System.out.println("startDocument:" + event.getDeapth());
                } else if (event instanceof BlancoHtmlEventEndDocument) {
                    System.out.println("endDocument:" + event.getDeapth());
                } else if (event instanceof BlancoHtmlEventStartElement) {
                    System.out.println(((BlancoHtmlEventStartElement) event)
                            .getName()
                            + ":" + event.getDeapth());
                } else if (event instanceof BlancoHtmlEventEndElement) {
                    System.out.println(((BlancoHtmlEventEndElement) event)
                            .getName()
                            + ":" + event.getDeapth());
                }
            }

        assertEquals("閉じるべき a タグが閉じられていない場合。", expectedData,
                eventList2String(eventList));
        assertEquals("最初の startDocument イベントは -1 の深さ。", -1, eventList.get(0)
                .getDeapth());
        assertEquals("最後の endDocument イベント は -1 の深さ。", -1, eventList.get(
                eventList.size() - 1).getDeapth());

    }

    public void test007() throws Exception {
        // 属性の日本語
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "<meta name=\"description\" content=\"日本語属性のテスト。\">"
                + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\"><meta name=\"description\" content=\"日本語属性のテスト。\">"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう\n</a>"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        assertEquals("属性の日本語が伝わらない場合。", expectedData,
                eventList2String(eventList));
    }

    public void test008() throws Exception {
        // コメントの伝達チェック。
        final String inputData = "<html>\n"
                + "<head>\n"
                + "<title>テストデータ・タイトル</title>\n"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">\n"
                + "<!-- コメント -->" + "</head>\n" + "<body>\n"
                + "<a href=http://sourceforge.jp/projects/blancofw/>あいう\n"
                + "</body>\n" + "</html>";
        final String expectedData = "\n<html>"
                + "<head>"
                + "<title>テストデータ・タイトル</title>"
                + "<meta http-equiv=\"Content-Type\" content=\"text/html; charset=Windows-31J\">"
                + "<!-- コメント -->"
                + "</head>"
                + "<body>\n"
                + "<a href=\"http://sourceforge.jp/projects/blancofw/\">あいう\n</a>"
                + "</body>" + "</html>\n\n";

        final BlancoHtmlEventParserContentHandler handler = new BlancoHtmlEventParserContentHandler();
        final byte[] inputDataBytes = inputData.getBytes("Windows-31J");
        final BlancoHtmlParser parser = BlancoHtmlParserFactory.getInstance();
        parser.setHandler(handler);
        parser.setLexicalHandler(handler);

        parser.parse(BlancoHtmlNormalizerUtil.normalize(inputDataBytes));

        final List<BlancoHtmlEvent> eventList = handler.getEventList();

        assertEquals("属性の日本語が伝わらない場合。", expectedData,
                eventList2String(eventList));
    }

    public static String eventList2String(final List<BlancoHtmlEvent> eventList)
            throws IOException, SAXException {
        final ByteArrayOutputStream outStream = new ByteArrayOutputStream();
        BlancoHtmlEventListUtil.serialize(eventList, new BufferedWriter(
                new OutputStreamWriter(outStream, "Windows-31J")));
        return new String(outStream.toByteArray(), "Windows-31J");
    }
}
