Как разобрать код, аналогичный BBCode?

[Mixim]

Имеется подзадача: разработать класс, который будет разбирать строку с тегами [size][/size], [b][b] и другие, в том числе и не стандартные, преобразовывать ее в массив байт и передавать на устройство.
В данный момент не совсем успешно осуществляю указанную операцию с помощью регулярных выражений:

	
//словарь с символами форматирования
//класс StringParserNonOverheadKeyword в своем конструкторе принимает символы начала тега, символы конца тега и символ маскирования
		protected static Dictionary<String, StringParserNonOverheadKeyword> NonOverheadDictionary=new Dictionary<String, StringParserNonOverheadKeyword>{
{"DoubleWidth", new StringParserNonOverheadKeyword("\\[doubleWidth\\]", "\\[/doubleWidth\\]", 0x09)},	 
{"Silent", new StringParserNonOverheadKeyword("\\[silent\\]", "\\[/silent\\]", 0x10)}};
		protected static List<Byte> Generate(ref String Text, Encoding DefaultEncoding, Encoding RequiredEncoding)
			{
				List<Byte> returnedValue;
				String[] startOfKeywordSplitResult;
				String[] endOfKeywordSplitResult;
				String processingString;
			
				returnedValue=new List<Byte>();
				processingString=Text;

				
			
				foreach(KeyValuePair<String, StringParserNonOverheadKeyword> currentNode in NonOverheadDictionary)
				{
					if(Regex.IsMatch(processingString, currentNode.Value.StartOfKeyword)==true)
					{						startOfKeywordSplitResult=Regex.Split(processingString, currentNode.Value.StartOfKeyword);
					
						for(Int32 i=0;i!=startOfKeywordSplitResult.Length;i++)
						{
							Console.WriteLine("Результаты Split: {0}", startOfKeywordSplitResult[i]);
							if(startOfKeywordSplitResult[i]!=String.Empty)
							{
								if(Regex.IsMatch(startOfKeywordSplitResult[i], currentNode.Value.EndOfKeyword))
								{
									//проверяем соответствие количества тегов закрытия
									if(Regex.Matches(startOfKeywordSplitResult[i], currentNode.Value.EndOfKeyword).Count>1)
									{
										throw new ArgumentException("Несоответствие порядка тегов открытия и закрытия в строке");
									}
									else
									{																
										//если количество вхождений тега закрытия не превышает 1, то в результате нижеследующего Split получим массив из двух элементов
											endOfKeywordSplitResult=Regex.Split(startOfKeywordSplitResult[i], currentNode.Value.EndOfKeyword);
										//рекурсивно вызовем текущий метод, чтобы распарсить все байты				
												List<Byte> res1=Generate(ref endOfKeywordSplitResult[0], DefaultEncoding, RequiredEncoding);
												List<Byte> res2=Generate(ref endOfKeywordSplitResult[1], DefaultEncoding, RequiredEncoding);
										//маскируем каждый из символов
											foreach(Byte res1Byte in res1)
											{
												returnedValue.Add(currentNode.Value.ByteForFormatting);
												returnedValue.Add(res1Byte);
											}
											returnedValue.AddRange(res2);											
									}

									//удалить вхождение
										//endOfKeywordSplitResult[i]=String.Empty;
										endOfKeywordSplitResult[0]=String.Empty;
										processingString=String.Join(String.Empty, endOfKeywordSplitResult);
										Text = processingString;
								}
								else
								{
									if(i==0)
									{
										Boolean isFinded=false;
										//returnedValue.AddRange(Encoding.Convert(DefaultEncoding, RequiredEncoding, DefaultEncoding.GetBytes(startOfKeywordSplitResult[i])));
										foreach(KeyValuePair<String, StringParserNonOverheadKeyword> currentNode2 in NonOverheadDictionary)
										{
											if(Regex.IsMatch(startOfKeywordSplitResult[i], currentNode2.Value.StartOfKeyword)==true)
											{
												isFinded=true;
												returnedValue.AddRange(Generate(ref startOfKeywordSplitResult[i], DefaultEncoding, RequiredEncoding));
												break;
											}
										}
										if(isFinded==false)
										{
											returnedValue.AddRange(Encoding.Convert(DefaultEncoding, RequiredEncoding, DefaultEncoding.GetBytes(startOfKeywordSplitResult[i])));
										}
									}
									else
									{
										throw new ArgumentException("Невозможно найти тег закрытия форматирования в строке");
									}
								}
							}
					
						}
					}
				}
			
				//добавляем оставшиеся символы
				returnedValue.AddRange(Encoding.Convert(DefaultEncoding, RequiredEncoding, DefaultEncoding.GetBytes(processingString)));
				processingString=String.Empty;
				Text=processingString;
			
				return returnedValue;
			}

Продолжение в следующем посте

[Mixim]

Продолжение
При выполнении кода:

String str="[doubleWidth][silent]abc[/silent][/doubleWidth][doubleWidth]def[/doubleWidth]ghi[doubleWidth]jkl[/doubleWidth]";
			

			List<Byte> byteList=new List<Byte>();
			Encoding defaultEncoding=Encoding.Default;
			Encoding resultEncoding=Encoding.ASCII;
			
			ChangeEncodingAndMaskBytes(ref byteList, str, defaultEncoding, resultEncoding);
    	    
			Console.WriteLine("После преобразований имеем следующий список байт:");
			foreach(Byte currentNode in byteList)
			{
				Console.WriteLine(currentNode);
			}

получаем вывод ("//" - мои комментарии):

После преобразований имеем следующий список байт:
9
16
9//вот это не нужно
97
9
16
9//вот это не нужно
98
9
16
9//вот это не нужно
99
9
100
9
101
9
102
103
104
105
9
106
9
107
9
108

- почти то, что нужно: {16,9,97, 16,9,98, 16,9,99, 9,100, 9,101, 9,102, 103, 104, 105, 9,106, 9,107, 9,108}
Подскажите, как можно исправить указанную ситуацию? Каким образом можно реализовать универсальный метод, который не маскировал бы служебные байты?
Заранее спасибо за помощь.

[WorldMaster]

Вот набросал тут пару функций для парсинга любых кодов.
Создает список пар <Теги, текст>
Разбирает множественное тегирование и вытаскивает основной текст ...
Вроде все просто. Там уже сами подпилите под ваши нужды.
Пароль к архиву programmersforum.ru

[Mixim]

Сообщение от WorldMaster

Вот набросал тут пару функций для парсинга любых кодов.
Создает список пар <Теги, текст>
Разбирает множественное тегирование и вытаскивает основной текст ...
Вроде все просто. Там уже сами подпилите под ваши нужды.
Пароль к архиву programmersforum.ru

Спасибо, сейчас буду разбираться. Пока что заметил небольшую некорректность в Вашем коде: теги ищуться по ключевому символу '[', вместо заранее заданных ключевых слов, но это не сложно исправить

[WorldMaster]

Сообщение от Mixim

Спасибо, сейчас буду разбираться. Пока что заметил небольшую некорректность в Вашем коде: теги ищуться по ключевому символу '[', вместо заранее заданных ключевых слов, но это не сложно исправить

После обработки функцией у вас будет список слов с тегами ... проще его потом обрабатывать. Я на то у делал упор.
Можно немного переработать структуру результирующую, класс придумать в котором будет хранится текст и наложенные на него теги.

В моем же случае функция выполняет разбор для тэгов с любым названием как раз чтобы не затачивать ее под конкретный набор тэгов.

[Mixim]

Сообщение от WorldMaster

После обработки функцией у вас будет список слов с тегами ... проще его потом обрабатывать. Я на то у делал упор.
Можно немного переработать структуру результирующую, класс придумать в котором будет хранится текст и наложенные на него теги.

В моем же случае функция выполняет разбор для тэгов с любым названием как раз чтобы не затачивать ее под конкретный набор тэгов.

Еще раз спасибо. Примененная универсальность разбора дает неприятную проблему: если теги идут в неверной последовательности (сначала тег закрытия, а потом открытия), то приложение успешно съедает по сути неверный формат. Немного исправил (см.вложение), теперь осталось сделать экранирование