Кодировка и WinINET

[Vladcos]

Доброе время суток! Пожалуйста пролейте свет на следующую проблему: при закачке средствами Wininet страниц, большинство из них читаются в буфер(и соот-но записываются в файл) с "кракозябрами". При попытке их расшифровать на http://www.artlebedev.ru/tools/decoder/ пишет "CP1251 → UTF-8". Чем только не пытался их орусить, но тщетно (локаль, wstring и т.п.), мой уровень довольно низок. Заранее спасибо.

Пример кода:

#include <stdafx.h>
#include <windows.h>
#include <wininet.h>
#include <iostream>
#include <locale.h>
#pragma comment ( lib, "wininet.lib" )
#include <string> 
#include <fstream>
#include <regex>
#include <algorithm>
#include <wchar.h>

using namespace System;

int main(array<System::String ^> ^args)
{
	char heder[80];
 
char buf[256];
std::wstring wURL = L"http://js-prog.blogspot.ru/2013/03/url-javascript.html";
unsigned long len, offs;
std::wstring wUSER = L"Mozilla/5.0 (Windows NT 5.1)";
HINTERNET session, file,hResource;
session = InternetOpenW(LPCWSTR(wUSER.c_str()),
                        INTERNET_OPEN_TYPE_DIRECT,
                        NULL, NULL, 0);
file = InternetOpenUrlW(session,LPCWSTR(wURL.c_str()), NULL,-1,0,0);
std::string str("");
int count=0;
char * fileName = "C:\\example.txt"; // Путь к файлу для записи
FILE * ffile = fopen(fileName, "w");
do {
   InternetReadFile(file, (LPVOID)buf, sizeof(buf), &len);
   if (len>0) 
   {
	  str.append(buf);
	  fputs(buf, ffile);
      offs += len;
   }}  while (len);
fclose(ffile);

InternetCloseHandle(file);
InternetCloseHandle(session);
  return 0;
}

[waleri]

В буфер записывается как есть, кракозябры это потом, при чтении.
Вопрос в какой кодировке страничка изначально.

[Vladcos]

UTF-8 (например mail.ru)

[Vladcos]

Весь вопрос вызывает работа с буфером: как его залить в строку и производить с ней действия без изменения кодировки...

[waleri]

buf и есть строка - манипулируйте как угодно...
str.append(buf) скорее всего сконвертирует данные непонятно как.
Либо конвертируйте правильно, либо не используйте string.

Какова конечная цель?

[Vladcos]

В конце-концов я получал код страницы в строке и применял tr1::regex_search для поиска тэгов.. (кстати возник вопрос как сделать поиск c предпросмотром назад в Visual Studio)