Использование Javascript atob для декодирования base64 неправильно декодирует строки utf-8

108

Я использую window.atob()функцию Javascript для декодирования строки в кодировке base64 (в частности, содержимого в кодировке base64 из GitHub API). Проблема в том, что я возвращаю символы в кодировке ASCII (например, â¢вместо ). Как я могу правильно обработать входящий поток в кодировке base64, чтобы он был декодирован как utf-8?

брендонскрипт
источник
3
На странице MDN, которую вы связали, есть абзац, начинающийся с фразы «Для использования со строками Unicode или UTF-8».
Pointy
1
Вы на узле? Есть решения получше, чемatob
Берги

Ответы:

274

В документации Mozilla MDN есть отличная статья , которая описывает именно эту проблему:

«Проблема Unicode» Поскольку DOMStrings - это строки с 16-битной кодировкой, в большинстве браузеров вызов window.btoaстроки Unicode вызовет a, Character Out Of Range exceptionесли символ превышает диапазон 8-битного байта (0x00 ~ 0xFF). Есть два возможных метода решения этой проблемы:

  • первый - экранировать всю строку (с помощью UTF-8, см. encodeURIComponent), а затем ее кодировать;
  • второй - преобразовать UTF-16 DOMStringв массив символов UTF-8 и затем закодировать его.

Замечание о предыдущих решениях: статья MDN изначально предлагала использовать unescapeи escapeдля решения Character Out Of Rangeпроблемы исключения, но с тех пор они устарели. В некоторых других ответах здесь предлагалось работать над этим, decodeURIComponentи encodeURIComponentэто оказалось ненадежным и непредсказуемым. В самом последнем обновлении этого ответа используются современные функции JavaScript для повышения скорости и модернизации кода.

Если вы пытаетесь сэкономить время, вы также можете рассмотреть возможность использования библиотеки:

Кодировка UTF8 ⇢ base64

function b64EncodeUnicode(str) {
    // first we use encodeURIComponent to get percent-encoded UTF-8,
    // then we convert the percent encodings into raw bytes which
    // can be fed into btoa.
    return btoa(encodeURIComponent(str).replace(/%([0-9A-F]{2})/g,
        function toSolidBytes(match, p1) {
            return String.fromCharCode('0x' + p1);
    }));
}

b64EncodeUnicode('✓ à la mode'); // "4pyTIMOgIGxhIG1vZGU="
b64EncodeUnicode('\n'); // "Cg=="

Расшифровка base64 ⇢ UTF8

function b64DecodeUnicode(str) {
    // Going backwards: from bytestream, to percent-encoding, to original string.
    return decodeURIComponent(atob(str).split('').map(function(c) {
        return '%' + ('00' + c.charCodeAt(0).toString(16)).slice(-2);
    }).join(''));
}

b64DecodeUnicode('4pyTIMOgIGxhIG1vZGU='); // "✓ à la mode"
b64DecodeUnicode('Cg=='); // "\n"

Решение, выпущенное до 2018 года (функциональное и, вероятно, лучшая поддержка старых браузеров, но не обновленное)

Вот текущая рекомендация, прямо из MDN, с некоторой дополнительной совместимостью с TypeScript через @ MA-Maddin:

// Encoding UTF8 ⇢ base64

function b64EncodeUnicode(str) {
    return btoa(encodeURIComponent(str).replace(/%([0-9A-F]{2})/g, function(match, p1) {
        return String.fromCharCode(parseInt(p1, 16))
    }))
}

b64EncodeUnicode('✓ à la mode') // "4pyTIMOgIGxhIG1vZGU="
b64EncodeUnicode('\n') // "Cg=="

// Decoding base64 ⇢ UTF8

function b64DecodeUnicode(str) {
    return decodeURIComponent(Array.prototype.map.call(atob(str), function(c) {
        return '%' + ('00' + c.charCodeAt(0).toString(16)).slice(-2)
    }).join(''))
}

b64DecodeUnicode('4pyTIMOgIGxhIG1vZGU=') // "✓ à la mode"
b64DecodeUnicode('Cg==') // "\n"

Исходное решение (устарело)

Используется escapeи unescape(которые теперь устарели, хотя все еще работает во всех современных браузерах):

function utf8_to_b64( str ) {
    return window.btoa(unescape(encodeURIComponent( str )));
}

function b64_to_utf8( str ) {
    return decodeURIComponent(escape(window.atob( str )));
}

// Usage:
utf8_to_b64('✓ à la mode'); // "4pyTIMOgIGxhIG1vZGU="
b64_to_utf8('4pyTIMOgIGxhIG1vZGU='); // "✓ à la mode"

И последнее: я впервые столкнулся с этой проблемой при вызове API GitHub. Чтобы заставить это работать в (Mobile) Safari должным образом, мне фактически пришлось удалить все пробелы из источника base64, прежде чем я смогу даже декодировать источник. Актуально ли это в 2017 году, я не знаю:

function b64_to_utf8( str ) {
    str = str.replace(/\s/g, '');    
    return decodeURIComponent(escape(window.atob( str )));
}
брендонскрипт
источник
1
w3schools.com/jsref/jsref_unescape.asp "Функция unescape () устарела в версии JavaScript 1.5. Используйте вместо нее decodeURI () или decodeURIComponent ()."
Тедд Хансен,
1
Ты спас мне дни, братан
мистер Нео
2
Обновление: Решение №1 в MDN . «Проблема с Unicode» была исправлена, b64DecodeUnicode('4pyTIMOgIGxhIG1vZGU=');теперь корректно выводится «✓ à la mode»
weeix
2
Другой способ декодирования - это decodeURIComponent(atob('4pyTIMOgIGxhIG1vZGU=').split('').map(x => '%' + x.charCodeAt(0).toString(16)).join('')) не самый производительный код, но он есть.
daniel.gindi 05
2
return String.fromCharCode(parseInt(p1, 16));чтобы иметь совместимость с TypeScript.
Мартин Шнайдер
21

Вещи меняются. В побег / экранирования в методы устарели.

Вы можете кодировать строку URI перед ее кодированием в Base64. Обратите внимание, что это не создает кодировку UTF8 в кодировке Base64, а скорее создает данные в кодировке URL-адреса в кодировке Base64. Обе стороны должны согласовать одинаковую кодировку.

См. Рабочий пример здесь: http://codepen.io/anon/pen/PZgbPW

// encode string
var base64 = window.btoa(encodeURIComponent('€ 你好 æøåÆØÅ'));
// decode string
var str = decodeURIComponent(window.atob(tmp));
// str is now === '€ 你好 æøåÆØÅ'

Для проблемы OP сторонняя библиотека, такая как js-base64, должна решить проблему.

Тедд Хансен
источник
1
Я хотел бы отметить, что вы создаете base64 не входной строки, а его закодированного компонента. Поэтому, если вы отправите его, другая сторона не сможет декодировать его как «base64» и получить исходную строку
Риккардо Галли
3
Вы правы, я обновил текст, чтобы указать на это. Спасибо. Альтернатива, похоже, реализует base64 самостоятельно, используя стороннюю библиотеку (например, js-base64) или получает сообщение «Ошибка: не удалось выполнить 'btoa' в« Окне »: кодируемая строка содержит символы за пределами диапазона Latin1. "
Тедд Хансен
14

Если вам больше нравится рассматривать строки как байты, вы можете использовать следующие функции

function u_atob(ascii) {
    return Uint8Array.from(atob(ascii), c => c.charCodeAt(0));
}

function u_btoa(buffer) {
    var binary = [];
    var bytes = new Uint8Array(buffer);
    for (var i = 0, il = bytes.byteLength; i < il; i++) {
        binary.push(String.fromCharCode(bytes[i]));
    }
    return btoa(binary.join(''));
}


// example, it works also with astral plane characters such as '𝒞'
var encodedString = new TextEncoder().encode('✓');
var base64String = u_btoa(encodedString);
console.log('✓' === new TextDecoder().decode(u_atob(base64String)))
Риккардо Галли
источник
1
Спасибо. Ваш ответ имел решающее значение для того, чтобы помочь мне получить эту работу, на которую у меня ушло много часов в течение нескольких дней. +1. stackoverflow.com/a/51814273/470749
Райан
Для более быстрого и кроссбраузерного решения (но, по сути, того же результата) см. Stackoverflow.com/a/53433503/5601591
Джек Гиффин,
u_atob и u_btoa используют функции, доступные в каждом браузере, начиная с IE10 (2012 г.), мне кажутся солидными (если вы ссылаетесь на TextEncoder, это просто пример)
Риккардо Галли
5

Вот обновленное решение 2018 года, описанное в ресурсах разработки Mozilla.

КОДИРОВАТЬ ИЗ UNICODE В B64

function b64EncodeUnicode(str) {
    // first we use encodeURIComponent to get percent-encoded UTF-8,
    // then we convert the percent encodings into raw bytes which
    // can be fed into btoa.
    return btoa(encodeURIComponent(str).replace(/%([0-9A-F]{2})/g,
        function toSolidBytes(match, p1) {
            return String.fromCharCode('0x' + p1);
    }));
}

b64EncodeUnicode('✓ à la mode'); // "4pyTIMOgIGxhIG1vZGU="
b64EncodeUnicode('\n'); // "Cg=="

ДЛЯ ДЕКОДИРОВАНИЯ из B64 в UNICODE

function b64DecodeUnicode(str) {
    // Going backwards: from bytestream, to percent-encoding, to original string.
    return decodeURIComponent(atob(str).split('').map(function(c) {
        return '%' + ('00' + c.charCodeAt(0).toString(16)).slice(-2);
    }).join(''));
}

b64DecodeUnicode('4pyTIMOgIGxhIG1vZGU='); // "✓ à la mode"
b64DecodeUnicode('Cg=='); // "\n"
Мануэль Дж.
источник
4

Полная статья, которая мне подходит : https://developer.mozilla.org/en-US/docs/Web/JavaScript/Base64_encoding_and_decoding

Часть, в которой мы кодируем из Unicode / UTF-8, это

function utf8_to_b64( str ) {
   return window.btoa(unescape(encodeURIComponent( str )));
}

function b64_to_utf8( str ) {
   return decodeURIComponent(escape(window.atob( str )));
}

// Usage:
utf8_to_b64('✓ à la mode'); // "4pyTIMOgIGxhIG1vZGU="
b64_to_utf8('4pyTIMOgIGxhIG1vZGU='); // "✓ à la mode"

В настоящее время это один из наиболее часто используемых методов.

Рика
источник
3

Я предполагаю, что кому-то может понадобиться решение, которое создает широко используемый URI base64. Посетите, data:text/plain;charset=utf-8;base64,4pi44pi54pi64pi74pi84pi+4pi/чтобы увидеть демонстрацию (скопируйте URI данных, откройте новую вкладку, вставьте URI данных в адресную строку, затем нажмите Enter, чтобы перейти на страницу). Несмотря на то, что этот URI закодирован в формате base64, браузер по-прежнему может распознавать высокие кодовые точки и правильно их декодировать. Минимизированный кодер + декодер составляет 1058 байт (+ Gzip → 589 байт)

!function(e){"use strict";function h(b){var a=b.charCodeAt(0);if(55296<=a&&56319>=a)if(b=b.charCodeAt(1),b===b&&56320<=b&&57343>=b){if(a=1024*(a-55296)+b-56320+65536,65535<a)return d(240|a>>>18,128|a>>>12&63,128|a>>>6&63,128|a&63)}else return d(239,191,189);return 127>=a?inputString:2047>=a?d(192|a>>>6,128|a&63):d(224|a>>>12,128|a>>>6&63,128|a&63)}function k(b){var a=b.charCodeAt(0)<<24,f=l(~a),c=0,e=b.length,g="";if(5>f&&e>=f){a=a<<f>>>24+f;for(c=1;c<f;++c)a=a<<6|b.charCodeAt(c)&63;65535>=a?g+=d(a):1114111>=a?(a-=65536,g+=d((a>>10)+55296,(a&1023)+56320)):c=0}for(;c<e;++c)g+="\ufffd";return g}var m=Math.log,n=Math.LN2,l=Math.clz32||function(b){return 31-m(b>>>0)/n|0},d=String.fromCharCode,p=atob,q=btoa;e.btoaUTF8=function(b,a){return q((a?"\u00ef\u00bb\u00bf":"")+b.replace(/[\x80-\uD7ff\uDC00-\uFFFF]|[\uD800-\uDBFF][\uDC00-\uDFFF]?/g,h))};e.atobUTF8=function(b,a){a||"\u00ef\u00bb\u00bf"!==b.substring(0,3)||(b=b.substring(3));return p(b).replace(/[\xc0-\xff][\x80-\xbf]*/g,k)}}(""+void 0==typeof global?""+void 0==typeof self?this:self:global)

Ниже приведен исходный код, использованный для его создания.

var fromCharCode = String.fromCharCode;
var btoaUTF8 = (function(btoa, replacer){"use strict";
    return function(inputString, BOMit){
        return btoa((BOMit ? "\xEF\xBB\xBF" : "") + inputString.replace(
            /[\x80-\uD7ff\uDC00-\uFFFF]|[\uD800-\uDBFF][\uDC00-\uDFFF]?/g, replacer
        ));
    }
})(btoa, function(nonAsciiChars){"use strict";
    // make the UTF string into a binary UTF-8 encoded string
    var point = nonAsciiChars.charCodeAt(0);
    if (point >= 0xD800 && point <= 0xDBFF) {
        var nextcode = nonAsciiChars.charCodeAt(1);
        if (nextcode !== nextcode) // NaN because string is 1 code point long
            return fromCharCode(0xef/*11101111*/, 0xbf/*10111111*/, 0xbd/*10111101*/);
        // https://mathiasbynens.be/notes/javascript-encoding#surrogate-formulae
        if (nextcode >= 0xDC00 && nextcode <= 0xDFFF) {
            point = (point - 0xD800) * 0x400 + nextcode - 0xDC00 + 0x10000;
            if (point > 0xffff)
                return fromCharCode(
                    (0x1e/*0b11110*/<<3) | (point>>>18),
                    (0x2/*0b10*/<<6) | ((point>>>12)&0x3f/*0b00111111*/),
                    (0x2/*0b10*/<<6) | ((point>>>6)&0x3f/*0b00111111*/),
                    (0x2/*0b10*/<<6) | (point&0x3f/*0b00111111*/)
                );
        } else return fromCharCode(0xef, 0xbf, 0xbd);
    }
    if (point <= 0x007f) return nonAsciiChars;
    else if (point <= 0x07ff) {
        return fromCharCode((0x6<<5)|(point>>>6), (0x2<<6)|(point&0x3f));
    } else return fromCharCode(
        (0xe/*0b1110*/<<4) | (point>>>12),
        (0x2/*0b10*/<<6) | ((point>>>6)&0x3f/*0b00111111*/),
        (0x2/*0b10*/<<6) | (point&0x3f/*0b00111111*/)
    );
});

Затем, чтобы декодировать данные base64, либо HTTP получит данные как URI данных, либо воспользуйтесь функцией ниже.

var clz32 = Math.clz32 || (function(log, LN2){"use strict";
    return function(x) {return 31 - log(x >>> 0) / LN2 | 0};
})(Math.log, Math.LN2);
var fromCharCode = String.fromCharCode;
var atobUTF8 = (function(atob, replacer){"use strict";
    return function(inputString, keepBOM){
        inputString = atob(inputString);
        if (!keepBOM && inputString.substring(0,3) === "\xEF\xBB\xBF")
            inputString = inputString.substring(3); // eradicate UTF-8 BOM
        // 0xc0 => 0b11000000; 0xff => 0b11111111; 0xc0-0xff => 0b11xxxxxx
        // 0x80 => 0b10000000; 0xbf => 0b10111111; 0x80-0xbf => 0b10xxxxxx
        return inputString.replace(/[\xc0-\xff][\x80-\xbf]*/g, replacer);
    }
})(atob, function(encoded){"use strict";
    var codePoint = encoded.charCodeAt(0) << 24;
    var leadingOnes = clz32(~codePoint);
    var endPos = 0, stringLen = encoded.length;
    var result = "";
    if (leadingOnes < 5 && stringLen >= leadingOnes) {
        codePoint = (codePoint<<leadingOnes)>>>(24+leadingOnes);
        for (endPos = 1; endPos < leadingOnes; ++endPos)
            codePoint = (codePoint<<6) | (encoded.charCodeAt(endPos)&0x3f/*0b00111111*/);
        if (codePoint <= 0xFFFF) { // BMP code point
          result += fromCharCode(codePoint);
        } else if (codePoint <= 0x10FFFF) {
          // https://mathiasbynens.be/notes/javascript-encoding#surrogate-formulae
          codePoint -= 0x10000;
          result += fromCharCode(
            (codePoint >> 10) + 0xD800,  // highSurrogate
            (codePoint & 0x3ff) + 0xDC00 // lowSurrogate
          );
        } else endPos = 0; // to fill it in with INVALIDs
    }
    for (; endPos < stringLen; ++endPos) result += "\ufffd"; // replacement character
    return result;
});

Преимущество большей стандартизации заключается в том, что этот кодировщик и этот декодер более широко применимы, поскольку их можно использовать как действительный URL-адрес, который отображается правильно. Наблюдайте.

(function(window){
    "use strict";
    var sourceEle = document.getElementById("source");
    var urlBarEle = document.getElementById("urlBar");
    var mainFrameEle = document.getElementById("mainframe");
    var gotoButton = document.getElementById("gotoButton");
    var parseInt = window.parseInt;
    var fromCodePoint = String.fromCodePoint;
    var parse = JSON.parse;
    
    function unescape(str){
        return str.replace(/\\u[\da-f]{0,4}|\\x[\da-f]{0,2}|\\u{[^}]*}|\\[bfnrtv"'\\]|\\0[0-7]{1,3}|\\\d{1,3}/g, function(match){
          try{
            if (match.startsWith("\\u{"))
              return fromCodePoint(parseInt(match.slice(2,-1),16));
            if (match.startsWith("\\u") || match.startsWith("\\x"))
              return fromCodePoint(parseInt(match.substring(2),16));
            if (match.startsWith("\\0") && match.length > 2)
              return fromCodePoint(parseInt(match.substring(2),8));
            if (/^\\\d/.test(match)) return fromCodePoint(+match.slice(1));
          }catch(e){return "\ufffd".repeat(match.length)}
          return parse('"' + match + '"');
        });
    }
    
    function whenChange(){
      try{ urlBarEle.value = "data:text/plain;charset=UTF-8;base64," + btoaUTF8(unescape(sourceEle.value), true);
      } finally{ gotoURL(); }
    }
    sourceEle.addEventListener("change",whenChange,{passive:1});
    sourceEle.addEventListener("input",whenChange,{passive:1});
    
    // IFrame Setup:
    function gotoURL(){mainFrameEle.src = urlBarEle.value}
    gotoButton.addEventListener("click", gotoURL, {passive: 1});
    function urlChanged(){urlBarEle.value = mainFrameEle.src}
    mainFrameEle.addEventListener("load", urlChanged, {passive: 1});
    urlBarEle.addEventListener("keypress", function(evt){
      if (evt.key === "enter") evt.preventDefault(), urlChanged();
    }, {passive: 1});
    
        
    var fromCharCode = String.fromCharCode;
    var btoaUTF8 = (function(btoa, replacer){
		    "use strict";
        return function(inputString, BOMit){
        	return btoa((BOMit?"\xEF\xBB\xBF":"") + inputString.replace(
        		/[\x80-\uD7ff\uDC00-\uFFFF]|[\uD800-\uDBFF][\uDC00-\uDFFF]?/g, replacer
    		));
    	}
    })(btoa, function(nonAsciiChars){
		"use strict";
    	// make the UTF string into a binary UTF-8 encoded string
    	var point = nonAsciiChars.charCodeAt(0);
    	if (point >= 0xD800 && point <= 0xDBFF) {
    		var nextcode = nonAsciiChars.charCodeAt(1);
    		if (nextcode !== nextcode) { // NaN because string is 1code point long
    			return fromCharCode(0xef/*11101111*/, 0xbf/*10111111*/, 0xbd/*10111101*/);
    		}
    		// https://mathiasbynens.be/notes/javascript-encoding#surrogate-formulae
    		if (nextcode >= 0xDC00 && nextcode <= 0xDFFF) {
    			point = (point - 0xD800) * 0x400 + nextcode - 0xDC00 + 0x10000;
    			if (point > 0xffff) {
    				return fromCharCode(
    					(0x1e/*0b11110*/<<3) | (point>>>18),
    					(0x2/*0b10*/<<6) | ((point>>>12)&0x3f/*0b00111111*/),
    					(0x2/*0b10*/<<6) | ((point>>>6)&0x3f/*0b00111111*/),
    					(0x2/*0b10*/<<6) | (point&0x3f/*0b00111111*/)
    				);
    			}
    		} else {
    			return fromCharCode(0xef, 0xbf, 0xbd);
    		}
    	}
    	if (point <= 0x007f) { return inputString; }
    	else if (point <= 0x07ff) {
    		return fromCharCode((0x6<<5)|(point>>>6), (0x2<<6)|(point&0x3f/*00111111*/));
    	} else {
    		return fromCharCode(
    			(0xe/*0b1110*/<<4) | (point>>>12),
    			(0x2/*0b10*/<<6) | ((point>>>6)&0x3f/*0b00111111*/),
    			(0x2/*0b10*/<<6) | (point&0x3f/*0b00111111*/)
    		);
    	}
    });
    setTimeout(whenChange, 0);
})(window);
img:active{opacity:0.8}
<center>
<textarea id="source" style="width:66.7vw">Hello \u1234 W\186\0256ld!
Enter text into the top box. Then the URL will update automatically.
</textarea><br />
<div style="width:66.7vw;display:inline-block;height:calc(25vw + 1em + 6px);border:2px solid;text-align:left;line-height:1em">
<input id="urlBar" style="width:calc(100% - 1em - 13px)" /><img id="gotoButton" src="data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAABsAAAAeCAMAAADqx5XUAAAAclBMVEX///9NczZ8e32ko6fDxsU/fBoSQgdFtwA5pAHVxt+7vLzq5ex23y4SXABLiiTm0+/c2N6DhoQ6WSxSyweVlZVvdG/Uz9aF5kYlbwElkwAggACxs7Jl3hX07/cQbQCar5SU9lRntEWGum+C9zIDHwCGnH5IvZAOAAABmUlEQVQoz7WS25acIBBFkRLkIgKKtOCttbv//xdDmTGZzHv2S63ltuBQQP4rdRiRUP8UK4wh6nVddQwj/NtDQTvac8577zTQb72zj65/876qqt7wykU6/1U6vFEgjE1mt/5LRqrpu7oVsn0sjZejMfxR3W/yLikqAFcUx93YxLmZGOtElmEu6Ufd9xV3ZDTGcEvGLbMk0mHHlUSvS5svCwS+hVL8loQQyfpI1Ay8RF/xlNxcsTchGjGDIuBG3Ik7TMyNxn8m0TSnBAK6Z8UZfp3IbAonmJvmsEACum6aNv7B0CnvpezDcNhw9XWsuAr7qnRg6dABmeM4dTgn/DZdXWs3LMspZ1KDMt1kcPJ6S1icWNp2qaEmjq6myx7jbQK3VKItLJaW5FR+cuYlRhYNKzGa9vF4vM5roLW3OSVjkmiGJrPhUq301/16pVKZRGFYWjTP50spTxBN5Z4EKnSonruk+n4tUokv1aJSEl/MLZU90S3L6/U6o0J142iQVp3HcZxKSo8LfkNRCtJaKYFSRX7iaoAAUDty8wvWYR6HJEepdwAAAABJRU5ErkJggg==" style="width:calc(1em + 4px);line-height:1em;vertical-align:-40%;cursor:pointer" />
<iframe id="mainframe" style="width:66.7vw;height:25vw" frameBorder="0"></iframe>
</div>
</center>

Приведенные выше фрагменты кода не только очень стандартизированы, но и работают очень быстро. Вместо косвенной цепочки преемственности, когда данные должны быть несколько раз преобразованы между различными формами (например, в ответе Риккардо Галли), приведенный выше фрагмент кода является настолько прямым, насколько это возможно. Он использует только один простой быстрый String.prototype.replaceвызов для обработки данных при кодировании и только один для декодирования данных при декодировании. Еще один плюс заключается в том, что (особенно для больших строк) String.prototype.replaceпозволяет браузеру автоматически обрабатывать базовое управление памятью при изменении размера строки, что приводит к значительному повышению производительности, особенно в вечнозеленых браузерах, таких как Chrome и Firefox, которые сильно оптимизируютString.prototype.replace. Наконец, вишенка на торте заключается в том, что для пользователей, использующих латинские скрипты, кроме пользователей латинских скриптов, строки, которые не содержат кодовых точек выше 0x7f, обрабатываются очень быстро, потому что строка остается неизменной алгоритмом замены.

Я создал репозиторий github для этого решения по адресу https://github.com/anonyco/BestBase64EncoderDecoder/

Джек Гиффин
источник
Не могли бы вы пояснить, что вы подразумеваете под «способом, созданным пользователем», а не «интерпретируемым браузером»? Что дает использование этого решения, скажем, по сравнению с тем, что рекомендует Mozilla?
brandonscript
@brandonscript Mozilla отличается от MDN. MDN - это контент, созданный пользователями. Страница в MDN, которая рекомендует ваше решение, была контентом, созданным пользователем, а не контентом, созданным поставщиком браузера.
Джек Гиффин
Создан ли поставщик вашего решения? Я так, предлагаю отдать должное происхождению. Если нет, то он также создается пользователем и ничем не отличается от ответа MDN?
brandonscript
@brandonscript Хорошее замечание. Ты прав. Я удалил этот кусок текста. Также посмотрите демо, которое я добавил.
Джек Гиффин
0

Небольшая коррекция, unescape и escape устарели, поэтому:

function utf8_to_b64( str ) {
    return window.btoa(decodeURIComponent(encodeURIComponent(str)));
}

function b64_to_utf8( str ) {
     return decodeURIComponent(encodeURIComponent(window.atob(str)));
}


function b64_to_utf8( str ) {
    str = str.replace(/\s/g, '');    
    return decodeURIComponent(encodeURIComponent(window.atob(str)));
}
Darkves
источник
2
Похоже, что ссылка на документ даже отличается от этой, предлагая решение с регулярным выражением для управления ею.
brandonscript
2
Это не сработает, потому что encodeURIComponentэто обратное decodeURIComponent, то есть просто отменит преобразование. См. Stackoverflow.com/a/31412163/1534459 для подробного объяснения того, что происходит с escapeи unescape.
bodo 01
1
@canaaerus Я не понимаю ваш комментарий? escape и unescape устарели, я просто меняю их местами с помощью функции [decode | encode] URIComponent :-) Все работает нормально. Сначала прочтите вопрос
Darkves 01
1
@Darkves: причина, по которой encodeURIComponentон используется, заключается в том, чтобы правильно обрабатывать (весь диапазон) строки Unicode. Так например window.btoa(decodeURIComponent(encodeURIComponent('€')))дает, Error: String contains an invalid characterпотому что он такой же, как window.btoa('€')и btoaне может кодировать .
bodo 02
2
@Darkves: Да, это правильно. Но вы не можете поменять местами escape с EncodeURIComponent и unescape с DecodeURIComponent, потому что методы Encode и escape не делают одно и то же. То же самое с decode и unescape. Первоначально я сделал ту же ошибку, кстати. Вы должны заметить, что если вы возьмете строку, UriEncode ее, а затем UriDecode, вы получите ту же строку, что и ввели. Так что это было бы чепухой. Когда вы отменяете экранирование строки, закодированной с помощью encodeURIComponent, вы не получаете ту же строку, которую вы ввели, поэтому с escape / unescape она работает, но не с вашей.
Stefan Steiger
0

Вот пример кода будущего для браузеров, которого может не хватать escape/unescape(). Обратите внимание, что IE 9 и старше не поддерживает atob/btoa(), поэтому вам нужно будет использовать для них пользовательские функции base64.

// Polyfill for escape/unescape
if( !window.unescape ){
    window.unescape = function( s ){
        return s.replace( /%([0-9A-F]{2})/g, function( m, p ) {
            return String.fromCharCode( '0x' + p );
        } );
    };
}
if( !window.escape ){
    window.escape = function( s ){
        var chr, hex, i = 0, l = s.length, out = '';
        for( ; i < l; i ++ ){
            chr = s.charAt( i );
            if( chr.search( /[A-Za-z0-9\@\*\_\+\-\.\/]/ ) > -1 ){
                out += chr; continue; }
            hex = s.charCodeAt( i ).toString( 16 );
            out += '%' + ( hex.length % 2 != 0 ? '0' : '' ) + hex;
        }
        return out;
    };
}

// Base64 encoding of UTF-8 strings
var utf8ToB64 = function( s ){
    return btoa( unescape( encodeURIComponent( s ) ) );
};
var b64ToUtf8 = function( s ){
    return decodeURIComponent( escape( atob( s ) ) );
};

Более подробный пример кодирования и декодирования UTF-8 можно найти здесь: http://jsfiddle.net/47zwb41o/

Beejor
источник
-1

включая указанное выше решение, если проблема все еще возникает, попробуйте, как показано ниже. Рассмотрим случай, когда escape не поддерживается для TS.

blob = new Blob(["\ufeff", csv_content]); // this will make symbols to appears in excel 

для csv_content вы можете попробовать, как показано ниже.

function b64DecodeUnicode(str: any) {        
        return decodeURIComponent(atob(str).split('').map((c: any) => {
            return '%' + ('00' + c.charCodeAt(0).toString(16)).slice(-2);
        }).join(''));
    }
Дивакар
источник