ChatGPT解决这个技术问题 Extra ChatGPT

urlencode vs rawurlencode?

如果我想使用变量创建 URL,我有两种选择来对字符串进行编码。 urlencode()rawurlencode()

究竟有什么区别,哪个是首选?

我真的很想看到选择一个而不是另一个的一些原因(例如,一个或另一个可能遇到的问题),我(我希望其他人)希望能够选择一个并永远使用它最少大惊小怪,所以我在这个问题上开始了赏金。
@Tchalvak:如果您只想选择一个,请选择 rawurlencode。您很少会遇到在给定编码为 %20 的空格时阻塞的系统,而在编码为 + 的空格上阻塞的系统更为常见。

A
Anomie

这将取决于你的目的。如果与其他系统的互操作性很重要,那么似乎 rawurlencode 是要走的路。一个例外是遗留系统,它期望查询字符串遵循编码为 + 而不是 %20 的空格的表单编码样式(在这种情况下,您需要 urlencode)。

rawurlencode 遵循 PHP 5.3.0 之前的 RFC 1738 和之后的 RFC 3986(参见 http://us2.php.net/manual/en/function.rawurlencode.php

返回一个字符串,其中除 -_.~ 之外的所有非字母数字字符都已替换为百分号 (%) 符号后跟两个十六进制数字。这是 » RFC 3986 中描述的编码,用于保护文字字符不被解释为特殊的 URL 分隔符,以及保护 URL 不被具有字符转换的传输媒体(如某些电子邮件系统)破坏。

请注意 RFC 3986 与 1738。php 5.3 之前的 rawurlencode 根据 RFC 1738 对波浪字符 (~) 进行编码。但是,从 PHP 5.3 开始,rawurlencode 遵循不需要编码波浪字符的 RFC 3986。

urlencode 将空格编码为加号(不像 rawurlencode 中的 %20)(参见 http://us2.php.net/manual/en/function.urlencode.php

返回一个字符串,其中包含除 -_ 之外的所有非字母数字字符。已替换为百分号 (%) 后跟两个十六进制数字和编码为加号 (+) 的空格。它的编码方式与 WWW 表单中发布的数据的编码方式相同,即与 application/x-www-form-urlencoded 媒体类型中的方式相同。这与 » RFC 3986 编码(参见 rawurlencode())的不同之处在于,由于历史原因,空格被编码为加号 (+)。

这对应于 RFC 1866 中 application/x-www-form-urlencoded 的定义。

补充阅读:

您可能还想查看 http://bytes.com/groups/php/5624-urlencode-vs-rawurlencode 上的讨论。

此外,RFC 2396 值得一看。 RFC 2396 定义了有效的 URI 语法。我们感兴趣的主要部分来自 3.4 查询组件:

在查询组件中,保留字符“;”、“/”、“?”、“:”、“@”、“&”、“=”、“+”、“”和“$”。

如您所见,+ 是查询字符串中的保留字符,因此需要按照 RFC 3986 进行编码(如 rawurlencode)。


rawurlencode。在这种情况下遵循标准。 urlencode 仅保留用于旧版使用
非常感谢,这就是我的想法,在我开始更新大量代码之前,我只是想要第二个意见。
我认为它的 rawurlencode 不将空格编码为加号,而是编码为 %20s
@Jonathan Fingland 嗨,乔纳森,我刚刚注意到这个答案在谷歌上搜索 urlencode 时很高。当然它在技术上是正确的,但它有点难以阅读,你认为你愿意为了清楚起见而重新格式化它,使它成为对来到这个页面的 php 程序员更有用的资源吗?如果您允许我,我也愿意自己重新格式化它以使其清晰。
@Pindatjuh:您引用的部分一个例外是遗留系统,它期望查询字符串遵循编码为 + 而不是 %20 的空格的形式编码样式(在这种情况下,您需要 urlencode)意味着虽然 rawurlencode 适用于大多数情况,一些系统期望空格被编码为+(加号)。对于这样的系统,urlencode 是更好的选择。
C
Community

证明在 PHP 的源代码中。

我会带你快速了解如何在未来任何时候自己找出这类事情。请耐心等待,您可以浏览很多 C 源代码(我会解释)。 If you want to brush up on some C, a good place to start is our SO wiki

下载源代码(或使用 http://lxr.php.net/ 在线浏览),grep 函数名的所有文件,你会发现如下内容:

PHP 5.3.6(在撰写本文时的最新版本)在文件 url.c 中的本机 C 代码中描述了这两个函数。

RawUrlEncode()

PHP_FUNCTION(rawurlencode)
{
    char *in_str, *out_str;
    int in_str_len, out_str_len;

    if (zend_parse_parameters(ZEND_NUM_ARGS() TSRMLS_CC, "s", &in_str,
                              &in_str_len) == FAILURE) {
        return;
    }

    out_str = php_raw_url_encode(in_str, in_str_len, &out_str_len);
    RETURN_STRINGL(out_str, out_str_len, 0);
}

网址编码()

PHP_FUNCTION(urlencode)
{
    char *in_str, *out_str;
    int in_str_len, out_str_len;

    if (zend_parse_parameters(ZEND_NUM_ARGS() TSRMLS_CC, "s", &in_str,
                              &in_str_len) == FAILURE) {
        return;
    }

    out_str = php_url_encode(in_str, in_str_len, &out_str_len);
    RETURN_STRINGL(out_str, out_str_len, 0);
}

好的,那么这里有什么不同?

它们本质上都是分别调用两个不同的内部函数:php_raw_url_encode 和 php_url_encode

所以去寻找那些功能!

让我们看看 php_raw_url_encode

PHPAPI char *php_raw_url_encode(char const *s, int len, int *new_length)
{
    register int x, y;
    unsigned char *str;

    str = (unsigned char *) safe_emalloc(3, len, 1);
    for (x = 0, y = 0; len--; x++, y++) {
        str[y] = (unsigned char) s[x];
#ifndef CHARSET_EBCDIC
        if ((str[y] < '0' && str[y] != '-' && str[y] != '.') ||
            (str[y] < 'A' && str[y] > '9') ||
            (str[y] > 'Z' && str[y] < 'a' && str[y] != '_') ||
            (str[y] > 'z' && str[y] != '~')) {
            str[y++] = '%';
            str[y++] = hexchars[(unsigned char) s[x] >> 4];
            str[y] = hexchars[(unsigned char) s[x] & 15];
#else /*CHARSET_EBCDIC*/
        if (!isalnum(str[y]) && strchr("_-.~", str[y]) != NULL) {
            str[y++] = '%';
            str[y++] = hexchars[os_toascii[(unsigned char) s[x]] >> 4];
            str[y] = hexchars[os_toascii[(unsigned char) s[x]] & 15];
#endif /*CHARSET_EBCDIC*/
        }
    }
    str[y] = '\0';
    if (new_length) {
        *new_length = y;
    }
    return ((char *) str);
}

当然,php_url_encode:

PHPAPI char *php_url_encode(char const *s, int len, int *new_length)
{
    register unsigned char c;
    unsigned char *to, *start;
    unsigned char const *from, *end;

    from = (unsigned char *)s;
    end = (unsigned char *)s + len;
    start = to = (unsigned char *) safe_emalloc(3, len, 1);

    while (from < end) {
        c = *from++;

        if (c == ' ') {
            *to++ = '+';
#ifndef CHARSET_EBCDIC
        } else if ((c < '0' && c != '-' && c != '.') ||
                   (c < 'A' && c > '9') ||
                   (c > 'Z' && c < 'a' && c != '_') ||
                   (c > 'z')) {
            to[0] = '%';
            to[1] = hexchars[c >> 4];
            to[2] = hexchars[c & 15];
            to += 3;
#else /*CHARSET_EBCDIC*/
        } else if (!isalnum(c) && strchr("_-.", c) == NULL) {
            /* Allow only alphanumeric chars and '_', '-', '.'; escape the rest */
            to[0] = '%';
            to[1] = hexchars[os_toascii[c] >> 4];
            to[2] = hexchars[os_toascii[c] & 15];
            to += 3;
#endif /*CHARSET_EBCDIC*/
        } else {
            *to++ = c;
        }
    }
    *to = 0;
    if (new_length) {
        *new_length = to - start;
    }
    return (char *) start;
}

在我继续之前快速了解一点知识,EBCDIC is another character set,类似于 ASCII,但完全是竞争对手。 PHP 试图同时处理这两种情况。但基本上,这意味着字节 EBCDIC 0x4c 字节不是 ASCII 中的 L,它实际上是 <。我相信你看到这里的混乱。

如果 Web 服务器已经定义了 EBCDIC,那么这两个函数都会管理它。

此外,它们都使用字符数组(认为字符串类型)hexchars 查找来获取一些值,数组描述如下:

/* rfc1738:

   ...The characters ";",
   "/", "?", ":", "@", "=" and "&" are the characters which may be
   reserved for special meaning within a scheme...

   ...Thus, only alphanumerics, the special characters "$-_.+!*'(),", and
   reserved characters used for their reserved purposes may be used
   unencoded within a URL...

   For added safety, we only leave -_. unencoded.
 */

static unsigned char hexchars[] = "0123456789ABCDEF";

除此之外,功能真的不同,我将用 ASCII 和 EBCDIC 来解释它们。

ASCII 的区别:

网址编码:

计算输入字符串的开始/结束长度,分配内存

遍历一个while循环,递增直到我们到达字符串的末尾

抓住现在的角色

如果字符等于 ASCII Char 0x20(即“空格”),则在输出字符串中添加一个 + 号。

如果它不是空格,也不是字母数字 (isalnum(c)),也不是和 _、- 或 .字符,然后我们,向数组位置 0 输出一个 % 符号,对 hexchars 数组进行数组查找以查找 os_toascii 数组(来自 Apache 的将 char 转换为十六进制代码的数组)以查找 c 的键(当前字符),然后我们按位右移 4,将该值分配给字符 1,并将相同的查找分配给位置 2,除了我们执行逻辑并查看值是否为 15 (0xF),并在这种情况,否则为 0。最后,你会得到一些编码的东西。

如果它最终不是空格,它是字母数字或 _- 之一。 chars,它会准确地输出它的内容。

RAWURLENCODE:

为字符串分配内存

根据函数调用中提供的长度对其进行迭代(不像 URLENCODE 那样在函数中计算)。

注意: 许多程序员可能从未见过这样的 for 循环迭代,它有点 hackish 并且不是大多数 for 循环使用的标准约定,请注意,它分配 xy,在 len 达到 0 时检查退出,并增加 xy。我知道,这不是您所期望的,但它是有效的代码。

将当前字符分配给 str 中的匹配字符位置。

它检查当前字符是字母数字还是 _- 之一。 chars,如果不是,我们执行与 URLENCODE 执行查找的几乎相同的分配,但是,我们使用 y++ 而不是 to[1] 以不同的方式递增,这是因为字符串是以不同的方式构建的,但最终还是要达到相同的目标。

当循环完成并且长度消失时,它实际上终止了字符串,分配了 \0 字节。

它返回编码的字符串。

差异:

UrlEncode 检查空格,分配一个 + 号,RawURLEncode 没有。

UrlEncode 不会为字符串分配 \0 字节,RawUrlEncode 会(这可能是一个有争议的问题)

它们的迭代方式不同,一个可能容易溢出格式错误的字符串,我只是在暗示这一点,我还没有真正调查过。

它们基本上以不同的方式迭代,在 ASCII 20 的情况下分配一个 + 号。

EBCDIC 的区别:

网址编码:

与 ASCII 相同的迭代设置

仍然将“空格”字符转换为 + 号。注意——我认为这需要在 EBCDIC 中编译,否则最终会出现错误?有人可以编辑并确认吗?

它检查当前 char 是否是 0 之前的 char,除了 .或 -,或小于 A 但大于 char 9,或大于 Z 且小于 a 但不是 _。或大于 z(是的,EBCDIC 有点搞砸了)。如果它与其中任何一个匹配,请执行与 ASCII 版本中类似的查找(它只是不需要在 os_toascii 中查找)。

RAWURLENCODE:

与 ASCII 相同的迭代设置

与 URL 编码的 EBCDIC 版本中描述的检查相同,但如果它大于 z,它将 ~ 从 URL 编码中排除。

与 ASCII RawUrlEncode 相同的分配

在返回之前仍然将 \0 字节附加到字符串。

大总结

两者都使用相同的 hexchars 查找表

URIEncode 不会以 \0 终止字符串,而 raw 会。

如果您在 EBCDIC 工作,我建议您使用 RawUrlEncode,因为它可以管理 UrlEncode 没有的 ~(这是一个报告的问题)。值得注意的是 ASCII 和 EBCDIC 0x20 都是空格。

它们的迭代方式不同,一种可能更快,一种可能容易受到基于内存或字符串的攻击。

URIEncode 在 + 中创建一个空格,RawUrlEncode 通过数组查找在 %20 中创建一个空格。

免责声明:我已经很多年没有接触过 C 语言了,也很长时间没有看过 EBCDIC 了。如果我在某个地方错了,请告诉我。

建议的实现

基于所有这些,rawurlencode 是大多数时候要走的路。正如您在 Jonathan Fingland 的回答中看到的那样,在大多数情况下坚持下去。它处理 URI 组件的现代方案,其中 urlencode 以老式方式处理事情,其中 + 表示“空间”。

如果您尝试在旧格式和新格式之间进行转换,请确保您的代码不会出错并通过意外双编码或类似的“哎呀”场景将解码 + 符号转换为空格空间/20%/+ 问题。

如果您正在使用不喜欢新格式的旧软件在旧系统上工作,请坚持使用 urlencode,但是,我相信 %20 实际上是向后兼容的,因为在旧标准下 %20 有效,只是没有首选。如果您愿意四处玩耍,请试一试,让我们知道它是如何为您服务的。

基本上,您应该坚持使用 raw,除非您的 EBCDIC 系统真的讨厌您。大多数程序员永远不会在 2000 年之后制造的任何系统上遇到 EBCDIC,甚至可能是 1990 年(这是在推动,但在我看来仍然可能)。


毕竟我应该知道我编码了什么,因为我认为是我在进行编码,所以我从来不必担心双重编码。由于我使用知道如何处理 + 空间的兼容模式对收到的所有内容进行解码,因此我同样从未遇到过您尝试在此处警告的问题。如果我们不知道某些东西是做什么的,我可以理解查看源代码,但是我们在这里学到了什么,而我们通过简单地执行这两个函数已经不知道了。我知道我有偏见,但我不禁认为这太过分了。不过还是要为努力点赞! =)
+1,对于这一部分:“我相信 %20 实际上是向后兼容的,因为在旧标准下 %20 有效,只是不是首选”
“UrlEncode 没有为字符串分配 \0 字节”这是不正确的。它只是做不同的事情。请参阅*to = 0;。这可以理解为将值零分配给 to 指向的位置。而此时,to 指向的是空字节应该在的地方。此外,0'\0' 是相等的,只是说同一件事的方式不同。
j
jitter
echo rawurlencode('http://www.google.com/index.html?id=asd asd');

产量

http%3A%2F%2Fwww.google.com%2Findex.html%3Fid%3Dasd%20asd

尽管

echo urlencode('http://www.google.com/index.html?id=asd asd');

产量

http%3A%2F%2Fwww.google.com%2Findex.html%3Fid%3Dasd+asd

区别在于 asd%20asdasd+asd

urlencode 与 RFC 1738 的不同之处在于将空格编码为 + 而不是 %20


N
Neven Boyanov

选择其中一个的一个实际原因是,如果您要在另一个环境中使用结果,例如 JavaScript。

在 PHP 中,urlencode('test 1') 返回 'test+1',而 rawurlencode('test 1') 返回 'test%201' 作为结果。

但是,如果您需要使用 decodeURI() 函数在 JavaScript 中“解码”它,那么 decodeURI("test+1") 将给您 "test+1"decodeURI("test%201") 将给您 "test 1" 作为结果。

换句话说,在 PHP 中由 urlencode 编码为加号(“+”)的空格(“”)将不会被 JavaScript 中的 decodeURI 正确解码。

在这种情况下,应该使用 rawurlencode PHP 函数。


这是一个很好的例子,尽管为此我更喜欢 json_encodeJSON.parse
S
Salman A

我相信空格必须编码为:

在 URL 路径组件中使用时 %20

+ 在 URL 查询字符串组件或表单数据中使用时(参见 17.13.4 表单内容类型)

以下示例显示了 rawurlencodeurlencode 的正确用法:

echo "http://example.com"
    . "/category/" . rawurlencode("latest songs")
    . "/search?q=" . urlencode("lady gaga");

输出:

http://example.com/category/latest%20songs/search?q=lady+gaga

如果反过来编码路径和查询字符串组件会发生什么?对于以下示例:

http://example.com/category/latest+songs/search?q=lady%20gaga

网络服务器将查找目录 latest+songs 而不是最新歌曲

查询字符串参数 q 将包含 Lady gaga


“查询字符串参数 q 将包含 lady gaga”否则它还会包含什么?无论在 PHP 5.2+ 中使用 rawurlencode 还是 urlencode,查询参数 q 似乎都具有相同的值传递给 $_GET 数组。不过,urlencodeapplication/x-www-form-urlencoded 格式编码,这是 GET 请求的默认格式,所以我将采用您的方法。 +1
我想澄清一下,在查询字符串中使用时,+%20 都被解码为空格。
C
Community

1.究竟有什么区别和

唯一的区别在于空间的处理方式:

urlencode - 基于遗留实现将空格转换为 +

rawurlencode - 基于 RFC 1738 将空格转换为 %20

差异的原因是因为 + 在 url 中是保留且有效(未编码)的。

2.哪个是首选?

我真的很想看到选择其中一个而不是另一个的一些原因……我希望能够选择一个并永远使用它,而不必大惊小怪。

公平地说,我在做出这些决定时遵循了一个简单的策略,我将与您分享,希望它可能会有所帮助。

我认为是 HTTP/1.1 规范 RFC 2616 要求 "Tolerant applications"

客户端在解析状态行时应该是宽容的,而服务器在解析请求行时应该是宽容的。

面对此类问题时,最好的策略始终是尽可能多地消费并生产符合标准的产品。

因此,我的建议是使用 rawurlencode 生成符合标准的 RFC 1738 编码字符串,并使用 urldecode 向后兼容并适应您可能遇到的任何消费。

现在你可以相信我的话,但让我们证明它应该......

php > $url = <<<'EOD'
<<< > "Which, % of Alice's tasks saw $s @ earnings?"
<<< > EOD;
php > echo $url, PHP_EOL;
"Which, % of Alice's tasks saw $s @ earnings?"
php > echo urlencode($url), PHP_EOL;
%22Which%2C+%25+of+Alice%27s+tasks+saw+%24s+%40+earnings%3F%22
php > echo rawurlencode($url), PHP_EOL;
%22Which%2C%20%25%20of%20Alice%27s%20tasks%20saw%20%24s%20%40%20earnings%3F%22
php > echo rawurldecode(urlencode($url)), PHP_EOL;
"Which,+%+of+Alice's+tasks+saw+$s+@+earnings?"
php > // oops that's not right???
php > echo urldecode(rawurlencode($url)), PHP_EOL;
"Which, % of Alice's tasks saw $s @ earnings?"
php > // now that's more like it

看起来 PHP 正是考虑到这一点,即使我从未遇到任何人拒绝这两种格式中的任何一种,但我想不出更好的策略来作为您的实际策略,你可以吗?

开心!


k
karim79

不同之处在于返回值,即:

urlencode()

返回一个字符串,其中包含除 -_ 之外的所有非字母数字字符。已替换为百分号 (%) 后跟两个十六进制数字和编码为加号 (+) 的空格。它的编码方式与 WWW 表单中发布的数据的编码方式相同,即与 application/x-www-form-urlencoded 媒体类型中的方式相同。这与 » RFC 1738 编码(参见 rawurlencode())的不同之处在于,由于历史原因,空格被编码为加号 (+)。

rawurlencode()

返回一个字符串,其中包含除 -_ 之外的所有非字母数字字符。已替换为百分号 (%) 符号后跟两个十六进制数字。这是 » RFC 1738 中描述的编码,用于保护文字字符不被解释为特殊的 URL 分隔符,以及保护 URL 不被具有字符转换的传输媒体(如某些电子邮件系统)破坏。

两者非常相似,但后者(rawurlencode)将用'%'和两个十六进制数字替换空格,这适用于编码密码等,其中'+'不是例如:

echo '<a href="ftp://user:', rawurlencode('foo @+%/'),
     '@ftp.example.com/x.txt">';
//Outputs <a href="ftp://user:foo%20%40%2B%25%2F@ftp.example.com/x.txt">

OP 询问如何知道使用哪个以及何时使用。如果 OP 不知道不同返回值的重要性,那么了解每个人对空格的作用并不能帮助他做出决定。
R
Remus Rusanu

urlencode:这与 » RFC 1738 编码(参见 rawurlencode())的不同之处在于,由于历史原因,空格被编码为加号 (+)。


J
Jake Wilson

空格编码为 %20 vs. +

我看到在大多数情况下使用 rawurlencode() 的最大原因是因为 urlencode 将文本空间编码为 +(加号),而 rawurlencode 将它们编码为常见的 %20

echo urlencode("red shirt");
// red+shirt

echo rawurlencode("red shirt");
// red%20shirt

我特别看到某些接受编码文本查询的 API 端点期望看到 %20 的空格,因此,如果使用加号代替,则会失败。显然,这在 API 实现之间会有所不同,并且您的里程可能会有所不同。


C
Community

我相信 urlencode 用于查询参数,而 rawurlencode 用于路径段。这主要是因为 %20 用于路径段,而 + 用于查询参数。请参阅有关空格的此答案:When to encode space to plus (+) or %20?

但是 %20 现在也适用于查询参数,这就是 rawurlencode 总是更安全的原因。然而,加号往往用于用户的编辑体验和查询参数的可读性很重要的地方。

请注意,这意味着 rawurldecode 不会将 + 解码为空格 (http://au2.php.net/manual/en/function.rawurldecode.php)。这就是为什么 $_GET 总是自动通过 urldecode,这意味着 +%20 都被解码为空格。

如果您希望输入和输出之间的编码和解码保持一致,并且您选择始终使用 + 而不是 %20 作为查询参数,那么 urlencode 可以用于查询参数(键和值)。

结论是:

路径段 - 始终使用 rawurlencode/rawurldecode

查询参数 - 解码总是使用 urldecode(自动完成),对于编码,rawurlencode 或 urlencode 都可以,只需选择一个保持一致,尤其是在比较 URL 时。


h
haysam elmasry

简单 * rawurlencode 路径 - 路径是“?”之前的部分- 空格必须编码为 %20 * urlencode 查询字符串 - 查询字符串是“?”之后的部分-spaces 更好地编码为“+” = rawurlencode 通常更兼容