如何在php中将文件转换为UTF-8?

时间:2017-10-20 04:56:31

标签: php encoding utf-8

我可以将文件转换为UTF-8吗?

如果我在提交

后有权访问该文件
$_FILES['file']['tmp_name']

注意:用户可以使用任何类型的字符集上传CSV文件,我通常会遇到未知的8位字符集。

我试试

$row = array();
$datas = file($_FILES['file']['tmp_name']);
foreach($datas as $data) {
    $data = mb_convert_encoding($data, 'UTF-8');
    $row[] = explode(',', $data);
}

但问题是,此代码删除了单引号等特殊字符。

我的第一个问题是htmlspecialchars remove the value inside the array?

我把它作为补充信息。感谢那些可以提供帮助的人!

5 个答案:

答案 0 :(得分:2)

试一试。
我使用的示例是我在测试环境中所做的事情,您可能需要稍微更改代码。

我有一个包含以下数据的文本文件:

test
café
áÁÁÁááá
žžœš¥±
ÆÆÖÖÖasØØ
ß

然后我有一个输入文件的表单并执行以下代码:

function neatify_files(&$files) {
    $tmp = array();
    for ($i = 0; $i < count($_FILES); $i++) {
        for ($j = 0; $j < count($_FILES[array_keys($_FILES)[$i]]["name"]); $j++) {
            $tmp[array_keys($_FILES)[$i]][$j]["name"] = $_FILES[array_keys($_FILES)[$i]]["name"][$j];
            $tmp[array_keys($_FILES)[$i]][$j]["type"] = $_FILES[array_keys($_FILES)[$i]]["type"][$j];
            $tmp[array_keys($_FILES)[$i]][$j]["tmp_name"] = $_FILES[array_keys($_FILES)[$i]]["tmp_name"][$j];
            $tmp[array_keys($_FILES)[$i]][$j]["error"] = $_FILES[array_keys($_FILES)[$i]]["error"][$j];
            $tmp[array_keys($_FILES)[$i]][$j]["size"] = $_FILES[array_keys($_FILES)[$i]]["size"][$j];
        }
    }
    return $files = $tmp;
}

if (isset($_POST["submit"])) {
    neatify_files($_FILES);
    $file = $_FILES["file"][0];

    $handle = fopen($file["tmp_name"], "r");
    while ($line = fgets($handle)) {
        $enc = mb_detect_encoding($line, "UTF-8", true);
        if (strtolower($enc) != "utf-8") {
            echo "<p>" . (iconv($enc, "UTF-8", $line)) . "</p>";
        } else {
            echo "<p>$line</p>";
        }
    }
}
?>
<form action="<?= $_SERVER["PHP_SELF"]; ?>" method="POST" enctype="multipart/form-data">
    <input type="file" name="file[]" />
    <input type="submit" name="submit" value="Submit" />
</form>

我写的函数neatify_files是为了使$_FILES数组的布局更符合逻辑。

表单是一种标准表单,只是POST数据到服务器 注意:使用$_SERVER["PHP_SELF"]存在安全风险see here for more

发布数据时,我将文件存储在变量中。显然,如果您使用的是multiple属性,那么您的代码将不会像这样。

$handle以只读格式存储文本文件的全部内容;因此"r"参数。

$enc使用mb_detect_encoding函数检测编码(duh) 起初我无法获得正确的编码。将encoding_list设置为仅使用UTF-8,并将strict设置为true。

如果编码是UTF-8,那么我只是打印该行,如果没有,我使用iconv函数将其转换为UTF-8。

答案 1 :(得分:2)

在将其转换为utf-8之前,您需要知道它是什么字符。 如果你无法解决这个问题,你就无法以任何理智的方式将其转换为utf8 .. 然而,如果编码无法确定,将其转换为utf-8的疯狂方法, 是简单地删除任何在utf-8中没有发生的字节,你 或许可以将其用作后备......

警告,未经测试的代码(我突然匆忙),但可能看起来像这样:

foreach ( $datas as $data ) {
    $encoding = guess_encoding ( $data );
    if (empty ( $encoding )) {
        // encoding cannot be determined...
        // as a fallback, we simply strip any bytes that isnt valid utf-8...
        // obviously this isn't a reliable conversion scheme.
        // also this could probably be improved
        $data = iconv ( "ASCII", "UTF-8//TRANSLIT//IGNORE", $text );
    } else {
        $data = mb_convert_encoding ( $data, 'UTF-8', $encoding );
    }
    $row [] = explode ( ',', $data );
}
function guess_encoding(string $str): string {
    $blacklist = array (
            'pass',
            'auto',
            'wchar',
            'byte2be',
            'byte2le',
            'byte4be',
            'byte4le',
            'BASE64',
            'UUENCODE',
            'HTML-ENTITIES',
            '7bit',
            '8bit' 
    );
    $encodings = array_flip ( mb_list_encodings () );
    foreach ( $blacklist as $tmp ) {
        unset ( $encodings [$tmp] );
    }
    $encodings = array_keys ( $encodings );
    $detected = mb_detect_encoding ( $str, $encodings, true );
    return ( string ) $detected;
}

答案 2 :(得分:1)

您可以使用以下

将文件文本转换为二进制数据
FUNCTION bin2text($bin_str) 
{ 
    $text_str = ''; 
    $chars = EXPLODE("\n", CHUNK_SPLIT(STR_REPLACE("\n", '', $bin_str), 8)); 
    $_I = COUNT($chars); 
    FOR($i = 0; $i < $_I; $text_str .= CHR(BINDEC($chars[$i])), $i  ); 
    RETURN $text_str; 
} 

FUNCTION text2bin($txt_str) 
{ 
    $len = STRLEN($txt_str); 
    $bin = ''; 
    FOR($i = 0; $i < $len; $i  ) 
    { 
        $bin .= STRLEN(DECBIN(ORD($txt_str[$i]))) < 8 ? STR_PAD(DECBIN(ORD($txt_str[$i])), 8, 0, STR_PAD_LEFT) : DECBIN(ORD($txt_str[$i])); 
    } 
    RETURN $bin; 
}

将数据转换为二进制文件后,您只需将文本更改为php方法 mb_convert_encoding($ fileText,“UTF-8”);

答案 3 :(得分:1)

我们试试这个:

function encode_utf8($data)
{
    if ($data === null || $data === '') {
        return $data;
    }
    if (!mb_check_encoding($data, 'UTF-8')) {
        return mb_convert_encoding($data, 'UTF-8');
    } else {
        return $data;
    }
}

用法:

$content = file_get_contents($_FILES['file']['tmp_name']);
$content = encode_utf8($content);

$rows = explode("\n", $content);
foreach ($rows as $row) {
    print_r($row);
}

答案 4 :(得分:0)

function convert_file_to_utf8($source, $target) {
    $content=file_get_contents($source);
    # detect original encoding
    $original_encoding=mb_detect_encoding($content, "UTF-8, ISO-8859-1, ISO-8859-15", true);
    # now convert
    if ($original_encoding!='UTF-8') {
        $content=mb_convert_encoding($content, 'UTF-8', $original_encoding);

    }
    $bom=chr(239) . chr(187) . chr(191); # use BOM to be on safe side
    file_put_contents($target, $bom.$content);
}