我可以将文件转换为UTF-8吗?
如果我在提交
后有权访问该文件$_FILES['file']['tmp_name']
注意:用户可以使用任何类型的字符集上传CSV文件,我通常会遇到未知的8位字符集。
我试试
$row = array();
$datas = file($_FILES['file']['tmp_name']);
foreach($datas as $data) {
$data = mb_convert_encoding($data, 'UTF-8');
$row[] = explode(',', $data);
}
但问题是,此代码删除了单引号等特殊字符。
我的第一个问题是htmlspecialchars remove the value inside the array?
我把它作为补充信息。感谢那些可以提供帮助的人!
答案 0 :(得分:2)
试一试。
我使用的示例是我在测试环境中所做的事情,您可能需要稍微更改代码。
我有一个包含以下数据的文本文件:
test
café
áÁÁÁááá
žžœš¥±
ÆÆÖÖÖasØØ
ß
然后我有一个输入文件的表单并执行以下代码:
function neatify_files(&$files) {
$tmp = array();
for ($i = 0; $i < count($_FILES); $i++) {
for ($j = 0; $j < count($_FILES[array_keys($_FILES)[$i]]["name"]); $j++) {
$tmp[array_keys($_FILES)[$i]][$j]["name"] = $_FILES[array_keys($_FILES)[$i]]["name"][$j];
$tmp[array_keys($_FILES)[$i]][$j]["type"] = $_FILES[array_keys($_FILES)[$i]]["type"][$j];
$tmp[array_keys($_FILES)[$i]][$j]["tmp_name"] = $_FILES[array_keys($_FILES)[$i]]["tmp_name"][$j];
$tmp[array_keys($_FILES)[$i]][$j]["error"] = $_FILES[array_keys($_FILES)[$i]]["error"][$j];
$tmp[array_keys($_FILES)[$i]][$j]["size"] = $_FILES[array_keys($_FILES)[$i]]["size"][$j];
}
}
return $files = $tmp;
}
if (isset($_POST["submit"])) {
neatify_files($_FILES);
$file = $_FILES["file"][0];
$handle = fopen($file["tmp_name"], "r");
while ($line = fgets($handle)) {
$enc = mb_detect_encoding($line, "UTF-8", true);
if (strtolower($enc) != "utf-8") {
echo "<p>" . (iconv($enc, "UTF-8", $line)) . "</p>";
} else {
echo "<p>$line</p>";
}
}
}
?>
<form action="<?= $_SERVER["PHP_SELF"]; ?>" method="POST" enctype="multipart/form-data">
<input type="file" name="file[]" />
<input type="submit" name="submit" value="Submit" />
</form>
我写的函数neatify_files
是为了使$_FILES
数组的布局更符合逻辑。
表单是一种标准表单,只是POST
数据到服务器
注意:使用$_SERVER["PHP_SELF"]
存在安全风险see here for more。
发布数据时,我将文件存储在变量中。显然,如果您使用的是multiple
属性,那么您的代码将不会像这样。
$handle
以只读格式存储文本文件的全部内容;因此"r"
参数。
$enc
使用mb_detect_encoding
函数检测编码(duh)
起初我无法获得正确的编码。将encoding_list
设置为仅使用UTF-8,并将strict
设置为true。
如果编码是UTF-8,那么我只是打印该行,如果没有,我使用iconv
函数将其转换为UTF-8。
答案 1 :(得分:2)
在将其转换为utf-8之前,您需要知道它是什么字符。 如果你无法解决这个问题,你就无法以任何理智的方式将其转换为utf8 .. 然而,如果编码无法确定,将其转换为utf-8的疯狂方法, 是简单地删除任何在utf-8中没有发生的字节,你 或许可以将其用作后备......
警告,未经测试的代码(我突然匆忙),但可能看起来像这样:
foreach ( $datas as $data ) {
$encoding = guess_encoding ( $data );
if (empty ( $encoding )) {
// encoding cannot be determined...
// as a fallback, we simply strip any bytes that isnt valid utf-8...
// obviously this isn't a reliable conversion scheme.
// also this could probably be improved
$data = iconv ( "ASCII", "UTF-8//TRANSLIT//IGNORE", $text );
} else {
$data = mb_convert_encoding ( $data, 'UTF-8', $encoding );
}
$row [] = explode ( ',', $data );
}
function guess_encoding(string $str): string {
$blacklist = array (
'pass',
'auto',
'wchar',
'byte2be',
'byte2le',
'byte4be',
'byte4le',
'BASE64',
'UUENCODE',
'HTML-ENTITIES',
'7bit',
'8bit'
);
$encodings = array_flip ( mb_list_encodings () );
foreach ( $blacklist as $tmp ) {
unset ( $encodings [$tmp] );
}
$encodings = array_keys ( $encodings );
$detected = mb_detect_encoding ( $str, $encodings, true );
return ( string ) $detected;
}
答案 2 :(得分:1)
您可以使用以下
将文件文本转换为二进制数据FUNCTION bin2text($bin_str)
{
$text_str = '';
$chars = EXPLODE("\n", CHUNK_SPLIT(STR_REPLACE("\n", '', $bin_str), 8));
$_I = COUNT($chars);
FOR($i = 0; $i < $_I; $text_str .= CHR(BINDEC($chars[$i])), $i );
RETURN $text_str;
}
FUNCTION text2bin($txt_str)
{
$len = STRLEN($txt_str);
$bin = '';
FOR($i = 0; $i < $len; $i )
{
$bin .= STRLEN(DECBIN(ORD($txt_str[$i]))) < 8 ? STR_PAD(DECBIN(ORD($txt_str[$i])), 8, 0, STR_PAD_LEFT) : DECBIN(ORD($txt_str[$i]));
}
RETURN $bin;
}
将数据转换为二进制文件后,您只需将文本更改为php方法 mb_convert_encoding($ fileText,“UTF-8”);
答案 3 :(得分:1)
我们试试这个:
function encode_utf8($data)
{
if ($data === null || $data === '') {
return $data;
}
if (!mb_check_encoding($data, 'UTF-8')) {
return mb_convert_encoding($data, 'UTF-8');
} else {
return $data;
}
}
用法:
$content = file_get_contents($_FILES['file']['tmp_name']);
$content = encode_utf8($content);
$rows = explode("\n", $content);
foreach ($rows as $row) {
print_r($row);
}
答案 4 :(得分:0)
function convert_file_to_utf8($source, $target) {
$content=file_get_contents($source);
# detect original encoding
$original_encoding=mb_detect_encoding($content, "UTF-8, ISO-8859-1, ISO-8859-15", true);
# now convert
if ($original_encoding!='UTF-8') {
$content=mb_convert_encoding($content, 'UTF-8', $original_encoding);
}
$bom=chr(239) . chr(187) . chr(191); # use BOM to be on safe side
file_put_contents($target, $bom.$content);
}