使用pdo将大型json数组插入表中。 - >永远

时间:2015-03-15 01:06:18

标签: php mysql arrays json pdo

我有一个巨大的json数组。 json数组的一些元素是序列化的json数组本身。问题是我有一大堆表插入要使用这个大型json数组。我也在使用pdo

如何使用pdo快速将这个已自行序列化json数组的json数组转换为表插入?

它似乎花了太多时间,而且看起来并不是一种干净的做事方式。

基本上,我有一个使用json数组插入表的接口,我需要使用列和占位符和pdo将其转换为表插入。要插入的数组中有太多元素。

我尝试使用此代码自动创建插件并且它工作正常,我喜欢它的出现方式,但我无法使用此代码或使用json数组自动化它的元素具有序列化的json数组本身

function create_query( $table_name, $cols, $placeholders )
{

    $query= "INSERT INTO $table_name ( 
                                          $cols
                                       )
             VALUES                    (
                                          $placeholders
                                       )";
}

/*
    arg1= table_name;

*/
function insert_into_table(  $argums, $location )
{

    $num_classes= $location[ "num_classes" ];


    foreach( $location as $key => $value )
    {
        $$key= $value;
    }

    $keys= array_keys( $argums );

    $table_name     = $keys[ 0 ];

    array_shift( $keys );
    array_shift( $argums );
    $cols= implode( ", ", $keys );


    $bound_array= array();

    echo var_dump( $keys );

    foreach( $keys as &$value )
    {
        $bound_array[ $value ]= ${ $argums[ $value ] };
        $value= ":".$value;
    }

    $placeholders= implode( ", ", $keys );

    $query= create_query( $table_name, $cols, $placeholders );

    return array( "query" => $query, "bind" => $bound_array );

}

function do_insert( $arr )
{
    global $db;

    echo var_dump( $arr );
    $query= $arr[ "query" ];
    $bind=  $arr[ "bind"  ];

    $stmt= $db->prepare( $query );
    echo var_dump( $stmt );

    if( !$stmt->execute( $bind ) )
    {
        echo var_dump( $stmt->errorInfo() );
    }

    $affected_rows= $stmt->rowCount();
}

    $assoc_arr= insert_into_table( array( "company" => "company", 'companyName'=> "companyName", 'pkid' => 'pkid', 'reminderEmailTop' => 'reminderEmailTop', 'reminderEmailBottom' => 'reminderEmailBottom', 'reminderLink' => 'reminderLink' ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "basiclife_type", "page_nav" => "basiclife_pagenav", "orderby" => "basiclife_orderby" ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "bene_type", "page_nav" => "bene_pagenav", "orderby" => "bene_orderby" ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "beneper_type", "page_nav" => "beneper_pagenav", "orderby" => "beneper_orderby" ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "dent_type", "page_nav" => "dent_pagenav", "orderby" => "dent_orderby" ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "eflex_type", "page_nav" => "eflex_pagenav", "orderby" => "eflex_orderby" ), $location );

    do_insert( $assoc_arr );

    $assoc_arr= insert_into_table( array( "companyNav" => "companyNav", "companyId" => "pkid", 'type'=> "hsa_type", "page_nav" => "hsa_pagenav", "orderby" => "hsa_orderby" ), $location );

    do_insert( $assoc_arr );

....还有大约50多种这类插入物..

但是对于具有json数组本身的元素的插入,我无法使用上面的代码。

所以我创建了一个只有一个手动输入插入的函数...

1 个答案:

答案 0 :(得分:0)

这是一个原型。只需输入一个数据数组,csv或json文件,它就会遍历所有数据条目。根据需要调味:     class MySql     {         私人$ sDbName ='播放&#39 ;;         private $ sUsername =' root&#39 ;;         私人$ sPassword ='&#39 ;;         私人$ sHost =' localhost&#39 ;;         private $ oConnection = null;

    public function __construct()
    {
        $this->oConnection = new PDO( 
            'mysql:host=' 
            . $this->sHost 
            . ';dbname=' 
            . $this->sDbName, 
            $this->sUsername, 
            $this->sPassword 
            );
    }
    public function getDb()
    {
        return $this->oConnection;
    }

    public function bindVariables( &$oStmp, $aBinds )
    {
        foreach( $aBinds as $sVariable => $vValue )
        {
            // Ensure we have a colon prepended for PDO.
            if( substr( $sVariable, 0, 1 ) !== ':' )
            {
                $sVariable = ':' . $sVariable;
            }
            $oStmp->bindValue( $sVariable, $vValue );
        }
    }
}
$oMySql = new MySql;
$oDb = $oMySql->getDb();

// $sCsvExampleLine = '1,2,3,4,5';
$aCsv = file( 'infile6.csv' );
$iCountlines = count( $aCsv );
for( $j = 0; $j < $iCountlines; ++$j )
{
    $aRaw = explode( ',', $aCsv[ $j ] );
    $aData[ $j ][ 'companyNav' ] = $aRaw[ 0 ];
    $aData[ $j ][ 'companyId' ]  = $aRaw[ 1 ];
    $aData[ $j ][ 'type' ]       = $aRaw[ 2 ];
    $aData[ $j ][ 'page_nav' ]   = $aRaw[ 3 ];
    $aData[ $j ][ 'orderby' ]    = $aRaw[ 4 ];
}

// $aData[] = array( 'companyNav' => '1', 'companyId' => '2', 'type'=> '3', 'page_nav' => '4', 'orderby' => '5' );

// Create the sql outside of the loop.
$sSql = "
    INSERT INTO `1` 
    ( companyNav, companyId, type, page_nav, orderby )
    VALUES 
    ( :companyNav, :companyId, :type, :page_nav, :orderby )
    ";
$oStmp      = $oDb->prepare( $sSql );
$iCountData = count( $aData );
for( $k = 0; $k < $iCountData; ++$k )
{
    $oMySql->bindVariables( $oStmp, $aData[ $k ] );
    $oStmp->execute();
    // var_dump( $oStmp->rowCount() );
}
$oErrors = $oStmp->errorInfo();
var_dump( $oErrors );

可以利用绑定来使用相同的sql来插入不同的数据。 上面的查询允许您在类中包装数据库连接以避免使用全局变量。

O / P主要担心的是复制插入物的艰巨任务。如果可以从外部源中以正确的顺序/格式提取数据,或者按需生成数据,那么任务就不会增加开销。

只要格式保持不变,您就可以继续从各种来源附加到$ aData,并根据需要插入。

通过实施多个绑定可以进一步改进以下内容,但即使效率更高,这也略微超出了问题的范围。