python pandas to sql將excel資料匯入

2021-04-14 05:54:16 字數 441 閱讀 9793

1樓:匿名使用者

其實吧,

一分鐘10w條資料不能算太快,10秒10w條還差不多。 可以研究一下執行緒+程序來處專理, 或者協程+程序。屬

處理速度肯定能讓你喊一聲「臥槽!」 哈哈。

言歸正傳, 你說的別的mysql是不是遠端的,通過ip來連線的哈, 如果是的話那就可以理解了。 每次連線一次資料庫,都有一個網路延遲的,2臺電腦之間距離越遠,這個延遲就越高,而每次匯入資料的時間必須要加上這個延遲的時間的, 而本地測試的時候因為連線資料庫的時間延遲基本可以忽略不計,所以速度要比連線遠端資料庫要快很多很多。

最後, 如果想要解決這個問題的話,要麼把業務資料庫移到本地,去掉時間延遲。 要麼就用我上面說的執行緒+程序 或者 協程+程序的方式提高程式效率。如果無法把業務資料庫移到本地的話, 我非常推薦後者,成本也就是多學一點東西而已, 但以後可以省下非常多的時間, 效率為王嘛~

如何將excel中的資料匯入mysql資料庫

這個你得用上後臺程式了,如php,而且還得用外掛phpexcel 如何將excel的資料匯入到mysql資料庫中 1.使用php excel parser pro軟體,但是這個軟體為收費軟體 2.可將excel表儲存為csv格式,然後通過phpmyadmin或者sqlyog匯入,sqlyog匯入的方...

如何將excel檔案轉換成spss資料格式

在spss開啟資料檔案時,直接選擇開啟excel格式的就可以了,然後再儲存成spss格式 方法有二 1 spss是可以直接使用excel檔案的,你可以跟你的客戶說你用的excel格式的資料匯入的spss。2 你可以使用spss將excel中的資料匯入spss,然後再儲存為spss預設的檔案格式即可 ...

如何將excel檔案轉換成spss資料格式

在spss開啟資料檔案時,直接選擇開啟excel格式的就可以了,然後再儲存成spss格式 如何將excel檔案轉換成spss資料格式?50 在spss開啟資料檔案時,直接選擇開啟excel格式的就可以了,然後再儲存成spss格式 方法有二 1 spss是可以直接使用excel檔案的,你可以跟你的客戶...