2. 程式人生 > >Mysql資料庫資料處理

Mysql資料庫資料處理

阿新 • • 發佈：2018-12-19

由於需求變更，導致程式碼邏輯變化，造成資料庫中的code_欄位資料格式混亂。考慮到表中資料量較大，所以選擇寫sql進行update資料處理。

涉及欄位註釋：


標準資料格式如下：

樓-單元-層-號

老資料如下：

缺少 ‘單元’ ‘層’ ‘號’ 中文

只有‘房號’，沒有拼接完整

 

多了‘--’，要求把‘--’後有一位數字的，替換為0；‘--’後有兩位數字的去掉‘--’

好特別的房號。。。

用到的mysql函式：

replace()
length()
substring_index()
concat()

實現思路：

先把圖四處理成圖二，再把圖二處理成圖三，最後把圖三處理成圖一

圖五的房號雖然奇怪，但並不難處理，可直接處理成圖一

實現過程：

就按上面寫的思路一步步來

首先觀察圖四，房號部分多了‘--’，可能是使用者在錄入資料時寫錯了，所以要通過SQL把‘--’後有一位數的，替換為0；‘--’後有兩位數字的去掉‘--’

先解決‘--’後兩位數的，SQL如下：

update space_house set code_ =  replace(code_, '--','')
where id_ in (
select a.id_ from (
select id_,code_,length(substring_index(code_, '--', -1)) le from space_house WHERE code_ like "%--%" 


) a where a.le = 2 
)

最裡層（黃色）先是查出了包含‘--’的資料，並使用substring_index(code_, '--', -1)截取了code_欄位中最後一次出現‘--’符號之後的全部資料，通過length()函式計算出擷取到的長度

中層（綠色）通過where條件過濾出length長度為2的資料id

外層通過update語句進行修改，並配合replace()函式把‘--’替換為空

處理後效果：百合園小區7號樓-1-1-710

該處理'--'後一位數的了，SQL如下：

update space_house set code_ =  replace(code_, '--','0')
where id_ in (
select a.id_ from (
select id_,code_,length(substring_index(code_, '--', -1)) le from space_house WHERE code_ like "%--%" 
) a where a.le = 1
)
邏輯同上，就不解釋了。效果： 百合園小區7號樓-1-1-7

09

上面已經把圖四處理成圖二了

繼續按思路把圖二處理成圖三，把圖三處理成圖一，一條SQL就可以，如下：

update space_house set code_ = concat(building_name,'-',unit_,'單元-',floor_,'層-',substring_index(code_, '-', -1),'號')
where id_ in (
   select b.* from (
select id_ from space_house where code_ not like '%號' and id_ not in (
select a.id_ from (
select id_,code_, length(code_)-length(replace(code_,'-','')) le from space_house
) a where a.le = 4
)
   ) b
)

最裡層的SQL（黃色）計算出每條資料具有幾個’-‘符號的數量

中間兩層SQL（綠色），則是用於過濾資料結尾包含’號‘字的資料，和過濾含有四個’-‘符號的資料。因為’%號‘代表正常的資料不需要處理，而含有四個’-‘符號的資料代表圖五的那批資料，需要單獨處理。此時過濾後的資料，只有圖二和圖三形式的了

外層SQL（紅色），通過concat()函式對剩餘的資料重新拼接成圖一形式，注意：mysql連貫字串不能利用加號(+)，而是利用concat。concat()函式中配合了substring_index()函式對房號進行了擷取，注意：substring_index函式的引數二指定的值，擷取不到就會就返回整個字串。

只剩下圖五了，SQL如下：
update space_house set code_ =  concat(building_name,'-',unit_,'單元-',floor_,'層-',substring_index(code_, '-', -2),'號')
where id_ in (
select a.id_ from (
select id_,code_, length(code_)-length(replace(code_,'-','')) le from space_house
) a where a.le = 4
)
思路同上，不解釋了。只是在substring_index函式中的引數三，截取了倒數第二位置的'-'符號

@[TOC](這裡寫自定義目錄標題)

歡迎使用Markdown編輯器

你好！ 這是你第一次使用 Markdown編輯器 所展示的歡迎頁。如果你想學習如何使用Markdown編輯器, 可以仔細閱讀這篇文章，瞭解一下Markdown的基本語法知識。

新的改變

我們對Markdown編輯器進行了一些功能拓展與語法支援，除了標準的Markdown編輯器功能，我們增加了如下幾點新功能，幫助你用它寫部落格：

  1. 全新的介面設計 ，將會帶來全新的寫作體驗；
  2. 在創作中心設定你喜愛的程式碼高亮樣式，Markdown 將程式碼片顯示選擇的高亮樣式 進行展示；
  3. 增加了 圖片拖拽 功能，你可以將本地的圖片直接拖拽到編輯區域直接展示；
  4. 全新的 KaTeX數學公式 語法；
  5. 增加了支援甘特圖的mermaid語法1 功能；
  6. 增加了 多螢幕編輯 Markdown文章功能；
  7. 增加了 焦點寫作模式、預覽模式、簡潔寫作模式、左右區域同步滾輪設定 等功能，功能按鈕位於編輯區域與預覽區域中間；
  8. 增加了 檢查列表 功能。

功能快捷鍵

撤銷：Ctrl/Command + Z
重做：Ctrl/Command + Y
加粗：Ctrl/Command + B
斜體：Ctrl/Command + I
標題：Ctrl/Command + Shift + H
無序列表：Ctrl/Command + Shift + U
有序列表：Ctrl/Command + Shift + O
檢查列表：Ctrl/Command + Shift + C
插入程式碼：Ctrl/Command + Shift + K
插入連結：Ctrl/Command + Shift + L
插入圖片：Ctrl/Command + Shift + G

合理的建立標題，有助於目錄的生成

直接輸入1次#，並按下space後，將生成1級標題。
輸入2次#，並按下space後，將生成2級標題。
以此類推，我們支援6級標題。有助於使用TOC語法後生成一個完美的目錄。

如何改變文字的樣式

強調文字 強調文字

加粗文字 加粗文字

標記文字

刪除文字

引用文字

H2O is是液體。

210 運算結果是 1024.

插入連結與圖片

連結: link.

圖片: Alt

帶尺寸的圖片: Alt

當然，我們為了讓使用者更加便捷，我們增加了圖片拖拽功能。

如何插入一段漂亮的程式碼片

去部落格設定頁面，選擇一款你喜歡的程式碼片高亮樣式，下面展示同樣高亮的 程式碼片.

// An highlighted block
var foo = 'bar';

生成一個適合你的列表

  • 專案
    • 專案
      • 專案
  1. 專案1
  2. 專案2
  3. 專案3
  • 計劃任務
  • 完成任務

建立一個表格

一個簡單的表格是這麼建立的：

專案 Value
電腦 $1600
手機 $12
導管 $1

設定內容居中、居左、居右

使用:---------:居中
使用:----------居左
使用----------:居右

第一列 第二列 第三列
第一列文字居中 第二列文字居右 第三列文字居左

SmartyPants

SmartyPants將ASCII標點字元轉換為“智慧”印刷標點HTML實體。例如：

TYPE ASCII HTML
Single backticks 'Isn't this fun?' ‘Isn’t this fun?’
Quotes "Isn't this fun?" “Isn’t this fun?”
Dashes -- is en-dash, --- is em-dash – is en-dash, — is em-dash

建立一個自定義列表

Markdown
Text-to-HTML conversion tool
Authors
John
Luke

如何建立一個註腳

一個具有註腳的文字。2

註釋也是必不可少的

Markdown將文字轉換為 HTML。

KaTeX數學公式

您可以使用渲染LaTeX數學表示式 KaTeX:

Gamma公式展示 Γ(n)=(n−1)!∀n∈N\Gamma(n) = (n-1)!\quad\forall n\in\mathbb N 是通過尤拉積分

Γ(z)=∫0∞tz−1e−tdt . \Gamma(z) = \int_0^\infty t^{z-1}e^{-t}dt\,.

你可以找到更多關於的資訊 LaTeX 數學表示式here.

新的甘特圖功能，豐富你的文章

Mon 06Mon 13Mon 20已完成 進行中 計劃一 計劃二 現有任務Adding GANTT diagram functionality to mermaid
  • 關於 甘特圖 語法，參考 這兒,

UML 圖表

可以使用UML圖表進行渲染。 Mermaid. 例如下面產生的一個序列圖：:

張三李四王五你好！李四, 最近怎麼樣?你最近怎麼樣，王五？我很好，謝謝!我很好，謝謝!李四想了很長時間,文字太長了不適合放在一行.打量著王五...很好... 王五, 你怎麼樣?張三李四王五

這將產生一個流程圖。:

連結長方形圓圓角長方形菱形
  • 關於 Mermaid 語法，參考 這兒,

FLowchart流程圖

我們依舊會支援flowchart的流程圖：

Created with Raphaël 2.2.0開始我的操作確認？結束yesno
  • 關於 Flowchart流程圖 語法，參考 這兒.

匯出與匯入

匯出

如果你想嘗試使用此編輯器, 你可以在此篇文章任意編輯。當你完成了一篇文章的寫作, 在上方工具欄找到 文章匯出 ，生成一個.md檔案或者.html檔案進行本地儲存。

匯入

如果你想載入一篇你寫過的.md檔案或者.html檔案，在上方工具欄可以選擇匯入功能進行對應副檔名的檔案匯入，
繼續你的創作。

相關推薦

Mysql資料庫資料處理

由於需求變更，導致程式碼邏輯變化，造成資料庫中的code_欄位資料格式混亂。考慮到表中資料量較大，所以選擇寫sql進行update資料處理。 涉及欄位註釋： 標準資料格式如下： 樓-單元-層-號 老資料如下： 缺少 ‘單元’ ‘層’ ‘號’ 中文

mysql資料庫資料備份與恢復

1、通過物理拷貝備份與恢復          對MyISAM引擎的表來說：如果當前此表在拷貝過程中沒有任何寫操作時，可以直接拷貝，對單張表拷貝時只需把把表相關的三個以.frm,.MYD,.MYI結尾的檔案拷貝到另外的

第八章| 2. MySQL資料庫|資料操作| 許可權管理

1、資料操作 SQL（結構化查詢語言），可以操作關係型資料庫 通過sql可以建立、修改賬號並控制賬號許可權；  通過sql可以建立、修改資料庫、表；  通過sql可以增刪改查資料； 可以通過SQL語句中的DML語言來實現資料的操作，包括 使用INSERT實現資料的插入 U

利用binlog恢復mysql資料庫資料

前提：mysql資料庫開啟了binlog日誌      通過  show variables like 'log_%'; 檢視是否開啟binlog日誌。      操作步驟：     在資料庫中

mysql資料庫----資料型別

一、數值型別 1、整型 整數型別：TINYINT SMALLINT MEDIUMINT INT BIGINT 我們完全沒必要為整數型別指定顯示寬度，使用預設的就可以了 預設的顯示寬度，都是在最大值的基礎上加1   2、浮點型  浮點型：FLOAT DOUBLE 定點數：

Mysql資料庫——資料表的優化、外來鍵與三正規化

資料表優化 將商品資訊表進行優化 1.建立商品種類表： create table if not exists goods_cates( id int unsigned primary key auto_increment, name

ms SQL server資料庫備份、壓縮與SQL資料庫資料處理的方法

ms SQL server資料庫備份、壓縮與SQL資料庫資料處理的方法 一、備份資料庫 1、開啟SQL企業管理器，在控制檯根目錄中依次點開Microsoft SQL Server 2、SQL Server組-->雙擊開啟你的伺服器-->雙擊開啟資料庫目錄 3、選擇你的資料庫名稱（如論

sqlYog對mysql資料庫資料遷移

一   資料庫的遷移 1.找到要遷移的表,右擊"備份/匯出",點選備份表作為sql轉儲,繼續操作,就儲存好了相應資料 2.在資料直接執行,匯出的sql語句,將裡面的原資料庫database修改為現在的資料庫連線,就將資料重新建表並插入其中 二   外來excle匯入到

MySQL資料庫事務處理

事務處理用於有效記錄某機構感興趣的業務活動（稱為事務）的資料處理（例如銷售、供貨的定購或貨幣傳輸）。通常，聯機事務處理 (OLTP) 系統執行大量的相對較小的事務。——百度百科 事務處理是將多個操作或者命令一起執行，所有命令全部成功執行才意味著該事務的成功，任何一個命令失敗

springboot中使用hibernate讀取mysql資料庫資料為空。

最近在使用springboot連線mysql資料庫的時候，出現了能夠控制檯能列印SQL語句去不能查詢出資料的異常。經過一番修改終於發現原因： 使用jpa連線mysql資料庫的時候在對映類中的命名的問題，例如在User類中，對應資料庫中的user表；如下： @Entity

使用.iba檔案恢復mysql資料庫資料

在liunx上操作的 測試資料庫名稱：testdb 恢復的表名:testtable 1、停止mysql  (service mysqld stop)服務，my.conf 加上    innodb_force_recovery=1 ，啟動mysql  (service

Ubuntu 上更改 MySQL 資料庫資料儲存目錄

之前寫過一篇部落格“MySQL更改資料庫資料儲存目錄”，當時的測試環境是RHEL和CentOS，誰想最近在Ubuntu下面更改MySQL資料庫資料儲存目錄時遇到了之前未遇到的問題，之前的經驗用不上了（或者說之前的總結不是太全面），修改完MySQL資料庫資料儲存目錄後

MySQL資料庫:資料過濾

組合WHERE子句 WHERE子句在過濾資料時使用的都是單一的條件。為了進行更強的過濾控制， MySQL允許給出多個WHERE子句。這些子句可以兩種方式使用：以AND子句的方式或OR子句的方式使用。 操作符（operator） 用來聯結或改變WHERE子句中的子

mysql資料庫批處理

package cn.itcast.demo5; import java.sql.Connection; import java.sql.PreparedStatement; import java.sql.SQLException; import org.junit.Test; import

Ubuntu上更改MySQL資料庫資料儲存目錄

[email protected]:/etc/mysql/mysql.conf.d# service mysql status● mysql.service - MySQL Community Server   Loaded: loaded (/lib/systemd/system/mysql.se

mysql資料庫資料的刪除與恢復

Part 1 刪除資料, truncate 和 delete  的區別 truncate是整體刪除（速度較快）， delete是逐條刪除（速度較慢）。truncate不寫伺服器log，delete寫伺服器log，也就是truncate效率比delete高

mysql資料庫資料的基本查詢操作

基本查詢語句：select [all | distinct] 欄位或表示式列表 [from子句] [where子句] [group by子句] [having子句] [order by子句] [limit子句]；表示式列表中的條件語句順序不能亂，from：資料來源，表示資料來源於哪張表，例句：select *

SpringBoot整合POI實現檔案匯出Excel，匯入Excel更新Mysql資料庫資料

        上傳功能 轉載自https://blog.csdn.net/xyy1028/article/details/79054749原創寫的非常好，但是每個人都有自己的業務邏輯；所以在研究了一點之後，打上註釋，方便新手理解，同時也方便自己記憶；專案目錄applicat

MySQL資料庫資料匯入到Redis

一：編寫sql指令碼 sql.sql SELECT CONCAT( "*4\r\n", \'$\', LENGTH(redis_cmd), \'\r\n\', redis_cmd, \'\r\n\', \'$\', LENGTH(redis_ke

本地的mysql資料庫亂碼處理

#connection.url = jdbc\:mysql\://192.168.1.222\:3306/test?useUnicode\=true&characterEncoding