1. 程式人生 > 其它 >Go實現短url專案

Go實現短url專案

首先說一下這種業務的應用場景:

  1. 把一個長url轉換為一個短url網址
  2. 主要用於微博,二維碼,等有字數限制的場景

主要實現的功能分析:

  1. 把長url的地址轉換為短url地址
  2. 通過短url獲取對應的原始長url地址
  3. 相同長url地址是否需要同樣的短url地址

這裡實現的是一個api服務

資料庫設計

資料庫的設計其實也沒有非常複雜,如圖所示:

這裡有個設定需要主要就是關於資料庫表中id的設計,需要設定為自增的 並且這裡有個問題需要提前知道,我們的思路是根據id的值會轉換為62進位制關於進位制轉換的程式碼為:

// 將十進位制轉換為62進位制   0-9a-zA-Z 六十二進位制
func transTo62(id int64)string{
    // 1 -- > 1
    // 10-- > a
    // 61-- > Z
    charset := "0123456789abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ"
    var shortUrl []byte
    for{
        var result byte
        number := id % 62
        result = charset[number]
        var tmp []byte
        tmp = append(tmp,result)
        shortUrl = append(tmp,shortUrl...)
        id = id / 62
        if id == 0{
            break
        }
    }
    fmt.Println(string(shortUrl))
    return string(shortUrl)
}

所以這裡需要設定一下資料庫id的起始值,可以設定的大一點,這樣轉換為62進位制之後不至於太短

程式碼邏輯

專案完整的程式碼git地址:https://github.com/pythonsite/go_simple_code/tree/master/short_url 當然這裡的程式碼還有待後面繼續做優化,但是這裡通過golang內建的net/http 庫實現了一個簡單的api功能

程式碼的目錄結構

|____logic
| |____logic.go
|____model
| |____data.go
|____api
| |____api.go
|____client
| |____client.go

logic目錄為主要的處理邏輯 model是定義了request和response結構體 api目錄為程式的入口程式 client 為測試請求,進行地址的轉換

model 程式碼為:

package model


type Long2ShortRequest struct {
    OriginUrl string `json:"origin_url"`
}

type ResponseHeader struct {
    Code int `json:"code"`
    Message string `json:"message"`
}

type Long2ShortResponse struct {
    ResponseHeader
    ShortUrl string `json:"short_url"`
}

type Short2LongRequest struct {
    ShortUrl string `json:"short_url"`
}

type Short2LongResponse struct {
    ResponseHeader
    OriginUrl string `json:"origin_url"`
}

logic的程式碼為:

package logic

import(
    "go_dev/11/short_url/model"
    "github.com/jmoiron/sqlx"
    "fmt"
    "crypto/md5"
    "database/sql"
)

var (
    Db *sqlx.DB
)

type ShortUrl struct {
    Id int64 `db:"id"`
    ShortUrl string `db:"short_url"`
    OriginUrl string `db:"origin_url"`
    HashCode string `db:"hash_code"`
}

func InitDb(dsn string)(err error) {
    // 資料庫初始化
    Db, err = sqlx.Open("mysql",dsn)
    if err != nil{
        fmt.Println("connect to mysql failed:",err)
        return
    }
    return
}

func Long2Short(req *model.Long2ShortRequest) (response *model.Long2ShortResponse, err error) {
    response = &model.Long2ShortResponse{}
    urlMd5 := fmt.Sprintf("%x",md5.Sum([]byte(req.OriginUrl)))
    var short ShortUrl
    err = Db.Get(&short,"select id,short_url,origin_url,hash_code from short_url where hash_code=?",urlMd5)
    if err == sql.ErrNoRows{
        err = nil
        // 資料庫中沒有記錄,重新生成一個新的短url
        shortUrl,errRet := generateShortUrl(req,urlMd5)
        if errRet != nil{
            err = errRet
            return
        }
        response.ShortUrl = shortUrl
        return
    }
    if err != nil{
        return
    }
    response.ShortUrl = short.ShortUrl
    return
}

func generateShortUrl(req *model.Long2ShortRequest,hashcode string)(shortUrl string,err error){
    result,err := Db.Exec("insert INTO short_url(origin_url,hash_code)VALUES (?,?)",req.OriginUrl,hashcode)
    if err != nil{
        return
    }
    // 0-9a-zA-Z 六十二進位制
    insertId,_:= result.LastInsertId()
    shortUrl = transTo62(insertId)
    _,err = Db.Exec("update short_url set short_url=? where id=?",shortUrl,insertId)
    if err != nil{
        fmt.Println(err)
        return
    }
    return
}

// 將十進位制轉換為62進位制   0-9a-zA-Z 六十二進位制
func transTo62(id int64)string{
    // 1 -- > 1
    // 10-- > a
    // 61-- > Z
    charset := "0123456789abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ"
    var shortUrl []byte
    for{
        var result byte
        number := id % 62
        result = charset[number]
        var tmp []byte
        tmp = append(tmp,result)
        shortUrl = append(tmp,shortUrl...)
        id = id / 62
        if id == 0{
            break
        }
    }
    fmt.Println(string(shortUrl))
    return string(shortUrl)
}


func Short2Long(req *model.Short2LongRequest) (response *model.Short2LongResponse, err error) {
    response = &model.Short2LongResponse{}
    var short ShortUrl
    err = Db.Get(&short,"select id,short_url,origin_url,hash_code from short_url where short_url=?",req.ShortUrl)
    if err == sql.ErrNoRows{
        response.Code = 404
        return
    }
    if err != nil{
        response.Code = 500
        return
    }
    response.OriginUrl = short.OriginUrl
    return
}

api的程式碼為:

package main

import (
    "io/ioutil"
    "net/http"
    "fmt"
    "encoding/json"
    "go_dev/11/short_url/logic"
    "go_dev/11/short_url/model"
    _ "github.com/go-sql-driver/mysql"
)

const (
    ErrSuccess = 0
    ErrInvalidParameter = 1001
    ErrServerBusy = 1002
)

func getMessage(code int) (msg string){
    switch code {
    case ErrSuccess:
        msg = "success"
    case ErrInvalidParameter:
        msg = "invalid parameter"
    case ErrServerBusy:
        msg = "server busy"
    default:
        msg = "unknown error"
    }

    return
}

// 用於將返回序列化資料,失敗的返回
func responseError(w http.ResponseWriter, code int) {
    var response model.ResponseHeader
    response.Code = code
    response.Message = getMessage(code)

    data, err := json.Marshal(response)
    if err != nil {
        w.Write([]byte("{"code":500, "message": "server busy"}"))
        return
    }

    w.Write(data)
}

// 用於將返回序列化資料,成功的返回
func responseSuccess(w http.ResponseWriter, data interface{}) {


    dataByte, err := json.Marshal(data)
    if err != nil {
        w.Write([]byte("{"code":500, "message": "server busy"}"))
        return
    }

    w.Write(dataByte)
}

// 長地址到短地址
func Long2Short(w http.ResponseWriter, r *http.Request) {
    // 這裡需要說明的是發來的資料是通過post發過來一個json格式的資料
    data, err := ioutil.ReadAll(r.Body)
    if err != nil {
        fmt.Println("read all failded, ", err)
        responseError(w, 1001)
        return
    }

    var req model.Long2ShortRequest
    // 將反序列化的資料儲存在結構體中
    err = json.Unmarshal(data, &req)
    if err != nil {
        fmt.Println("Unmarshal failded, ", err)
        responseError(w, 1002)
        return
    }

    resp, err := logic.Long2Short(&req)
    if err != nil {
        fmt.Println("Long2Short failded, ", err)
        responseError(w, 1003)
        return
    }

    responseSuccess(w, resp)
}

// 短地址到長地址
func Short2Long(w http.ResponseWriter, r *http.Request) {
    // 這裡需要說明的是發來的資料是通過post發過來一個json格式的資料
    data, err := ioutil.ReadAll(r.Body)
    if err != nil {
        fmt.Println("read all failded, ", err)
        responseError(w, 1001)
        return
    }

    var req model.Short2LongRequest
    // 將反序列化的資料儲存在結構體中
    err = json.Unmarshal(data, &req)
    if err != nil {
        fmt.Println("Unmarshal failded, ", err)
        responseError(w, 1002)
        return
    }

    resp, err := logic.Short2Long(&req)
    if err != nil {
        fmt.Println("Long2Short failded, ", err)
        responseError(w, 1003)
        return
    }
    responseSuccess(w, resp)
}

func main(){
    err := logic.InitDb("root:123456@tcp(192.168.50.145:3306)/short_url?parseTime=true")
    if err != nil{
        fmt.Printf("init db failed,err:%vn",err)
        return
    }
    http.HandleFunc("/trans/long2short", Long2Short)
    http.HandleFunc("/trans/short2long", Short2Long)
    http.ListenAndServe(":18888", nil)
}

小結

這次通過這個小程式碼對go也有了一個初步的認識和使用,同時也通過net/http 包實現了api的功能,也對其基本使用有了大致瞭解