瀏覽標籤：

筆記

[MySQL] INSERT資料前檢查資料是否重複

有時候需要檢查資料是否重複再填入，這裡簡單做個筆記。

程式碼

INSERT INTO `table` (`title`, `url`, `photocount`, `uploadtime`, `findtime`)
SELECT @title, @url, @photocount, @uploadtime, @findtime
FROM DUAL
WHERE NOT EXISTS (	SELECT 1
			FROM `table`
			WHERE `title` = @title
                    	AND `url` = @url);

 

SELECT @title, @url, @photocount, @uploadtime, @findtime

SELECT後面是準備填入的參數

WHERE NOT EXISTS (	SELECT 1
			FROM `table`
			WHERE `title` = @title
                    	AND `url` = @url);

WHERE這邊驗證資料是否重複

 

來源：MySQL INSERT 與 UPDATE 的一些特殊情況用法

       

[C#] 使用 HtmlAgilityPack 搜尋子節點輸出文字時出現亂碼

今天在撈取購物網站資料時發生了一件很詭異的事情，明明在HtmlNodeCollection搜尋時在父節點裡明明就是中文字，但在進行foreach篩選子節點時卻發生原本的中文decode了  !!!!
經過了三四個小時的google與詢問大大，終於有了結果。

  1. 在父節點裡是正常顯示中文01
  2. 到了子節點卻發生decode的現象02
  3. 將字串貼入記事本用IE開啟即正常顯示中文 
    館長推薦

    03

解法如下：

  • 使用HttpUtility.HtmlDecode這個方法來恢復正常文字 
    HttpUtility.HtmlDecode(nodes_proName[i].InnerText)

    04

       

[C#] 使用 HtmlAgilityPack 來採集網頁

因為工作需求，所以必須寫一隻小程式來擷取網頁資料，上網Google了一下於是找到了一個好用的套件HtmlAgilityPack，可以迅速的過濾HTML標籤，取得網頁資料。

 

  1. 從NuGet安裝HtmlAgilityPack 

    01

  2. 讀取網頁(以原價屋為例) 
    //指定來源網頁
WebClient url = new WebClient();
//將網頁來源資料暫存到記憶體內
MemoryStream ms = new MemoryStream(url.DownloadData("http://www.coolpc.com.tw/evaluate.php"));
//使用預設編碼讀入 HTML 
HtmlDocument doc = new HtmlDocument();
doc.Load(ms, Encoding.Default);
  3. 原價屋除了商品的類型以外，類型內的選單(select)有做群組分類，為了要將分類與商品所以先建一個Model 
    class Product
{
	public string type { get; set; }

	public string name { get; set; }
}
  4. 判斷所要的商品類型(以CPU為例)，再擷取該商品類型內選單的分類 
    var list_type = new List<string>();
HtmlNodeCollection nodes = doc.DocumentNode.SelectNodes("//select[@name='n4']//optgroup");

foreach (HtmlNode node in nodes)
{
	var type = node.Attributes["label"].Value;
	list_type.Add(type);
}
  5. 接下來就要該使擷取商品名稱與價格了 
    List<string> list_name = doc.DocumentNode.SelectSingleNode("//select[@name='n4']").InnerText.Split('\n').ToList();

//刪除不必要的非商品選項
list_name.RemoveRange(0,3);
list_name.RemoveAt(list_name.Count - 1);
  6. 將商品類型與名稱填入Model 
    var models = new List<Product>();
int number = 0;
for (int i = 0; i < list_name.Count; i++)
{
	string type = list_type[number];
	string name = list_name[i];

	if (name == "")
	{
		number++;
	}
	else
	{
		models.Add(new Product()
		{
			type = type,
			name = name
		});

		Console.WriteLine("類型：{0} ,", type);
		Console.WriteLine("名稱：{0}", name);
	}
}

Console.ReadLine();
  7. 執行結果0000

 

範例程式：https://github.com/shuangrain/ConsoleApplication_HtmlAgilityPack

 

參考：[ASP.NET][C#]使用HtmlAgilityPack(1) 擷取網頁上的股票

       

[Windows] 在 Windows Server 2012 R2 上安裝 PPTP Server

有時候需要VPN來遠端使用一些本地服務，或是需要跳板IP的時候，就需要VPN這個服務啦，先前有整理過Linux的VPN安裝教學，這次來整理一下Windows的囉！

 

安裝腳色

  1. 將遠端存取打勾
    螢幕截圖 2016-06-11 16.15.37
  2. 無須異動直接下一步
    螢幕截圖 2016-06-11 16.15.51
  3. 下一步
    螢幕截圖 2016-06-11 16.16.01
  4. 將DirectAccess與VPN(RAS)打勾
    螢幕截圖 2016-06-11 16.16.10
  5. 會挑出視窗詢問是否安裝下列功能
    螢幕截圖 2016-06-11 16.16.16
  6. 將路由打勾
    螢幕截圖 2016-06-11 16.16.20
  7. 點擊安裝
    螢幕截圖 2016-06-11 16.16.35
  8. 安裝過程
    螢幕截圖 2016-06-11 16.16.49

 

頁面： 1 2 3 4
       

[WordPress] 在Windows Server 2012 R2中使用 Disqus Comment System 連結帳號失敗

最近手賤把Disqus解除帳號連結，卻發現怎麼樣都無法連結帳號，一直顯示Unable to connect to the Disqus API servers如下：

01

拜了Google大神很久都找不到原因，無論重新安裝Windows Server還是使用國外HostGator Web Hosting(Windows)都發生同樣錯誤，忽然想起之前安裝這個外掛的時候也有發生這個問題，後來改用Linux後就正常了，於是乎懷疑是否是作業系統的問題，立即開了虛擬機安裝一台Linux測試，在Linux底下沒有做什麼特別的設定，按下登入馬上就連結成功到Disqus。

個人猜測在Windows裡安裝的php套件少了什麼東西，導致外掛無法正常運作，雖然切回Windows後無法同步留言回Wordpress，但是此外掛還是有正常在運作中可以正常留言，那就先這樣結案吧！

       

[C#][ASP.NET MVC5] FileUpload 上傳檔案大小的限制

ASP.NET為防止駭客利用大檔案進行DOS(Denial Of Service)攻擊，所以把上傳檔案大小限制在4096KB(4MB)，因此當上傳檔案超過4MB時，就會收到System.Web.HttpException 超出最大的要求長度的錯誤訊息如下：

01

那如果需要上傳超過4MB的檔案怎麼辦？那就必須修改Web.config的system.web讓該站自訂大小，修改內容如下：

<system.web>
	<httpRuntime targetFramework="4.5" maxRequestLength="102400" executionTimeout="600"/>
</system.web>
  • maxRequestLength 檔案大小(KB)
  • executionTimeout 上傳時間(秒)

修改完後雖然不會跳出上面的錯誤了，不過卻跳出另外一個訊息：
04

拜了Google才發現，原來 Windows Server 2008 (IIS 7.0) 上又多了一個 maxAllowedContentLength 屬性 (單位為 Byte)，於是乎又打開了Web.config找到system.webServer，修改內容如下：

<system.webServer>
	<security>
		<requestFiltering>
			<requestLimits maxAllowedContentLength="1073741824" />
		</requestFiltering>
	</security>
</system.webServer>

其預設值為 30000000 Bytes (~28.6 MB)，所以上傳 30 MB 的檔案就會產生錯誤了。這邊我是修改為1 GB (1024 x 1024 x 1024)可視情況調整。

綜合以上的修改結果為：

02

 

如果使用者上傳超過設定的最大上限怎麼辦？是不是又會跳出錯誤訊息？不要害怕，只要在Global.asax裡面處理這項錯誤即可，處理方式如下：

protected void Application_BeginRequest(object sender, EventArgs e)
{
	HttpRuntimeSection section = (HttpRuntimeSection)ConfigurationManager.GetSection("system.web/httpRuntime");
	int maxFileSize = section.MaxRequestLength * 1024;
	if (Request.ContentLength > maxFileSize)
	{
		try
		{
			Response.Redirect("~/SizeError.aspx");
		}
		catch (Exception ex)
		{
			Logger logger = LogManager.GetCurrentClassLogger();
			logger.Warn(ex.Message);
		}
	}
}

03

 

結論：

一個簡單的上傳功能，想不到有這麼多眉眉角角需要注意，做這行真是不容易QQ

 

參考：

  1. ASP.NET如何設定檔案上傳大小可超過預設4096KB(4MB)
  2. FileUpload 上傳檔案大小的限制
       

[C#][ASP.NET MVC5] 使用 HttpPostedFileBase 檔案上傳

檔案上傳功能在網頁中常常出現，在ASP.NET MVC裡面要上傳檔案非常簡單，這裡簡單筆記一下有關 ASP.NET MVC 的檔案上傳基本操作方法。

  • Controller 
    [HttpPost]
public ActionResult Upload(HttpPostedFileBase file)
{
	if (file != null && file.ContentLength > 0)
	{
		var fileName = Path.GetFileName(file.FileName);
		var path = Server.MapPath("~/App_Data/FileUploads");
		//若該資料夾不存在，則新增一個
		if (!Directory.Exists(path))
		{
			Directory.CreateDirectory(path);
		}
		path = Path.Combine(path, fileName);
		file.SaveAs(path);
	}
	return RedirectToAction("Upload");
}
  • View 
    @using (Html.BeginForm("Upload", "Home", FormMethod.Post, new { enctype = "multipart/form-data" }))
{
    <div class="form-horizontal">
        <div class="form-group">
            <label class="control-label col-sm-2">選擇檔案</label>
            <div class="col-sm-10">
                <input type="file" name="file">
            </div>
        </div>
        <div class="form-group">
            <div class="col-sm-offset-2 col-sm-10">
                <input type="submit" value="提交" class="btn btn-primary" />
            </div>
        </div>
    </div>
}

    這邊要注意的是，如需要使用HttpPostedFileBase上傳檔案的話，則必須添加enctype = "multipart/form-data"，不然怎麼樣都沒辦法正常收到資料！
    另外如果使用下列語法是無法接收資料的，因這樣表單並沒有含enctype = "multipart/form-data"這項

    @using (Html.BeginForm("Upload", "Home", new { enctype = "multipart/form-data" }))

    一定要用改為下面的方法

    @using (Html.BeginForm("Upload", "Home", FormMethod.Post, new { enctype = "multipart/form-data" }))

 

範例程式：https://github.com/shuangrain/WebApplication_Upload

       

[C#] 檢查資料夾是否存在，如不存在則新增資料夾

在儲存檔案的時候，常常會需要動態新增資料夾，但如果沒有特別處理的話，資料夾無法正常建立，所以需要用到下面的語法來檢查該資料夾是否存在，如不存在則新增。

using System.IO;
if (Directory.Exists(資料夾路徑))
{
    //資料夾存在
}
else
{
    //新增資料夾
    Directory.CreateDirectory(@"C:\temp\");
}

P.S. 寫入檔案除了要注意資料夾路徑是否存在以外，還要注意該應用程式的權限問題唷！