이 repo는 2016년 10월 12~14일간 예정된 m-duel 프로젝트에 대한 코드와 hands on 자료를 제공
Azure Machine Learning 참고링크 : https://azure.microsoft.com/en-us/documentation/services/machine-learning/
기본 제공되는 https://github.com/m-duel-project/ml-data 데이터를 이용해 classification ML을 수행하는 모델 생성
필요한 property를 선정해 traning 시키고 결과를 도출
노출된 ML API를 C#코드, R 또는 Python으로 활용하는 방법
C#, node.js + (Python) 을 이용한 Azure Machine Learning API 데모 코드
이 Repository는 모각코x모두 아홉번째 모임 발표에 사용된 demo 코드.
https://github.com/CloudBreadPaPa/mogakko-9th
ml-demo\cs 폴더에서 프로젝트 실행
코드의 API KKey를 자신의 Azure ML API Key로 수정
...
const string apiKey = "API Key"; // Azure ML이 제공하는 API Key
...
client.BaseAddress = new Uri("Azure ML이 제공하는 API URL");
...
ml-demo\node\app.js 파일의 API Key를 자신의 API Key로 수정
...
var host = 'asiasoutheast.services.azureml.net' //제공하는 HOST 경로
var path = 'HOST 이후 URL Path 정보'
...
var api_key = 'API Key 정보'
...
node.js로 Azure ML을 call 예제 링크 :
node reqeust package를 이용하면 더 쉽게 node에서 Azure ML을 호출 가능할 것으로 예상됨.
참고링크 : https://github.com/request/request
Python을 호출하기 위한 데모
기본 code는 Python 2.7.x 기준. 아래 코드 데모는 아마도 한글로 인해 unicode 처리가 필요할 수 있음.
import urllib2
# If you are using Python 3+, import urllib instead of urllib2
import json
data = {
"Inputs": {
"input1":
{
"ColumnNames": ["idx", "나이", "프로모션참여수", "식별자", "일평균게임플레이분", "90일내아이템구매수", "게임레벨범위", "보유크리스탈", "유입경로", "인종", "성별", "가입코드", "구매번호", "주당접속수", "가입국가", "이탈여부"],
"Values": [ [ "0", "0", "0", "0", "0", "0", "0", "0", "value", "value", "value", "0", "0", "0", "value", "value" ], [ "0", "0", "0", "0", "0", "0", "0", "0", "value", "value", "value", "0", "0", "0", "value", "value" ], ]
}, },
"GlobalParameters": {
}
}
body = str.encode(json.dumps(data))
url = 'AzureML이 제공하는 URL'
api_key = 'AzureML이 제공하는 APIKey' # Replace this with the API key for the web service
headers = {'Content-Type':'application/json', 'Authorization':('Bearer '+ api_key)}
req = urllib2.Request(url, body, headers)
try:
response = urllib2.urlopen(req)
# If you are using Python 3+, replace urllib2 with urllib.request in the above code:
# req = urllib.request.Request(url, body, headers)
# response = urllib.request.urlopen(req)
result = response.read()
print(result)
except urllib2.HTTPError, error:
print("The request failed with status code: " + str(error.code))
# Print the headers - they include the requert ID and the timestamp, which are useful for debugging the failure
print(error.info())
print(json.loads(error.read()))
마찬가지로, API Key 변수를 자신의 Key로 변경하고 수행 해야 함.
...
url = 'AzureML이 제공하는 URL'
api_key = 'AzureML이 제공하는 APIKey' # Replace this with the API key for the web service
...
이부분을 변경하고 수행
- Azure Portal에 로그온 후 리소스 그룹을 생성
https://azure.microsoft.com/en-us/documentation/articles/resource-group-portal/
- Web App을 생성
https://azure.microsoft.com/en-us/documentation/articles/app-service-web-get-started/
- 생성한 Web App에서 FTP, Git, Github 등으로 배포
FTP : https://azure.microsoft.com/en-us/documentation/articles/web-sites-deploy/
Git : https://azure.microsoft.com/en-us/documentation/articles/app-service-deploy-local-git/
git init
git add .
git commit -m "initial commit"
git remote add azure [URL for remote repository]
git push azure master
//코드 수정 작업 후
git add .
git commit -m "second commit"
git push azure master
//배포 확인
Github : https://azure.microsoft.com/en-us/documentation/articles/app-service-web-arm-from-github-provision/
repo를 github에 생성
Azure portal에서 연속 배포 설정
설정 후 github의 repo를 Azure Portal에서 지정
- Web App과 C# - ASP.NET
https://azure.microsoft.com/en-us/documentation/articles/web-sites-dotnet-get-started/
VS에서 ASP.NET 프로젝트 생성
빌드, 디버그, 실행
생성된 Project를 VS에서 게시 수행
- Web App과 PHP
https://azure.microsoft.com/en-us/documentation/articles/app-service-web-php-get-started/
index.php 생성
phpinfo() 코드 추가
WebMatrix 또는 git을 이용해 publish 수행
Web App 설정에서 php version 및 php 관련 cofnig 수행
- Web App과 node.js
https://azure.microsoft.com/en-us/documentation/articles/app-service-web-nodejs-get-started/
app.js 생성
console.log 코드 추가
git 등을 이용해 publish 수행
백그라운드에서 수행되는 작업을 WebJob 으로 실행
https://azure.microsoft.com/en-us/documentation/articles/web-sites-create-web-jobs/
// http://requestb.in/ 사이트를 이용해 webjob을 inpection
// req.php 파일 생성
<?php
$result = file_get_contents('http://requestb.in/경로');
echo $result;
?>
// settings.job 파일 생성
{
"schedule": "0 */2 * * * *"
}
// 두 파일을 zip으로 묶은 후 webjob으로 업로드
Deploy WebJobs using Visual Studio
https://azure.microsoft.com/en-us/documentation/articles/websites-dotnet-deploy-webjobs/
// demo\webjob-cs-with-webapp 프로젝트 참조
// console 프로젝트 또는 Azure WebJob 프로젝트 템플릿으로 프로젝트 생성
// ASP.NET web project 생성 후 추가로 console project 생성
// console project에서 reqeustb.in을 이용해 요청 테스트
// Web rpoject에서 console 프로젝트를 webjob으로 추가
// Web App 배포 수행
Web App 크기조절
https://azure.microsoft.com/en-us/documentation/articles/web-sites-scale/
// Web App의 App Service Plan과 크기조절
참고정보 : Pattern & Practice - Transient Fault Handling
https://msdn.microsoft.com/en-us/library/dn440719(v=pandp.60).aspx
Azure Storage 개발에 유용한 Storage Explorer 도구 다운로드
Storage Exploerer 설치 후 Azure Portal에서 저장소 계정(Storage Account)의 엑세스 키 - 연결문자열을 넣으면 해당 저장소 계정에 Storage Explorer로 바로 접근 가능합니다.
참고링크 : https://azure.microsoft.com/en-us/documentation/articles/storage-dotnet-how-to-use-blobs/
public static void CreateContainer()
{
// 저장소 연결 문자열 처리
CloudStorageAccount storageAccount = CloudStorageAccount.Parse(
CloudConfigurationManager.GetSetting("StorageConnectionString"));
// client 개체 생성
CloudBlobClient blobClient = storageAccount.CreateCloudBlobClient();
// 컨테이너 개체 참조
CloudBlobContainer container = blobClient.GetContainerReference("mycontainer");
// 컨테이너가 없으면 생성
container.CreateIfNotExists();
return;
}
// 아래 링크에서 정보 확인 https://azure.microsoft.com/en-us/documentation/articles/storage-nodejs-how-to-use-blob-storage/
// 설치
// npm install azure-storage
// 패키지 import 수행
var azure = require('azure-storage');
// connection string 작업
// environment variable을 구성 | Azure 위에서 구성도 가능
var tableService = azure.createTableService('<저장소이름>', '<저장소키>');
// 테이블 생성
tableService.createTableIfNotExists('nodetable', function(error, result, response) {
if (!error) {
// 수행완료
console.log('ok');
console.log(response);
} else {
console.log(error);
}
});
참고링크 : https://azure.microsoft.com/en-us/documentation/articles/storage-dotnet-how-to-use-tables/
// 저장소 연결 문자열 처리
CloudStorageAccount storageAccount = CloudStorageAccount.Parse(
CloudConfigurationManager.GetSetting("StorageConnectionString"));
// table 클라이언트 개체 생성
CloudTableClient tableClient = storageAccount.CreateCloudTableClient();
// 테이블 참조 설정
CloudTable table = tableClient.GetTableReference("people");
// 테이블이 존재하지 않으면 생성
table.CreateIfNotExists();
// 아래 링크에서 정보 확인 https://azure.microsoft.com/en-us/documentation/articles/storage-nodejs-how-to-use-blob-storage/
// 설치
// npm install azure-storage
// 패키지 import 수행
var azure = require('azure-storage');
// connection string 작업
// environment variable을 구성 | Azure 위에서 구성도 가능
var tableService = azure.createTableService('<저장소계정>', '<저장소키>');
// 테이블 생성
tableService.createTableIfNotExists('nodetable', function(error, result, response) {
if (!error) {
// 수행완료
console.log('ok');
console.log(response);
} else {
console.log(error);
}
});
https://azure.microsoft.com/en-us/documentation/articles/storage-dotnet-how-to-use-queues/
public static void CreateQueue()
{
// 연결 문자열 처리
CloudStorageAccount storageAccount = CloudStorageAccount.Parse(
CloudConfigurationManager.GetSetting("StorageConnectionString"));
// 큐 클라이언트 개체 생성
CloudQueueClient queueClient = storageAccount.CreateCloudQueueClient();
// 큐 참조 설정
CloudQueue queue = queueClient.GetQueueReference("myqueue");
// 큐가 없으면 생성
queue.CreateIfNotExists();
}
https://azure.microsoft.com/en-us/documentation/articles/storage-nodejs-how-to-use-queues/
todo
참고링크 : https://azure.microsoft.com/en-us/documentation/articles/storage-dotnet-how-to-use-files/
주의사항으로, outbound 445 가 열려 있어야 하는 제한이 있으며, ISP에 따라서 다름.
소개 및 생성
VS 또는 SSMS에서 연결
SQL Database vs VM
참고링크 : https://msdn.microsoft.com/library/mt718320.aspx
using System;
using C = System.Data.SqlClient;
namespace azure_sql_cs
{
class Program
{
static void Main(string[] args)
{
using (var connection = new C.SqlConnection(
"Server=tcp:서버명.database.windows.net,1433;Initial Catalog=DB명;Persist Security Info=False;User ID=유저아이디;Password=비밀번호;MultipleActiveResultSets=False;Encrypt=True;TrustServerCertificate=False;Connection Timeout=30;"
)) // 연결 문자열을 복사하고 Azure SQL Database 생성시 지정한 user id와 pwd로 변경. 서버명과 DB명은 자동으로 연결 문자열에 지정
{
connection.Open();
Console.WriteLine("Connected successfully.");
Console.WriteLine("Press any key to finish...");
Console.ReadKey(true);
}
}
}
}
참고링크 :
https://msdn.microsoft.com/library/mt715784.aspx
https://msdn.microsoft.com/library/mt652094.aspx
npm install tedious
var Connection = require('tedious').Connection;
var config = {
userName: 'yourusername',
password: 'yourpassword',
server: 'yourserver.database.windows.net',
// If you are on Microsoft Azure, you need this:
options: {encrypt: true, database: 'AdventureWorks'}
};
var connection = new Connection(config);
connection.on('connect', function(err) {
// If no error, then good to proceed.
console.log("Connected");
});
-
Elastic Pool
-
OSS에서 연결 : https://azure.microsoft.com/en-us/documentation/articles/sql-database-libraries/
소개
NoSQL tutorial: Build a DocumentDB C# console application
https://azure.microsoft.com/en-us/documentation/articles/documentdb-get-started-quickstart/
// app.config 파일의 내용을 key 값을 생성한 documentdb의 정보로 수정
...
<appSettings>
<add key="EndpointUri" value="엔드포인트URI로변경" />
<add key="PrimaryKey" value="프라이머리키로 변경" />
</appSettings>
...
참고링크 : https://azure.microsoft.com/en-us/documentation/articles/documentdb-nodejs-get-started/
npm install
// config.js 파일의 정보를 수정
...
config.endpoint = "엔드포인트URI";
config.primaryKey = "프라이머리키";
...
이후 코드를 실행하면 console에 documentdb의 작업 내용을 source 흐름대로 처리
문서의 끝