আপনার অ্যাপ থেকে গুগল ক্লাউড এপিআই কল করার জন্য, আপনাকে একটি মধ্যবর্তী REST API তৈরি করতে হবে যা অনুমোদন পরিচালনা করে এবং এপিআই কী-এর মতো গোপনীয় মান সুরক্ষিত রাখে। এরপর, এই মধ্যবর্তী পরিষেবাটির সাথে প্রমাণীকরণ ও যোগাযোগের জন্য আপনাকে আপনার মোবাইল অ্যাপে কোড লিখতে হবে।
এই REST API তৈরি করার একটি উপায় হলো Firebase Authentication and Functions ব্যবহার করা, যা আপনাকে Google Cloud API-এর জন্য একটি পরিচালিত, সার্ভারবিহীন গেটওয়ে প্রদান করে। এই গেটওয়েটি অথেনটিকেশন পরিচালনা করে এবং আগে থেকে তৈরি SDK ব্যবহার করে আপনার মোবাইল অ্যাপ থেকে এটিকে কল করা যায়।
এই নির্দেশিকাটি দেখায় কিভাবে আপনার অ্যাপ থেকে ক্লাউড ভিশন এপিআই কল করার জন্য এই কৌশলটি ব্যবহার করতে হয়। এই পদ্ধতিটি সমস্ত প্রমাণীকৃত ব্যবহারকারীকে আপনার ক্লাউড প্রকল্পের মাধ্যমে ক্লাউড ভিশনের বিলযোগ্য পরিষেবাগুলি অ্যাক্সেস করার অনুমতি দেবে, তাই এগিয়ে যাওয়ার আগে বিবেচনা করুন যে এই প্রমাণীকরণ ব্যবস্থাটি আপনার ব্যবহারের ক্ষেত্রে যথেষ্ট কিনা।
শুরু করার আগে
আপনার প্রজেক্ট কনফিগার করুন
আপনি যদি এখনও আপনার অ্যাপে Firebase যোগ না করে থাকেন, তাহলে গেটিং স্টার্টেড গাইডের ধাপগুলো অনুসরণ করে তা করে নিন।ফায়ারবেস ডিপেন্ডেন্সিগুলো ইনস্টল ও পরিচালনা করতে সুইফট প্যাকেজ ম্যানেজার ব্যবহার করুন।
- Xcode-এ আপনার অ্যাপ প্রজেক্টটি খুলে, File > Add Packages- এ যান।
- অনুরোধ করা হলে, Firebase Apple প্ল্যাটফর্ম SDK রিপোজিটরিটি যোগ করুন:
- Firebase ML লাইব্রেরিটি নির্বাচন করুন।
- আপনার টার্গেটের বিল্ড সেটিংসের ' Other Linker Flags' সেকশনে
-ObjCফ্ল্যাগটি যোগ করুন। - কাজ শেষ হলে, Xcode স্বয়ংক্রিয়ভাবে ব্যাকগ্রাউন্ডে আপনার ডিপেন্ডেন্সিগুলো রিজলভ ও ডাউনলোড করা শুরু করবে।
https://github.com/firebase/firebase-ios-sdk.git
এরপর, অ্যাপের ভেতরে কিছু সেটআপ সম্পন্ন করুন:
- আপনার অ্যাপে Firebase ইম্পোর্ট করুন:
সুইফট
import FirebaseMLModelDownloader
উদ্দেশ্য-সি
@import FirebaseMLModelDownloader;
আরও কয়েকটি কনফিগারেশন ধাপ বাকি, এবং আমরা প্রস্তুত:
আপনি যদি আপনার প্রোজেক্টের জন্য এখনও ক্লাউড-ভিত্তিক এপিআই চালু না করে থাকেন, তবে এখনই তা করুন:
- Firebase কনসোলে Firebase ML APIs পৃষ্ঠাটি খুলুন।
আপনি যদি এখনও আপনার প্রজেক্টটি পে-অ্যাজ-ইউ-গো ব্লেজ প্রাইসিং প্ল্যানে আপগ্রেড না করে থাকেন, তাহলে তা করার জন্য 'আপগ্রেড' বাটনে ক্লিক করুন। (শুধুমাত্র যদি আপনার প্রজেক্টটি ব্লেজ প্রাইসিং প্ল্যানে না থাকে, তবেই আপনাকে আপগ্রেড করার জন্য অনুরোধ করা হবে।)
শুধুমাত্র ব্লেজ প্রাইসিং প্ল্যানে থাকা প্রজেক্টগুলোই ক্লাউড-ভিত্তিক এপিআই ব্যবহার করতে পারে।
- যদি ক্লাউড-ভিত্তিক এপিআই আগে থেকে সক্রিয় করা না থাকে, তাহলে ‘ক্লাউড-ভিত্তিক এপিআই সক্রিয় করুন’ এ ক্লিক করুন।
- ক্লাউড ভিশন এপিআই-তে অ্যাক্সেস নিষিদ্ধ করতে আপনার বিদ্যমান ফায়ারবেস এপিআই কীগুলি কনফিগার করুন:
- ক্লাউড কনসোলের ক্রেডেনশিয়ালস পৃষ্ঠাটি খুলুন।
- তালিকার প্রতিটি এপিআই কী-এর জন্য, এডিটিং ভিউ খুলুন এবং 'কী রেস্ট্রিকশনস' বিভাগে ক্লাউড ভিশন এপিআই ছাড়া বাকি সমস্ত উপলব্ধ এপিআই তালিকায় যুক্ত করুন।
কলযোগ্য ফাংশনটি স্থাপন করুন
এরপরে, আপনার অ্যাপ এবং ক্লাউড ভিশন এপিআই-এর মধ্যে সংযোগ স্থাপনের জন্য যে ক্লাউড ফাংশনটি ব্যবহার করবেন, সেটি ডিপ্লয় করুন। functions-samples রিপোজিটরিতে একটি উদাহরণ রয়েছে যা আপনি ব্যবহার করতে পারেন।
ডিফল্টরূপে, এই ফাংশনের মাধ্যমে ক্লাউড ভিশন এপিআই অ্যাক্সেস করলে শুধুমাত্র আপনার অ্যাপের প্রমাণীকৃত ব্যবহারকারীরাই এটি ব্যবহার করতে পারবেন। আপনি বিভিন্ন প্রয়োজন অনুযায়ী ফাংশনটি পরিবর্তন করতে পারেন।
ফাংশনটি স্থাপন করতে:
- functions-samples রিপোটি ক্লোন বা ডাউনলোড করুন এবং
Node-1st-gen/vision-annotate-imageডিরেক্টরিতে যান:git clone https://github.com/firebase/functions-samplescd Node-1st-gen/vision-annotate-image - নির্ভরতা ইনস্টল করুন:
cd functionsnpm installcd .. - আপনার যদি Firebase CLI না থাকে, তবে এটি ইনস্টল করুন ।
-
vision-annotate-imageডিরেক্টরিতে একটি Firebase প্রজেক্ট শুরু করুন। অনুরোধ করা হলে, তালিকা থেকে আপনার প্রজেক্টটি নির্বাচন করুন।firebase init
- ফাংশনটি স্থাপন করুন:
firebase deploy --only functions:annotateImage
আপনার অ্যাপে Firebase Auth যোগ করুন
উপরে ব্যবহৃত কলযোগ্য ফাংশনটি আপনার অ্যাপের প্রমাণীকৃত নয় এমন ব্যবহারকারীদের যেকোনো অনুরোধ প্রত্যাখ্যান করবে। যদি আপনি ইতিমধ্যে তা না করে থাকেন, তাহলে আপনাকে আপনার অ্যাপে Firebase Auth যোগ করতে হবে।
আপনার অ্যাপে প্রয়োজনীয় নির্ভরতা যোগ করুন
Swift Package Manager ব্যবহার করে Cloud Functions for Firebase লাইব্রেরিটি ইনস্টল করুন।
এখন আপনি ছবির মধ্যে থাকা লেখা শনাক্ত করা শুরু করতে প্রস্তুত।
১. ইনপুট চিত্রটি প্রস্তুত করুন।
ক্লাউড ভিশন কল করার জন্য, ছবিটিকে অবশ্যই একটি বেস৬৪-এনকোডেড স্ট্রিং হিসাবে ফরম্যাট করতে হবে। একটিUIImage প্রসেস করতে: সুইফট
guard let imageData = uiImage.jpegData(compressionQuality: 1.0) else { return } let base64encodedImage = imageData.base64EncodedString()
উদ্দেশ্য-সি
NSData *imageData = UIImageJPEGRepresentation(uiImage, 1.0f); NSString *base64encodedImage = [imageData base64EncodedStringWithOptions:NSDataBase64Encoding76CharacterLineLength];
২. টেক্সট শনাক্ত করার জন্য কলযোগ্য ফাংশনটি আহ্বান করুন।
একটি ছবিতে ল্যান্ডমার্ক শনাক্ত করতে, একটি JSON ক্লাউড ভিশন রিকোয়েস্ট পাস করে কলযোগ্য ফাংশনটি চালু করুন।প্রথমে, ক্লাউড ফাংশনসের একটি ইনস্ট্যান্স তৈরি করুন:
সুইফট
lazy var functions = Functions.functions()উদ্দেশ্য-সি
@property(strong, nonatomic) FIRFunctions *functions;অনুরোধটি তৈরি করুন। ক্লাউড ভিশন এপিআই দুই ধরনের টেক্সট ডিটেকশন সমর্থন করে:
TEXT_DETECTIONএবংDOCUMENT_TEXT_DETECTION। এই দুটি ব্যবহারের ক্ষেত্রের মধ্যে পার্থক্য জানতে ক্লাউড ভিশন ওসিআর ডক্স দেখুন।সুইফট
let requestData = [ "image": ["content": base64encodedImage], "features": ["type": "TEXT_DETECTION"], "imageContext": ["languageHints": ["en"]] ]উদ্দেশ্য-সি
NSDictionary *requestData = @{ @"image": @{@"content": base64encodedImage}, @"features": @{@"type": @"TEXT_DETECTION"}, @"imageContext": @{@"languageHints": @[@"en"]} };অবশেষে, ফাংশনটি কল করুন:
সুইফট
do { let result = try await functions.httpsCallable("annotateImage").call(requestData) print(result) } catch { if let error = error as NSError? { if error.domain == FunctionsErrorDomain { let code = FunctionsErrorCode(rawValue: error.code) let message = error.localizedDescription let details = error.userInfo[FunctionsErrorDetailsKey] } // ... } }উদ্দেশ্য-সি
[[_functions HTTPSCallableWithName:@"annotateImage"] callWithObject:requestData completion:^(FIRHTTPSCallableResult * _Nullable result, NSError * _Nullable error) { if (error) { if ([error.domain isEqualToString:@"com.firebase.functions"]) { FIRFunctionsErrorCode code = error.code; NSString *message = error.localizedDescription; NSObject *details = error.userInfo[@"details"]; } // ... } // Function completed succesfully // Get information about labeled objects }];
৩. শনাক্তকৃত টেক্সটের ব্লকগুলো থেকে টেক্সট বের করুন।
টেক্সট শনাক্তকরণ অপারেশন সফল হলে, টাস্কের ফলাফলে BatchAnnotateImagesResponse নামের একটি JSON রেসপন্স ফেরত দেওয়া হবে। টেক্সট অ্যানোটেশনগুলো fullTextAnnotation অবজেক্টের মধ্যে পাওয়া যাবে।
আপনি text ফিল্ডে শনাক্তকৃত টেক্সটটি একটি স্ট্রিং হিসেবে পেতে পারেন। উদাহরণস্বরূপ:
সুইফট
let annotation = result.flatMap { $0.data as? [String: Any] }
.flatMap { $0["fullTextAnnotation"] }
.flatMap { $0 as? [String: Any] }
guard let annotation = annotation else { return }
if let text = annotation["text"] as? String {
print("Complete annotation: \(text)")
}
উদ্দেশ্য-সি
NSDictionary *annotation = result.data[@"fullTextAnnotation"];
if (!annotation) { return; }
NSLog(@"\nComplete annotation:");
NSLog(@"\n%@", annotation[@"text"]);
আপনি ছবির নির্দিষ্ট অঞ্চল সম্পর্কিত তথ্যও পেতে পারেন। প্রতিটি block , paragraph , word এবং symbol জন্য, আপনি সেই অঞ্চলে শনাক্তকৃত লেখা এবং সেই অঞ্চলের সীমানার স্থানাঙ্ক পেতে পারেন। উদাহরণস্বরূপ:
সুইফট
guard let pages = annotation["pages"] as? [[String: Any]] else { return }
for page in pages {
var pageText = ""
guard let blocks = page["blocks"] as? [[String: Any]] else { continue }
for block in blocks {
var blockText = ""
guard let paragraphs = block["paragraphs"] as? [[String: Any]] else { continue }
for paragraph in paragraphs {
var paragraphText = ""
guard let words = paragraph["words"] as? [[String: Any]] else { continue }
for word in words {
var wordText = ""
guard let symbols = word["symbols"] as? [[String: Any]] else { continue }
for symbol in symbols {
let text = symbol["text"] as? String ?? ""
let confidence = symbol["confidence"] as? Float ?? 0.0
wordText += text
print("Symbol text: \(text) (confidence: \(confidence)%n")
}
let confidence = word["confidence"] as? Float ?? 0.0
print("Word text: \(wordText) (confidence: \(confidence)%n%n")
let boundingBox = word["boundingBox"] as? [Float] ?? [0.0, 0.0, 0.0, 0.0]
print("Word bounding box: \(boundingBox.description)%n")
paragraphText += wordText
}
print("%nParagraph: %n\(paragraphText)%n")
let boundingBox = paragraph["boundingBox"] as? [Float] ?? [0.0, 0.0, 0.0, 0.0]
print("Paragraph bounding box: \(boundingBox)%n")
let confidence = paragraph["confidence"] as? Float ?? 0.0
print("Paragraph Confidence: \(confidence)%n")
blockText += paragraphText
}
pageText += blockText
}
}
উদ্দেশ্য-সি
for (NSDictionary *page in annotation[@"pages"]) {
NSMutableString *pageText = [NSMutableString new];
for (NSDictionary *block in page[@"blocks"]) {
NSMutableString *blockText = [NSMutableString new];
for (NSDictionary *paragraph in block[@"paragraphs"]) {
NSMutableString *paragraphText = [NSMutableString new];
for (NSDictionary *word in paragraph[@"words"]) {
NSMutableString *wordText = [NSMutableString new];
for (NSDictionary *symbol in word[@"symbols"]) {
NSString *text = symbol[@"text"];
[wordText appendString:text];
NSLog(@"Symbol text: %@ (confidence: %@\n", text, symbol[@"confidence"]);
}
NSLog(@"Word text: %@ (confidence: %@\n\n", wordText, word[@"confidence"]);
NSLog(@"Word bounding box: %@\n", word[@"boundingBox"]);
[paragraphText appendString:wordText];
}
NSLog(@"\nParagraph: \n%@\n", paragraphText);
NSLog(@"Paragraph bounding box: %@\n", paragraph[@"boundingBox"]);
NSLog(@"Paragraph Confidence: %@\n", paragraph[@"confidence"]);
[blockText appendString:paragraphText];
}
[pageText appendString:blockText];
}
}