folly/Unicode.h

   1 /*
   2  * Copyright 2017 Facebook, Inc.
   3  *
   4  * Licensed under the Apache License, Version 2.0 (the "License");
   5  * you may not use this file except in compliance with the License.
   6  * You may obtain a copy of the License at
   7  *
   8  *   http://www.apache.org/licenses/LICENSE-2.0
   9  *
  10  * Unless required by applicable law or agreed to in writing, software
  11  * distributed under the License is distributed on an "AS IS" BASIS,
  12  * WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  13  * See the License for the specific language governing permissions and
  14  * limitations under the License.
  15  */
  16
  17 // Some utility routines relating to unicode.
  18
  19 #pragma once
  20
  21 #include <string>
  22
  23 namespace folly {
  24
  25 //////////////////////////////////////////////////////////////////////
  26
  27 /*
  28  * Encode a single unicode code point into a UTF-8 byte sequence.
  29  *
  30  * Return value is undefined if `cp' is an invalid code point.
  31  */
  32 std::string codePointToUtf8(char32_t cp);
  33
  34 /*
  35  * Decode a single unicode code point from UTF-8 byte sequence.
  36  */
  37 char32_t utf8ToCodePoint(
  38     const unsigned char*& p,
  39     const unsigned char* const e,
  40     bool skipOnError);
  41
  42 //////////////////////////////////////////////////////////////////////
  43
  44 } // namespace folly