multibyte_split.hpp

转到此文件的文档。

/*
 * 版权所有 (c) 2021-2025, NVIDIA CORPORATION.
 *
 * 根据 Apache 许可，版本 2.0 (以下简称“许可”) 获得许可；
 * 除非遵守许可的规定，否则您不得使用此文件。
 * 您可以获得许可的副本，网址为
 *
 * https://apache.ac.cn/licenses/LICENSE-2.0
 *
 * 除非适用法律要求或书面同意，否则根据许可分发的软件按“原样”分发，
 * 没有任何形式的明示或暗示的保证，包括但不限于适销性、特定用途的适用性和非侵权性的保证。
 * 有关特定语言的许可权限和限制，请参阅许可。
 * limitations under the License.
 */
 */

#pragma once

#include <cudf/column/column.hpp>
#include <cudf/io/text/byte_range_info.hpp>
#include <cudf/io/text/data_chunk_source.hpp>
#include <cudf/utilities/memory_resource.hpp>

#include <rmm/mr/device/device_memory_resource.hpp>

#include <memory>
#include <optional>
#include <string_view>

namespace CUDF_EXPORT cudf {
namespace io {
namespace text {
struct parse_options {
 byte_range_info byte_range = create_byte_range_info_max();
 bool strip_delimiters = false;
};

std::unique_ptr<cudf::column> multibyte_split(
 data_chunk_source const& source,
 std::string_view delimiter,
 parse_options options = {},
 rmm::cuda_stream_view stream = cudf::get_default_stream(),
 rmm::device_async_resource_ref mr = cudf::get_current_device_resource_ref());
 // 组结束

} // namespace text
} // namespace io
} // namespace CUDF_EXPORT cudf