List of all items
Structs
- _IO_FILE
- _IO_codecvt
- _IO_marker
- _IO_wide_data
- ggml_backend
- ggml_backend_buffer
- ggml_backend_buffer_type
- ggml_backend_event
- ggml_backend_graph_copy
- ggml_backend_sched
- ggml_cgraph
- ggml_compute_params
- ggml_context
- ggml_cplan
- ggml_gallocr
- ggml_hash_set
- ggml_init_params
- ggml_object
- ggml_opt_context
- ggml_opt_context__bindgen_ty_1
- ggml_opt_context__bindgen_ty_2
- ggml_opt_params
- ggml_opt_params__bindgen_ty_1
- ggml_opt_params__bindgen_ty_2
- ggml_scratch
- ggml_tallocr
- ggml_tensor
- ggml_type_traits_t
- llama_batch
- llama_beam_view
- llama_beams_state
- llama_chat_message
- llama_context
- llama_context_params
- llama_grammar
- llama_grammar_element
- llama_kv_cache_view
- llama_kv_cache_view_cell
- llama_model
- llama_model_kv_override
- llama_model_params
- llama_model_quantize_params
- llama_timings
- llama_token_data
- llama_token_data_array
Enums
- ggml_backend_buffer_usage
- ggml_backend_type
- ggml_cgraph_eval_order
- ggml_ftype
- ggml_linesearch
- ggml_log_level
- ggml_numa_strategy
- ggml_object_type
- ggml_op
- ggml_op_pool
- ggml_opt_result
- ggml_opt_type
- ggml_prec
- ggml_sort_order
- ggml_status
- ggml_task_type
- ggml_tensor_flag
- ggml_type
- ggml_unary_op
- llama_ftype
- llama_model_kv_override_type
- llama_pooling_type
- llama_rope_scaling_type
- llama_rope_type
- llama_split_mode
- llama_token_type
- llama_vocab_type
Unions
Functions
- ggml_abs
- ggml_abs_inplace
- ggml_acc
- ggml_acc_inplace
- ggml_add
- ggml_add1
- ggml_add1_inplace
- ggml_add_cast
- ggml_add_inplace
- ggml_add_rel_pos
- ggml_add_rel_pos_inplace
- ggml_alibi
- ggml_arange
- ggml_are_same_shape
- ggml_argmax
- ggml_argsort
- ggml_backend_alloc_buffer
- ggml_backend_alloc_ctx_tensors
- ggml_backend_alloc_ctx_tensors_from_buft
- ggml_backend_buffer_clear
- ggml_backend_buffer_free
- ggml_backend_buffer_get_alignment
- ggml_backend_buffer_get_alloc_size
- ggml_backend_buffer_get_base
- ggml_backend_buffer_get_max_size
- ggml_backend_buffer_get_size
- ggml_backend_buffer_get_type
- ggml_backend_buffer_init_tensor
- ggml_backend_buffer_is_host
- ggml_backend_buffer_name
- ggml_backend_buffer_reset
- ggml_backend_buffer_set_usage
- ggml_backend_buft_alloc_buffer
- ggml_backend_buft_get_alignment
- ggml_backend_buft_get_alloc_size
- ggml_backend_buft_get_max_size
- ggml_backend_buft_is_host
- ggml_backend_buft_name
- ggml_backend_buft_supports_backend
- ggml_backend_compare_graph_backend
- ggml_backend_cpu_buffer_from_ptr
- ggml_backend_cpu_buffer_type
- ggml_backend_cpu_init
- ggml_backend_cpu_set_abort_callback
- ggml_backend_cpu_set_n_threads
- ggml_backend_event_free
- ggml_backend_event_new
- ggml_backend_event_record
- ggml_backend_event_synchronize
- ggml_backend_event_wait
- ggml_backend_free
- ggml_backend_get_alignment
- ggml_backend_get_default_buffer_type
- ggml_backend_get_max_size
- ggml_backend_graph_compute
- ggml_backend_graph_compute_async
- ggml_backend_graph_copy
- ggml_backend_graph_copy_free
- ggml_backend_graph_plan_compute
- ggml_backend_graph_plan_create
- ggml_backend_graph_plan_free
- ggml_backend_guid
- ggml_backend_is_cpu
- ggml_backend_name
- ggml_backend_offload_op
- ggml_backend_reg_alloc_buffer
- ggml_backend_reg_find_by_name
- ggml_backend_reg_get_count
- ggml_backend_reg_get_default_buffer_type
- ggml_backend_reg_get_name
- ggml_backend_reg_init_backend
- ggml_backend_reg_init_backend_from_str
- ggml_backend_sched_alloc_graph
- ggml_backend_sched_free
- ggml_backend_sched_get_buffer_size
- ggml_backend_sched_get_n_copies
- ggml_backend_sched_get_n_splits
- ggml_backend_sched_get_tensor_backend
- ggml_backend_sched_graph_compute
- ggml_backend_sched_graph_compute_async
- ggml_backend_sched_new
- ggml_backend_sched_reserve
- ggml_backend_sched_reset
- ggml_backend_sched_set_eval_callback
- ggml_backend_sched_set_tensor_backend
- ggml_backend_sched_synchronize
- ggml_backend_supports_op
- ggml_backend_synchronize
- ggml_backend_tensor_alloc
- ggml_backend_tensor_copy
- ggml_backend_tensor_copy_async
- ggml_backend_tensor_get
- ggml_backend_tensor_get_async
- ggml_backend_tensor_set
- ggml_backend_tensor_set_async
- ggml_backend_view_init
- ggml_blck_size
- ggml_build_backward_expand
- ggml_build_backward_gradient_checkpointing
- ggml_build_forward_expand
- ggml_cast
- ggml_clamp
- ggml_concat
- ggml_cont
- ggml_cont_1d
- ggml_cont_2d
- ggml_cont_3d
- ggml_cont_4d
- ggml_conv_1d
- ggml_conv_1d_ph
- ggml_conv_2d
- ggml_conv_2d_s1_ph
- ggml_conv_2d_sk_p0
- ggml_conv_depthwise_2d
- ggml_conv_transpose_1d
- ggml_conv_transpose_2d_p0
- ggml_cpu_has_arm_fma
- ggml_cpu_has_avx
- ggml_cpu_has_avx2
- ggml_cpu_has_avx512
- ggml_cpu_has_avx512_vbmi
- ggml_cpu_has_avx512_vnni
- ggml_cpu_has_avx_vnni
- ggml_cpu_has_blas
- ggml_cpu_has_clblast
- ggml_cpu_has_cuda
- ggml_cpu_has_f16c
- ggml_cpu_has_fma
- ggml_cpu_has_fp16_va
- ggml_cpu_has_gpublas
- ggml_cpu_has_kompute
- ggml_cpu_has_matmul_int8
- ggml_cpu_has_metal
- ggml_cpu_has_neon
- ggml_cpu_has_sse3
- ggml_cpu_has_ssse3
- ggml_cpu_has_sycl
- ggml_cpu_has_vsx
- ggml_cpu_has_vulkan
- ggml_cpu_has_wasm_simd
- ggml_cpy
- ggml_cross_entropy_loss
- ggml_cross_entropy_loss_back
- ggml_cycles
- ggml_cycles_per_ms
- ggml_diag
- ggml_diag_mask_inf
- ggml_diag_mask_inf_inplace
- ggml_diag_mask_zero
- ggml_diag_mask_zero_inplace
- ggml_div
- ggml_div_inplace
- ggml_dup
- ggml_dup_inplace
- ggml_dup_tensor
- ggml_element_size
- ggml_elu
- ggml_elu_inplace
- ggml_flash_attn
- ggml_flash_attn_back
- ggml_flash_ff
- ggml_fopen
- ggml_format_name
- ggml_fp16_to_fp32
- ggml_fp16_to_fp32_row
- ggml_fp32_to_fp16
- ggml_fp32_to_fp16_row
- ggml_free
- ggml_ftype_to_ggml_type
- ggml_gallocr_alloc_graph
- ggml_gallocr_free
- ggml_gallocr_get_buffer_size
- ggml_gallocr_new
- ggml_gallocr_new_n
- ggml_gallocr_reserve
- ggml_gallocr_reserve_n
- ggml_gelu
- ggml_gelu_inplace
- ggml_gelu_quick
- ggml_gelu_quick_inplace
- ggml_get_data
- ggml_get_data_f32
- ggml_get_f32_1d
- ggml_get_f32_nd
- ggml_get_first_tensor
- ggml_get_i32_1d
- ggml_get_i32_nd
- ggml_get_max_tensor_size
- ggml_get_mem_buffer
- ggml_get_mem_size
- ggml_get_name
- ggml_get_next_tensor
- ggml_get_no_alloc
- ggml_get_rel_pos
- ggml_get_rows
- ggml_get_rows_back
- ggml_get_tensor
- ggml_get_unary_op
- ggml_graph_clear
- ggml_graph_compute
- ggml_graph_compute_with_ctx
- ggml_graph_cpy
- ggml_graph_dump_dot
- ggml_graph_dup
- ggml_graph_export
- ggml_graph_get_tensor
- ggml_graph_import
- ggml_graph_overhead
- ggml_graph_overhead_custom
- ggml_graph_plan
- ggml_graph_print
- ggml_graph_reset
- ggml_graph_view
- ggml_group_norm
- ggml_group_norm_inplace
- ggml_guid_matches
- ggml_hardsigmoid
- ggml_hardswish
- ggml_im2col
- ggml_init
- ggml_internal_get_type_traits
- ggml_is_3d
- ggml_is_contiguous
- ggml_is_empty
- ggml_is_matrix
- ggml_is_numa
- ggml_is_permuted
- ggml_is_quantized
- ggml_is_scalar
- ggml_is_transposed
- ggml_is_vector
- ggml_leaky_relu
- ggml_log
- ggml_log_inplace
- ggml_map_binary_f32
- ggml_map_binary_inplace_f32
- ggml_map_custom1
- ggml_map_custom1_f32
- ggml_map_custom1_inplace
- ggml_map_custom1_inplace_f32
- ggml_map_custom2
- ggml_map_custom2_f32
- ggml_map_custom2_inplace
- ggml_map_custom2_inplace_f32
- ggml_map_custom3
- ggml_map_custom3_f32
- ggml_map_custom3_inplace
- ggml_map_custom3_inplace_f32
- ggml_map_unary_f32
- ggml_map_unary_inplace_f32
- ggml_mean
- ggml_mul
- ggml_mul_inplace
- ggml_mul_mat
- ggml_mul_mat_id
- ggml_mul_mat_set_prec
- ggml_n_dims
- ggml_nbytes
- ggml_nbytes_pad
- ggml_neg
- ggml_neg_inplace
- ggml_nelements
- ggml_new_f32
- ggml_new_graph
- ggml_new_graph_custom
- ggml_new_i32
- ggml_new_tensor
- ggml_new_tensor_1d
- ggml_new_tensor_2d
- ggml_new_tensor_3d
- ggml_new_tensor_4d
- ggml_norm
- ggml_norm_inplace
- ggml_nrows
- ggml_numa_init
- ggml_op_desc
- ggml_op_name
- ggml_op_symbol
- ggml_opt
- ggml_opt_default_params
- ggml_opt_init
- ggml_opt_resume
- ggml_opt_resume_g
- ggml_out_prod
- ggml_pad
- ggml_permute
- ggml_pool_1d
- ggml_pool_2d
- ggml_print_backtrace
- ggml_print_object
- ggml_print_objects
- ggml_quantize_chunk
- ggml_quantize_free
- ggml_quantize_init
- ggml_quantize_requires_imatrix
- ggml_relu
- ggml_relu_inplace
- ggml_repeat
- ggml_repeat_back
- ggml_reshape
- ggml_reshape_1d
- ggml_reshape_2d
- ggml_reshape_3d
- ggml_reshape_4d
- ggml_rms_norm
- ggml_rms_norm_back
- ggml_rms_norm_inplace
- ggml_rope
- ggml_rope_back
- ggml_rope_custom
- ggml_rope_custom_inplace
- ggml_rope_inplace
- ggml_rope_xpos_inplace
- ggml_rope_yarn_corr_dims
- ggml_row_size
- ggml_scale
- ggml_scale_inplace
- ggml_set
- ggml_set_1d
- ggml_set_1d_inplace
- ggml_set_2d
- ggml_set_2d_inplace
- ggml_set_f32
- ggml_set_f32_1d
- ggml_set_f32_nd
- ggml_set_i32
- ggml_set_i32_1d
- ggml_set_i32_nd
- ggml_set_inplace
- ggml_set_input
- ggml_set_name
- ggml_set_no_alloc
- ggml_set_output
- ggml_set_param
- ggml_set_scratch
- ggml_set_zero
- ggml_sgn
- ggml_sgn_inplace
- ggml_silu
- ggml_silu_back
- ggml_silu_inplace
- ggml_soft_max
- ggml_soft_max_back
- ggml_soft_max_back_inplace
- ggml_soft_max_ext
- ggml_soft_max_inplace
- ggml_sqr
- ggml_sqr_inplace
- ggml_sqrt
- ggml_sqrt_inplace
- ggml_ssm_conv
- ggml_ssm_scan
- ggml_status_to_string
- ggml_step
- ggml_step_inplace
- ggml_sub
- ggml_sub_inplace
- ggml_sum
- ggml_sum_rows
- ggml_tallocr_alloc
- ggml_tallocr_new
- ggml_tanh
- ggml_tanh_inplace
- ggml_tensor_overhead
- ggml_time_init
- ggml_time_ms
- ggml_time_us
- ggml_timestep_embedding
- ggml_top_k
- ggml_transpose
- ggml_type_name
- ggml_type_size
- ggml_type_sizef
- ggml_unary
- ggml_unary_inplace
- ggml_unary_op_name
- ggml_unravel_index
- ggml_upscale
- ggml_used_mem
- ggml_view_1d
- ggml_view_2d
- ggml_view_3d
- ggml_view_4d
- ggml_view_tensor
- ggml_win_part
- ggml_win_unpart
- llama_add_bos_token
- llama_add_eos_token
- llama_backend_free
- llama_backend_init
- llama_batch_free
- llama_batch_get_one
- llama_batch_init
- llama_beam_search
- llama_chat_apply_template
- llama_context_default_params
- llama_control_vector_apply
- llama_copy_state_data
- llama_decode
- llama_dump_timing_info_yaml
- llama_free
- llama_free_model
- llama_get_embeddings
- llama_get_embeddings_ith
- llama_get_embeddings_seq
- llama_get_kv_cache_token_count
- llama_get_kv_cache_used_cells
- llama_get_logits
- llama_get_logits_ith
- llama_get_model
- llama_get_model_tensor
- llama_get_state_size
- llama_get_timings
- llama_grammar_accept_token
- llama_grammar_copy
- llama_grammar_free
- llama_grammar_init
- llama_kv_cache_clear
- llama_kv_cache_defrag
- llama_kv_cache_seq_add
- llama_kv_cache_seq_cp
- llama_kv_cache_seq_div
- llama_kv_cache_seq_keep
- llama_kv_cache_seq_pos_max
- llama_kv_cache_seq_rm
- llama_kv_cache_update
- llama_kv_cache_view_free
- llama_kv_cache_view_init
- llama_kv_cache_view_update
- llama_load_model_from_file
- llama_load_session_file
- llama_log_set
- llama_max_devices
- llama_model_apply_lora_from_file
- llama_model_default_params
- llama_model_desc
- llama_model_meta_count
- llama_model_meta_key_by_index
- llama_model_meta_val_str
- llama_model_meta_val_str_by_index
- llama_model_n_params
- llama_model_quantize
- llama_model_quantize_default_params
- llama_model_size
- llama_n_batch
- llama_n_ctx
- llama_n_ctx_train
- llama_n_embd
- llama_n_layer
- llama_n_seq_max
- llama_n_ubatch
- llama_n_vocab
- llama_new_context_with_model
- llama_numa_init
- llama_print_system_info
- llama_print_timings
- llama_reset_timings
- llama_rope_freq_scale_train
- llama_rope_type
- llama_sample_apply_guidance
- llama_sample_entropy
- llama_sample_grammar
- llama_sample_min_p
- llama_sample_repetition_penalties
- llama_sample_softmax
- llama_sample_tail_free
- llama_sample_temp
- llama_sample_token
- llama_sample_token_greedy
- llama_sample_token_mirostat
- llama_sample_token_mirostat_v2
- llama_sample_top_k
- llama_sample_top_p
- llama_sample_typical
- llama_save_session_file
- llama_set_abort_callback
- llama_set_causal_attn
- llama_set_n_threads
- llama_set_rng_seed
- llama_set_state_data
- llama_split_path
- llama_split_prefix
- llama_supports_gpu_offload
- llama_supports_mlock
- llama_supports_mmap
- llama_synchronize
- llama_time_us
- llama_token_bos
- llama_token_eos
- llama_token_eot
- llama_token_get_score
- llama_token_get_text
- llama_token_get_type
- llama_token_middle
- llama_token_nl
- llama_token_prefix
- llama_token_suffix
- llama_token_to_piece
- llama_tokenize
- llama_vocab_type
Type Aliases
- FILE
- _IO_lock_t
- __off64_t
- __off_t
- ggml_abort_callback
- ggml_backend_buffer_t
- ggml_backend_buffer_type_t
- ggml_backend_eval_callback
- ggml_backend_event_t
- ggml_backend_graph_plan_t
- ggml_backend_sched_eval_callback
- ggml_backend_sched_t
- ggml_backend_t
- ggml_binary_op_f32_t
- ggml_custom1_op_f32_t
- ggml_custom1_op_t
- ggml_custom2_op_f32_t
- ggml_custom2_op_t
- ggml_custom3_op_f32_t
- ggml_custom3_op_t
- ggml_fp16_t
- ggml_from_float_t
- ggml_gallocr_t
- ggml_guid
- ggml_guid_t
- ggml_log_callback
- ggml_opt_callback
- ggml_to_float_t
- ggml_unary_op_f32_t
- ggml_vec_dot_t
- llama_beam_search_callback_fn_t
- llama_gretype
- llama_pos
- llama_progress_callback
- llama_seq_id
- llama_token